发电行业数据底座整体解决方案

星环科技凭借自身在大数据、人工智能等领域多年来积累的技术优势和实践经验能够为水电行业打造基于国产基础软件的新一代数据底座实现海量数据实时接入及应用。在方案中所有时序数据通过实时接口统一接入星环科技分布式时序数据库Transwarp Timelyre关系型数据接入关系型分析引擎Transwarp Inceptor关系库非结构化数据接入对象存储平台。然后对时序数据、关系数据进行主题建模和维度建模将建模结果直接写星环科技分布式数据库入ArgoDB中形成DWD和DWS层。并在ArogDB中面向应用分析构建数据指标宽表、应用主题数据等数据集市层。这里有几个很关键的联合分析技术一个是“序关分析”举个例子我们在做故障预警算法开发的过程中需要提取故障特征通过历史设备台账数据一般存在关系型数据库把所有设备的故障开始时间、故障结束时间故障类型等拿出来关联时序数据库找到设备故障时刻的测点值这些值要提取出来作为样本进行AI模型训练。另外一个是流上机器学习与流批一体按照上面的例子训练完模型后需要部署在实时计算引擎上与离线库中的档案数据表等构建实时故障预警模型对同步到Ⅲ区的实时数据进行分析预警一旦设备故障能马上识别出来。整体技术架构优势① 分布式时序数据库TimeLyre支持实时、批量等多种数据写入方式。实时写入具备多并发、每秒千万级数据点插入的性能可以保证数据检索的实效性满足水电实时数仓的海量实时同步性能要求。②相较于Hadoop体系的Hive等分析库TimeLyre采用列式存储内置多种索引结构时序数据的检索将达到毫秒级的低延迟响应。在基于时间范围的检索与统计分析场景中有着很快的巨大优势。相较于传统时序库、Hbase等Timelyre使用分布式向量化计算引擎可使用标准SQL进行海量时序数据的计算与分析可以支撑起海量工业时序数据的聚合、关联分析可以和分布式数据库ArgoDB跨库关联满足多种业务场景的查询与分析。彻底解决传统时序库大数据平台的“双数据湖”存储时序数据的困境。③TimeLyre拥有超高的数据压缩率。无损数据压缩支持多种数据类型、多种编码方式、多种压缩算法数据压缩率可以达到10-50倍同时星环科技可以提供有损数据压缩的解决方案数据将在一定精度内存储进一步提升了压缩率。超高的数据压缩率将有效解决海量存储空间的需求。④统一服务层提供各类数据查询、分析的统一SQL接口为前端BI、实时大屏、填报系统、设备预警系统等提供数据服务。