北极星

搜索历史清空

  • 水处理
您的位置:电力输配电输配电智能用电技术正文

一文看懂电力大数据如何支撑全球能源互联网

2016-06-12 13:10来源:电力信息与通信技术作者:饶玮 蒋静 周爱华关键词:电力大数据能源互联网电力系统收藏点赞

投稿

我要投稿

电力大数据平台技术架构

电力大数据核心平台基于Hadoop、Spark、Stream框架的高度融合、深度优化,实现高性能计算,具有高可用性,其技术架构如图3所示。数据整合方面,主要采用Hadoop体系中的Flume、Sqoop、Kafka等独立组件;数据存储方面,在低成本硬件(X86)、磁盘的基础上,采用包括分布式文件系统、分布式关系型数据库、NoSQL数据库、实时数据库、内存数据库等业界典型系统;数据分析方面,集成Tableau、Pluto,R语言环境,实现数据的统计分析以及数据挖掘能力;监控管理方面,利用Ganglia,实现集群监控、服务监控、节点监控、性能监控、告警监控等管理服务;可视化展现方面,基于GIS、Flash、ECHART、HTML5等构建可视化展示模块。电力大数据平台技术架构见下图所示。

面向全球能源互联网的电力大数据总体架构

在基础设施部署架构及容量规划方面,电力大数据平台集群主要由数据存储服务器、接口服务器、集群管理服务器和应用服务器组成,支持存储与计算混合式架构以及广域分布的集群部署与管理。每个省集群由总共30台x86服务器和一台小型机组成,其中核心数据集群由25台构成;剩余5台服务器中,3台服务器组成消息总线集群,部署包括Kafka消息队列集群以及FTP传输入库集群,1台服务器作为集群登陆跳转以及RstudioServer服务节点,还有1台服务器作为ODBC/JDBC服务以及WebHTTP/REST服务节点。小型机作为关系型数据库以及时间序列数据库节点,部署方式如下图所示。

电力大数据标准体系

通过分析国内外大数据相关标准,并结合电力大数据技术、产品和应用需求,形成电力大数据标准规范18项,重点涵盖基础概念、数据采集、存储、计算、分析、展示、质量控制、安全防护、数据服务等8大方面,适用于全球能源互联网环境下电力大数据平台建设和相关标准编制,如下表所示。

延伸阅读:【学术前沿】基于大数据运用的能源监管研究与实践

原标题:【好文快报】饶玮,蒋静,周爱华,等. 面向全球能源互联网的电力大数据基础体系架构和标准体系研究
投稿与新闻线索:陈女士 微信/手机:13693626116 邮箱:chenchen#bjxmail.com(请将#改成@)

特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。

凡来源注明北极星*网的内容为北极星原创,转载需获授权。

电力大数据查看更多>能源互联网查看更多>电力系统查看更多>