加入收藏 | 设为首页 | 会员中心 | 我要投稿 应用网_阳江站长网 (https://www.0662zz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 运营中心 > 产品 > 正文

南方电网数据中心实时数据服务平台、数据工厂等多个平台功能正式投运

发布时间:2020-01-14 11:27:39 所属栏目:产品 来源:北极星输配电网
导读:随着云大物移智等数字化技术和应用的蓬勃发展,国家将依托于数字资产的数字经济作为经济结构转型的重要手段,提出建设数字中国的战略。 当前,南方电网公司紧紧把握第四次工业革命的历史机遇,将数字化作为公司战略转型的重要路径,重点围绕数字电网、数字

在数据存储方面,数据中心采用的数据库技术门类齐全,支撑的应用场景丰富:利用MPP分布式并行存储(MPP)技术,支撑了公司企业级运管和专业域运管、统计报表和实时指标类数据应用;利用分布式列式存储(HBase)和分布式全文搜索技术(Elastic-search),支撑了微信账单、移动营销等应用;借助分布式结构化存储技术(Kudu),支撑数字乌当、海南掌厅等应用;借助实时数据存储技术,支撑了对时序大数据的存储和处理;借助对象存储技术,实现了对协同办公系统、电子商务系统、数字档案馆、机巡管理系统中的图档、文件、机巡图片等非结构化数据的统一托管存储。截至目前,数据中心用于数据存储的服务器共421台,可用存储达21.34PB,通过弹性扩容能力逐步承载公司全域数据的存储需求。

在数据服务组件方面,打造数据中心服务组件层,沉淀公共数据服务,提升数据服务标准化水平和服务敏捷性。2019年,数据中心打造了统一门户、数据工厂、自助分析、数据服务引擎等能力服务,为数据“原材料”的快速加工和有效沉淀提供了支撑,各级员工可利用一站式的数据开发模块开展数据全流程处理、数据可视化展示、数据自助分析等应用,为加速数据分析应用迭代、员工自主分析、内部数据供给提供了能力保障。

在数据安全方面,南方电网公司构建起关键领域和敏感信息“进不来、拿不走、打不开、赖不掉”的四道信息安全防线,确保在不影响业务、不降低性能的前提下,对数据中心数据构建了入口加密、出口脱敏、全程审计的数据安全防护能力。在数据加密方面,已完成对生产管理区重要数据的加密,消除了明文存储引起的数据泄露隐患;在数据脱敏方面,已实现测试区所有数据均为脱敏数据,生产区数据可按需进行动态脱敏;在数据审计方面,目前已实现对数据库操作行为的全面监测与审计,能够及时发现非法违规操作并实时告警,也可以做到主动防御和攻击留痕,基本达到实时审计、全过程审计和安全问题可追溯的要求。

展望未来

数据中心作为支撑南方电网数字化转型的基础数据底座,将成为释放大数据价值的新引擎

2020年,数据中心将在《大数据技术与应用发展专项规划》的总体指导下,以平台升级完善和应用建设为抓手,数据治理和数据安全保障为两翼,完成支撑数字化转型的基础数据底座建设,实现全域数据可信汇聚、多元服务按需供给、业务发展全面驱动、数据安全全面保障,进一步促进大数据技术与业务深度融合,打造成为南方电网公司释放大数据价值的新引擎。

在南方电网公司数字化转型的工作部署下,数据中心将继续从制度标准、数据平台、数据供给、数据管理、数据应用和数据安全六个方面入手推动相关建设:

在制度标准方面,持续完善大数据领域相关制度标准和技术规范的编制与发布,让南方电网公司基础数据管控工作有法可依,有章可循。

在基础平台方面,开展数据中心相关平台与应用有序上云,实现“云数一体”;推动数据湖建设,实现南方电网公司多源异构数据的统一汇聚和全面融合,同步支撑分析型与事务型业务应用;持续开展数据服务化能力建设,为各类业务平台和数据应用提供敏捷、高效、准确的数据供给;建立数据端到端的全链路业务监控,支撑数据多方位监控和分析,为提高数据质量提供支撑。

在数据供给方面,持续拓展数据接入与供给范围。进一步提升南方电网公司对调度、计量、设备状态监测三大自动化域的实时数据接入范围和频次,同时扩展至物联网数据的全面接入;向各业务应用提供更加高效的非结构化数据接入和支撑;结合各单位对外部数据的需求,统筹开展外部数据的统一接入和对外共享服务。

在数据管理方面,完善制度标准并开展常态化管控与专项行动,提升对南方电网公司各类平台和应用建设的数据质量保障。按照“三不”原则,持续开展常态化数据强管控工作,覆盖数据标准、数据模型与数据技术路线。组织业务部门和各分子公司开展进一步提升南方电网公司数据质量专项行动。

在数据应用方面,致力数据服务于南方电网公司领导层、管理层与基层全覆盖,“点面结合”开展数据应用建设推广工作,全方位释放数据价值。“点”上寻突破,基于公司数据中心算力的提升,选取实时算费、电费复核等典型大数据应用场景,开展大数据技术与业务的深度融合建设;“面”上重普及,通过自助分析工具等能力的推广和深化应用,让数据供给服务范围覆盖“网、省、地、县”各级员工,切实满足不同层级对数据的需求。

在数据安全方面,数据中心将按照国家等保2.0中第三级系统的安全防护要求,深化本体安全及数据全生命周期安全防护建设。率先完成数据中心同城容灾的建设,同步完成异地灾备技术路线验证。

■基层声音

非结构化数据服务平台上线后,将各单位原本离散存储的机巡照片、视频等非结构化数据集中存储、管理,为后续缺陷照片标注、机器学习算法训练奠定坚实基础,方便人工智能等数字化转型新技术的深化应用。

——超高压公司生技部专责 简洪宇

机巡管理系统的图片、视频等数据于2019年10月接入到公司数据中心非结构化数据服务平台,大大降低了系统存储压力,机巡作业人员对杆塔、线路、绝缘子等故障点的查询、统计和分析更加快捷便利。

——广西电网公司生技部专责 于荣华

通过实时数据服务平台采集计量自动化、调度自动化等电网实时数据,实现了电量、负荷数据的实时同步,为提升基层供电所台区线损管理及异常分析水平,缩短用户停电抢修时间,提升供电服务能力提供了关键的数据支撑。

——云南电网公司科信部 董灿

实时数据平台在应用支撑过程中针对业务需求提供了相应的数据保障,能满足应用端对数据实时性、完整性的要求,平台提供接口服务监控功能,对数据支撑过程中的接口服务情况能很清晰地通过界面了解,及时响应处理问题,平台服务得到客户的一致认可。

——广东电网公司信息中心专责 谢瀚阳

通过数据中心自助分析工具可视化的数据分析方式,有效解决了都匀供电局缺陷消缺率和消缺及时率到分县局的统计需求。极大地缩短我局获取数据、分析数据的时间。自助分析工具结合不同的应用场景,开展自助分析,成为基层数据分析、洞察数据的有力帮手。

——贵州省电网公司都匀供电局班长 郎家均

■案例

1 补齐非结构化数据服务“短板”

■成果介绍

公司数据中心非结构化数据服务平台补全了公司对非结构化数据的服务短板,实现了对非结构化数据的管理,为公司各类文档、图片、音频、视频等非结构化数据提供统一的PB级存储、调用访问、处理和供给等服务能力。

■应用情况

(编辑:应用网_阳江站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!