IT老兵告诉你数据中台和大数据平台有啥不一样？

2014年底海南移动搭建了12台的Hadoop节点，集群较简单，2015年海南移动每天接入5T上网信令，彼时传统架构的弊端更为明显，小机+数据库计算存储能力不足，扩容成本太高，单机文件采集吞吐量不足。为了解决以上弊端，海南移动构建了Hadoop管理和存储集群，包括分布式文件采集集群、分布式ETL调度集群、应用服务器、MySQL服务器，第一个Hadoop平台就此成型。

随后整个通信行业对用户的争夺异常激烈，需要快速定位用户进行精准营销。彼时海南移动的系统每天接入7T上网信令和5T位置信令，需要对信令实时采集、实时计算、实时事件捕捉，于是搭建了第一个流处理平台。

乍看Hadoop平台和流处理平台很相似，后者在前者基础上加了Kafka消息集群、实时事件处理集群、实时服务集群，两个系统在硬件层面整合到一起，但实际上各个系统独自处理各自的事务。团队认为如果继续采用原有方式构建，会形成烟囱数据。考虑到几个平台的技术栈较为相似，决定统一构建一个大数据平台。

王保强强调构建大数据平台的核心关键在于规划。在技术架构层面，包括硬件规划、磁盘规划、平台软件规划、内存库规划、数据流向规划、平台监控规划等都要做到位。当然除了规划还要在探索中实践，其最终的技术栈和功能视图如下：

企业级大数据平台实现结构化、半结构化和非结构化数据统一存储计算功能，通过数据封装提供服务功能，提供自助报表工具，面向市场、网络以及企业外部提供服务。

大数据平台构建好以后，为了实现数据价值，团队以数据应用为中心构建企业数据模型，为实现内外部应用支撑，又建设了开放共享平台，提供数据服务和Open API服务，为了支持多应用厂家协作开发，又提供了多租户管理，安全管理、数据目录管理。

王保强认为大数据平台、经营分析、数据中台的发展都是一脉相承，都是以企业数据模型的开发为基础与核心，为数据中台的数据服务化做好了准备。在他看来，当初大数据平台的建设实际在向着数据中台的方向构建。

数据中台：生产资料到数据生产力

王保强认为数据中台是数据服务工厂，对于业务的价值是“加速数据到价值的过程，提高企业的响应能力。”是聚合和治理跨域数据，将数据封装成服务，提供给前台业务价值的一个逻辑概念。从这个角度上，与大数据平台的发展一脉相承。

如今在瞬息万变竞争更为激烈的市场，客户需要更准确的触达和更快速的响应，这一切都离不开数据的治理和应用，王保强认为建设数据中台要考虑如何支持业务创新形成核心壁垒。同时也考虑其成本低、能力多、应用广的技术价值，有丰富的标签、支持跨主题域访问数据，且数据可以复用。总结来看，数据中台是把生产资料转换成数据生产力的一个过程，让数据驱动决策和运营。

王保强总结数据中台需要必备汇聚整合、提纯加工、服务可视化和价值变现四个能力，大数据平可以认为是数据原材料采集到加工和存储的企业模型构建的地方，数据中台是数据服务，更多提供服务化方面的能力，让用户快速发现企业现有的数据资产，然后快速开发访问，实现数据资产的可视化，了解企业数据的来龙去脉，快速构建应用实现价值变现。

数据中台自诞生以来便伴随着赞美与争议，上图为王保强提出的数据中台架构，令笔者印象深刻的是他在课程直播时比较谦虚地说这个中台架构不一定对。总体来看在中国数据中台还处在一个探索阶段，希望企业能够结合自身业务做更多有益的尝试，多一些参考，也许就少一些试错成本，让中台有价值地落地。

（编辑：应用网_阳江站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!