IT老兵告诉你数据中台和大数据平台有啥不一样？

【IT168 评论】前几日一篇《“中台”是怎么臭了大街的》把“中台”这个风口又推到了浪尖，自2018年中台火了以后，冰火两重天，赞美和质疑之声从未间断。数据中台是什么？数据中台和大数据平台有啥不一样？相信是很多人的困惑。

ITPUB技术栈在疫情期间推出一系列线上沙龙活动主题包含大数据应用架构、存储与计算、数据治理与数据中台的建设、云计算的实践与探索，本期邀请到了IT老兵王保强，结合自身经验探讨大数据平台和数据中台的建设之道。

目前在南方电网旗下某IT公司任职的王保强主要负责数据治理工作，拥有21年IT工作经验，曾在海南移动负责数据仓库、大数据平台等项目，见证了从传统数据仓库转型到大数据平台的全历程，见证了大数据平台从0到1的全部过程，对数据中台也有自己独特的思考。

什么是数据中台？

现在各种新名词层出不穷，顶层的有智慧地球、智慧城市、城市大脑；企业层面的有数字化转型、互联网经济，数字经济、数字平台；平台层面的有物联网，云计算，大数据，5G，人工智能，机器智能，深度学习，知识图谱；技术层面的有数据仓库、数据集市、大数据平台、数据湖、数据中台、业务中台、技术中台等等，总之是你方唱罢他登场，各种概念满天飞…

关于数据中台，王保强总结了市场的几个主要概念和描述：

1、数据中台是聚合和治理跨域数据，将数据抽象封装成服务，提供给前台以业务价值的逻辑概念。

2、数据中台是一套可持续“让企业的数据用起来”的机制，一种战略选择和组织形式，是依据企业特有的业务模式和组织架构，通过有形的产品和实施方法论支撑，构建一套持续不断把数据变成资产并服务于业务的机制。

3、数据中台连接数据前台和后台，突破数据局限，为企业提供更灵活、高效、低成本的数据分析挖掘服务，避免企业为满足具体某部门某种数据分析需求而投放大量高成本、重复性的数据开发成本。

4、数据中台是指通过数据技术，对海量数据进行采集、计算、存储、加工，同时统一标准和口径。数据中台把数据统一之后，会形成标准数据，再进行存储，形成大数据资产层，进而为客户提供高效服务。

5、数据中台，包括平台、工具、数据、组织、流程、规范等一切与企业数据资产如何用起来所相关的。

“数据中台就是数据服务化，服务化的核心是数据模型化和服务组件化，服务化的基础是大数据平台或数据仓库。”王保强认为能够提供高效的数据服务化，是数据中台的特征。

结合王保强的实践经验，从数据仓库到大数据平台再到大热的数据中台，是一脉相承的。

数据仓库VS大数据平台VS数据中台

数据仓库

从传统概念来看，数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策和全局信息共享。

王保强认为数据仓库的主题建模思想是数据仓库的核心。面向主题，采用范式模型理论中的主题划分方法对业务数据进行分类。一致性保证方面，采用维度模型理论中的总线结构思想，建立统一的一致性维度表和一致性事实表来保证一致性。而无论范式建模还是维度建模都非常重视数据质量问题，综合使用两个理论中的方法保证数据质量。合理采取维度退化、变化维、增加冗余等方法，则保证了数据的计算和查询效率。

中国移动省级经营分析系统（以下简称：经营分析系统）的基础数据主要包括参与人、事件、服务、资源、账务、营销和财务七大主题域，并依据实体-关系理论，遵照第三范式进行建模。

数据仓库一般采用分层架构，最底层是来自各业务系统的基础数据，上层是汇总数据，汇总数据来源于对基础数据中的常用指标数据进行轻量汇总，并对关键业务实体进行标准化处理。汇总数据逻辑模型的设计采用自底而上和自顶向下两种方法相结合，首先将清单等汇总形成清单汇总，然后对应信息子层的数据需求，设计个人客户、集团客户、他网客户等主题的汇总。

王保强认为汇总表很关键，汇总数据服务于信息子层，用以减少数据转换步骤，提高数据提供的效率。信息子层是经营分析系统加工后的结果数据，通过数据封装服务，对外提供统一的信息视图。

在中国移动，信息子层逻辑模型的设计采用自顶向下方法，通过分析数据封装和业务规范的需求，形成基础数据视图（如KPI、报表）、个人客户、集团客户、家庭客户、他网客户、产品、渠道、终端、校园客户、垃圾短信客户、网络和营销资源统一视图。这形成了企业数据模型的基础，是数据仓库的一个核心，后续所做的数据挖掘等很大程度上来源于该模型本身的数据质量和数据唯一性、全局性。

数据集市

数据集市通常是数据仓库的子集，将数据仓库中的数据按照不同角度进行组织和存储，主要面向地市分公司或者特定业务部门、特定需求的业务，建立相应的应用专题，例如财务分析。中国移动的数据集市细分为地市数据集市和专业数据集市，其中专业数据集市又分为增值业务数据集市、集团客户数据集市和互联网数据集市。

2012年中国移动的流量业务等增值业务飞速发展，其经营分析系统压力较大，单独构建了增值业务数据集市为经营分析系统减负。数据集市其数据粒度较粗，数据采取星型或雪花型结构，较少保留历史数据，便于访问分析和快速查询。

大数据平台

2013年4G飞速发展，流量业务在中国移动占比也水涨船高，为了争夺用户，需要加强对用户使用流量和轨迹的分析，暴增的流量和分析需求使得原有数据仓库不堪重负，在扩展性和计算能力方面都捉襟见肘，开始逐步构建大数据平台，王保强强调大数据平台是并非一步到位，而是一步一步构建和演进过来的。

随着业务的发展需要，海南移动先后构建了Hadoop平台和流处理平台，为了避免形成数据烟囱和数据孤岛，最终决定统一规划构建一个大数据平台。

（编辑：应用网_阳江站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!