天天看点

数据中台与传统大数据平台有什么区别?_光点科技

数据中台与传统大数据平台有什么区别?_光点科技

一、数据中台

数据中台是聚合和治理跨域数据,将数据抽象封装成服务,提供给前台以业务价值的逻辑概念。数据中台是在平台概念上的升级,不再单纯的将功能进行大杂烩。理念上,中台有几个特点。

第一,更强调数据集中存储、统一管理、提供标准化的服务。

第二,数据中台几乎囊括了所有相关的系统,包括数据采集、同步,数据开发,数据质量管理、数据标准、元数据、数据建模和开发,数据服务(API),数据安全管理,运维管理等等。中台要对接后台,为前台提供服务。

第三,数据中台不是单纯的一个产品,也不是系统,而是将数据管理的理念和制度,以系统、产品的形式进行呈现,并最终落地,还是被人用,产生业务价值的。

数据中台建设的目标可简单归纳为通过提供工具、流程和方法论,实现数据能力的抽象、复用和共享,赋能业务部门,提高实现数据价值的效率。阿里提出数据中台的概念,只是为了强调和国内现有的大数据平台加以区别,强调解决数据孤岛、重复开发的问题,突出数据共享和复用的概念。

二、大数据平台

大数据平台是以处理海量数据存储、计算及流数据实时计算等场景为主的一套基础设施,建设出发点是节约投资降低成本,但实际上无论从硬件投资还是从软件开发上都远远超过数据仓库的建设,大量的硬件和各种开源技术的组合,增加了研发的难度、调测部署的周期、运维的复杂度,人力上的投入已是最初的几倍;还有很多技术上的困难也非一朝一夕能够突破,但无论如何大数据平台还是建设起来了,人员能力也在不断成长。

大数据平台解决了海量数据、实时数据的计算和存储,也基于原来的企业数据模型实现了重构,但也面临着一系列的问题。

第一、数据的应用问题,无论是数据仓库还是大数据平台,里面包含了接口层数据、存储层数据、轻度汇总层、重度汇总层、模型层数据、报表层数据等等,各种各样的表有成千上万,这些表有的是中间处理过程,有些是一次性的报表,不同表之间的数据一致性和口径也会不同,而且不同的表不同的字段对数据安全要求级别也不同。

第二、资源安全管理问题,如何让内部开发者快速获取所需的数据资产目录,如何阅读相关数据的来龙去脉,如何快速的实现开发,这些在大数据平台建设初期没有考虑周全。

第三、对外应用问题,随着大数据平台的应用建设,每一个对外应用都采用单一的数据库加单一应用建设模式,独立考虑网络安全、数据安全、共享安全,逐渐又走向了烟囱似的开发道路。

第三、数据中台与传统大数据平台有什么区别?