天天看點

內建底座平台和資料中台的關聯分析

企業的資訊化建設是伴随企業發展不斷延伸、不斷更新的過程,而随着資訊化體量不斷增大,建設的複雜度也在不斷提升,業務系統間的內建與資料整合也越來越重要。為了提升系統內建的便捷性,針對企業實際業務建立內建底座平台作為支撐是非常有效的方式,通過底座直接對接各業務系統,将業務系統的內建由網狀結構轉變為總線結構,可以更好地支援後續資訊化的建設與更新。

通過內建底座建構企業資訊化的基礎架構,實作業務系統的內建和資料互通,通過各類業務資料的彙聚與整合,建構企業資料中台體系,形成以資料為核心的業務資訊化,為業務分析、資料挖掘、企業決策提供支援,同時支撐企業業務的發展。內建底座、資料中台作為企業資訊化的兩個層面,一是實作資訊系統一體化,二是打通資料壁壘,通過資訊化促進業務發展。

1總體說明

內建底座、資料中台是企業資訊化內建與整合的重要方式,也是在實際項目中主要的技術解決方案,目前正在參與多個內建底座的項目,是以基于內建底座梳理內建底座和資料中台的關系,為後續內建底座的項目推進和資料中台發展形成标準。

1.1背景說明

最近啟動了多個內建底座的項目,而且整體架構比較類似,是以針對內建底座的項目特點,結合對中台了解以及中台項目的建設路線,對現有內建底座項目對業務中台、資料中台的基石作用進行闡述,形成內建底座的建設标準,也友善與客戶對中台建設路徑達成共識,堅定信心、保障項目快速推進、呈現價值,以便于後續業務中台、資料中台的擴充推進奠定堅實基礎。

1.2整體架構 

如圖所示為內建底座的整體架構,主要包含內建底座和資料中台兩部分: 

內建底座平台和資料中台的關聯分析

內建底座與資料中台并不是完全割裂的,二者是互相融合、相輔相成的,內建底座作為基礎支撐,主要負責對企業基礎資料進行治理,同時通過統一認證平台實作統一認證,打通系統的內建壁壘,同時內建底座也會通過企業服務總線的服務內建實作部門業務單據內建的需求;資料中台是在內建底座的深化,将治理後的基礎資料以及系統中的業務資料通過企業服務總線的資料內建統一彙聚與資料倉庫,再基于資料倉庫進行業務主題、名額的分析,同時通過數倉的資料接口直接為業務系統提供各個次元的業務資料,實作企業資料的一體化管控,深度挖掘資料價值。 

1.3産品規劃 

內建底座與資料中台并不是完全割裂的,二者在産品上也是有交集的,其中內建底座的産品規劃是IDM+ESB+MDM+UMC,資料中台是MDM+DAP+ESB+UMC,二者都具有MDM、ESB和UMC三個産品,其中MDM負責基礎資料治理,UMC是雲平台管理工具,兩個方案中二者功能一緻,但ESB在使用上有所差別,內建底座中ESB主要通過服務總線實作服務化以及系統內建,而資料中台中ESB基于資料總線實作業務資料的彙聚,建構數倉的維表和事實表。 

2中台了解 

所謂的中台,其實是為前台而生的,用于銜接前台與後端,更好的服務前台規模化創新(營銷創新、多端多管道應用等),更好拓展客戶/服務使用者、擴大市場營銷管道、增加使用者粘性,持續增強企業的能力與活力。目前中台主要分為業務中台、資料中台、技術中台、組織中台,下面簡單說明每個中台的情況和特點。 

2.1技術中台 

技術中台可以了解為随着代碼平台化架構而演化出的産物,基礎服務通常是底層的服務,面向技術。這些底層技術包括:安全認證,權限管理,流程引擎,門戶,消息通知以及自動化測試、CI/CD持續部署、DevOPS智能運維等。這些技術元件通常與業務直接關聯度不大,屬于每個應用都需要使用的功能,技術中台強調資源整合、能力沉澱的平台體系,從技術層面來講,大中台技術延續平台化架構的高聚合、松耦合、資料高可用、資源易內建等特性。 

在實際業務中,技術中台更類似于粘合劑,将各頂層業務系統(如财務、銷售、資金等)以及基礎支撐平台(主資料、統一認證等)進行互通,不參與業務但支撐業務,通過基礎支撐平台的能力實作各業務系統的統一化,支援跨系統之間的業務內建對接。 

2.2資料中台 

資料中台主要幫助進行全鍊路業務、全生命周期的資料管理,在應用層面展現的内容可能不一樣,但是底層的資料體系是一緻的,基于建立在資料倉庫和資料平台之上,通過資料清洗導入、資料同步/分發、資料處理、分析等技術,對企業内外部海量資料進行采集、計算、存儲、加工、分析等一系列活動,進而為企業的業務決策提供資料方面的參考,用資料為公司業務、營銷、管理賦能。 

資料中台的資料主要包括兩部分,一是基礎資料,二是業務資料,基礎資料一般來源于基礎資料平台,而通過內建底座治理的資料就是最合适的源頭,通過基礎資料平台彙聚到數倉中作為維表,而內建底座和資料中台可以實作良好的銜接,資料業務一般直接來源于業務系統,通過ESB直接抽取、彙聚到數倉中,形成事實表。數倉中的維表和事實表互相關聯形成數倉模型,對外通過OpenAPI的形式提供資料接口。 

2.3業務中台 

業務中台負責将業務的公共需求抽象成業務服務,比如:客戶,商品、店鋪、訂單、物流、支付、營銷、客服就是公共需求,将這些公共業務抽象出來行成統一的業務服務,供各個業務單元使用,再基于這些通用服務的能力,可以快速搭建前台應用,使其可以直接面向終端使用者/潛在客戶,極大提升建構面向終端使用者前台的速度和效率。 

業務中台有兩種技術路線,一種是基于內建底座的業務服務化實作,将各業務系統的接口統一注冊在ESB平台,通過ESB的服務編排形成針對不同業務場景的服務接口,各個單元直接對接ESB的接口;二種是技術資料中台,通過數倉的管理機制建立數倉模型,不同的模型面對不同的業務,通過對外的OpenAPI進行資料提供,供不同的業務單元使用。二者各有優缺點,第一種方式資料不落地,ESB接口的資料直接來源于業務系統,資料直接實時提供,友善快捷、實時性高,但是由于需要反複讀取業務系統,對接口性能要求較高,同時由于資料不落地,內建底座很難監控資料;第二種由于資料來源數倉,取數流程短,性能較好,但是由于源資料需要在數倉落地,資料的準确性和實時性保障是建設的難度也是重點。 

2.4組織中台 

組織中台我們可以認為是一個虛拟化的組織或者團隊,但是這個組織或者團隊為了突破部門牆、貫穿業務整體運轉而存在,而要做到這一點,這個組織或者團隊肯定是比較了解業務的,它的目标和考核也一定與業務有相關性,組織中台的存在客觀也有利于業務中台、資料中台項目的推進。 

3中台作用 

在企業資訊化建設過程中,随着系統的增多以及資料量的增大,系統內建是不可避免的,而在系統內建的過程中,如果單純的采用點對點的內建,不僅實作工作量大,後續運維管理的難度也非常大,是以通過建立中台建構支撐,通過平台支援前端業務是非常有效的方式。 

3.1內建底座 

內建底座支撐着業務中台和資料中台,是資料業務雙中台的建設基礎,通過技術中台首先打通系統之間的壁壘,實作系統之間的業務內建,初步統一基礎資料,保證後續業務資料對接和傳輸過程中的一緻性,進而為後續資料中台的建設,為資料倉庫、資料湖以及湖倉一體化提供基礎支援。同時由于各業務系統的基礎資料同源,後續産生的業務資料也能快速關聯,為業務內建以及業務中台建設提供了保障。 

3.2資料中台 

資料中台是基于內建底座的延伸,是企業資料深度整合與業務融合的有效方式,通過內建底座實作了業務系統的打通,基礎資料實作了統一,這些統一的基礎資料就是資料中台的基礎,再基于企業實際業務将各業務系統的業務資料抽取出來,進而建構資料倉庫,形成一體化的資料中心,基于資料中心實作資料接口、資料報表、業務主題分析、業務名額分析、資料挖掘、資料預測,進而為企業後續的業務發展,決策制定提供了資料層面的支撐。 

3.3融合模式 

企業資訊化建設是一個疊代推進的過程,并不是一蹴而就的,是以可以根據企業實際情況逐漸推進相關工作,以內建底座作為技術支撐,先打通各業務系統的壁壘,實作系統間的統一認證和單點登入,同時建構基礎資料平台,實作基礎資料同源,保證産生的業務單據的一緻性。以統一的支撐平台以及基礎系統貫穿作為基礎,在進行資料中台的建設,以資料中台為業務核心,作為平台內建的資料支撐,深度挖掘資料價值,打造企業一體化IT架構。 

4建設方案 

內建底座和資料中台的建設也是可以按照中台的實作方案進行建設,通過搭建內建底座作為技術中台,實作基礎的系統打通與基礎資料整合,再實作資料的深度融合,基于資料倉庫實作各業務資料的彙聚與關聯,實作業務層面的分析,再通過業務深化建立面向前端的服務接口,實作基于服務的業務中台。 

4.1內建底座 

內建底座主要包括基礎資料治理、統一認證和業務內建,通過主資料平台對企業的基礎資料進行統一管理維護,由同一源頭進行下發,進而保證各個業務系統基礎資料的同源統一,同時基于基礎資料中的組織、人員資訊建立賬号管理體系,實作賬号的統一管理和統一認證,實作各系統的單點登入,在此基礎上通過企業服務總線進行服務接口的統一管理,初步實作系統間業務單據的內建。 

4.2資料中台 

在內建底座基礎上,将主資料平台中同源、統一的基礎資料支援彙聚到數倉形成維表,而企業服務總線則從各業務系統抽取關鍵業務資料到數倉中形成事實表,而由于系統中的基礎資料和主資料平台是同源的,是以數倉中的事實表和維表可以快速建構業務模型,形成面向業務的資料主題和資料名額,無論是進行資料分析還是建構業務報表都能基于數倉快速實作。 

4.3業務融合 

在資料中台的基礎上對現有業務架構的鞏固和完善,将更多的模型和接口服務納入到業務中台和資料中台中,放大資料中台的價值,同時将數倉中的資料基于實際業務建立不同的業務模型,通過平台對外提供資料接口和服務,各業務系統可以直接通過數倉的資料服務接口擷取所需的資料,進而逐漸削弱系統間的差異,為企業業務提供更加全面、有效的支撐,為企業業務的發展提供更加有利的支援。 

5總結分析 

內建底座和資料中台是基于實際項目和目前公司産品體系建立的解決方案,主要是解決企業資訊化建設過程中缺少統一規劃、系統割裂、難于內建等問題,通過中台建設以及疊代推進,可以為企業資訊化帶來持久的發展動力,可以有效支撐業務更新。 

5.1産品方案 

內建底座和資料中台基本涵蓋了公司的全部核心産品,特别是ESB和MDM在兩個方案都有使用,并且都有着非常重要的作用,是以對于産品的使用需要非常熟悉,特别是IDM平台,由于以前接觸比較少,也沒在實際項目中使用過,是以還需要更多進行了解,同時對于後續産品的發展方向和規劃也是需要了解的,這樣在和客戶進行溝通時,才能正确的引導客戶,推進項目。 

5.2業務總結 

5.3個人總結