天天看點

2021阿裡雲金融資料智能峰會——阿裡巴巴資料中台建設經驗之談

簡介: 阿裡巴巴資料中台的解決方案是在引入資料安全等級打标的基礎上,實作資料智能審批,通過可信模型建構和風險量化,讓智能流程代替繁瑣人工。以Dataphin為例,作為阿裡巴巴集團資料治理方法論基于内部實踐的産品化輸出,它可以為企業提供一站式資料采、建、管、用全生命周期管理的能力,以助力企業顯著提升資料治理水準,建構品質可靠、消費便捷、生産安全經濟的企業級資料中台。

-更多關于數智化轉型、資料中台内容請加入阿裡雲資料中台交流群—數智俱樂部 和關注官方微信公總号(文末掃描二維碼或點此加入)

-阿裡雲資料中台官網 https://dp.alibaba.com/index

  今年正值三年發展規劃的收官之年,包括銀行、證券、保險在内的金融機構的數字化轉型的緊要性進一步凸顯。

  阿裡巴巴雲上資料中台負責人王賽在今天舉行的2021阿裡雲金融資料智能峰會上透露,阿裡巴巴資料中台建設的經驗,或許可以給金融企業數智化轉型帶去一些借鑒。

2021阿裡雲金融資料智能峰會——阿裡巴巴資料中台建設經驗之談

阿裡巴巴雲上資料中台負責人 王賽

  阿裡巴巴資料中台建設的6道經驗

  2015年,阿裡巴巴正式提出資料中台戰略,這也是資料中台這一概念在國内首次亮相——但在更早之前,阿裡巴巴其實就有動作。

  王賽表示,早在2011年,阿裡巴巴就重新梳理并重建了内部資料團隊,以“業務版塊+分析次元”為架構建構資料中心。2013年,統一的資料服務中間件OneService正式誕生,經過深度加工後的資料可以由OneService為前端各業務提供統一的資料服務。

  在他看來,阿裡巴巴資料中台建設絕不是一簇而就,而是面對阿裡巴巴集團内部複雜場景以及多樣需求,必須完成的一條數智轉型通路。

  這些場景和需求可以歸納為六大類,分别是:資料品質與安全、資料價值、産品工具沉澱、成本管控、組織與營運、品質與考核。

  資料品質與安全主要集中于四方面,首先是一緻性,面對同一份資料,各個業務的定義口徑不一緻,這為後期開發、分析、應用帶來極大困擾,是以資料中台首先要解決的就是名額标準化定義,并在此基礎上實作代碼總動化建構和資料結果産出;其次,是資料資産深度問題,通過資料深度融合與打通,資料中台能夠為業務一線員工提供全方位的市場資訊,并進行價值評估;再次,是保障資料及時性,通過資料運維基線管理和移動辦公協同,資料中台能夠保證業務部門及時擷取多元過程及結果資料,即便是在移動辦公場景,也能保證可實時檢視相關資料;最後,是聚焦資料流通安全,核心要解決資料安全審批權限定義和在保障資料安全的基礎上較少審批工作量兩項問題,阿裡巴巴資料中台的解決方案是在引入資料安全等級打标的基礎上,實作資料智能審批,通過可信模型建構和風險量化,讓智能流程代替繁瑣人工。

  另一方面,資料價值主要展現在通過資料賦能,幫助平台增長、商家成長和員工提效。

  值得注意的是,阿裡巴巴資料中台建設的過程當中衍生出非常豐富的産品矩陣,用以應對繁雜的業務場景和個性化的崗位需求,如針對雙11場景的媒體大屏、面向管理層決策的分析類資料産品等等。

  同時,積極建設資料人才培養體系,成立“資料委員會”讓各業務資料崗位員工可以形成高效關聯與信任,并凝煉、傳播科學有效地資料文化。

  而在整個資料中台建設的過程中,王賽強調,“我們還提煉出資料中台價值地顯性化表達,從使用者價值與體驗、資産沉澱、經營等多方位視角,來反複驗證KPI、人員及預算地設定,這是一個動線過程。”

 通過阿裡雲全面輸出資料中台能力

  阿裡巴巴資料中台在曆經多年内部實踐後,于2018年正式通過阿裡雲全面對外開放資料中台能力,迄今已在金融、零售、政務、網際網路等行業成功落地。

  阿裡雲新金融&網際網路事業部總經理劉偉光早前在接受媒體采訪時表示,對企業來說,阿裡雲資料中台具備兩大獨有優勢,“首先是工具的豐富性,阿裡雲資料中台産品集合了市面上所有的工具,從工具層面,從資料處理層面,到上層應用層面,到資料的使用層面,到BI層面,到決策層面,可以說面面俱到。”

2021阿裡雲金融資料智能峰會——阿裡巴巴資料中台建設經驗之談

阿裡雲新金融&網際網路事業部總經理 劉偉光

  目前,阿裡雲資料中台已經形成以Dataphin、Quick BI、Quick Audience等産品為主的核心産品矩陣。

  以Dataphin為例,作為阿裡巴巴集團資料治理方法論基于内部實踐的産品化輸出,它可以為企業提供一站式資料采、建、管、用全生命周期管理的能力,以助力企業顯著提升資料治理水準,建構品質可靠、消費便捷、生産安全經濟的企業級資料中台。

  同時,Dataphin提供多種計算引擎支援及可拓展的開放能力,可以适應各行各業的平台技術架構和個性化訴求。

  聚焦金融行業,作為數字化起步較早的行業,銀行、證券、保險等行業資料平台的建設周期和曆史不比網際網路行業時間短,對于資料使用積累了一定的經驗,然而依舊難以避免數智轉型地陣痛。

  核心展現在資料标準問題、資料品質問題、需求相應問題、成本資源問題四方面:

  資料标準問題:煙囪式開發及局部業務服務支撐,導緻名額同名不同口徑問題頻發;曆史上不同業務系統逐漸疊代上線,相同對象屬性編碼不一緻等問題突出;

  資料品質問題:重複建設導緻任務鍊冗長、任務繁多,計算資源緊張,資料時效性不好;口徑梳理定義的文檔沉澱到開發代碼實作之間存在脫節,資料準确性保障風險高;

  需求響應問題:煙囪式開發周期長、效率低,面向應用的服務化不足,導緻業務響應速度慢,業務不滿意的同時技術又覺得沒有沉澱與成長;既懂業務又懂資料的人才不足,需求了解到開發實作涉及大量溝通,服務效率較差;

  成本資源問題:煙囪式開發的重複建設浪費技術資源;上線難下線更難,源系統或業務變更不能及時反映到資料上,加之資料不标準,研發維護難上加難的同時,大量無用計算和存儲造成資源浪費。

2021阿裡雲金融資料智能峰會——阿裡巴巴資料中台建設經驗之談

這也和阿裡巴巴資料中台建設時期所面臨的難點不謀而合。

  阿裡巴巴通過實踐經驗提出的資料治理方法論,能夠幫助企業捋清了資料全生命周期的管理思路,更将其植入到産品Dataphin(智能資料建構與管理)中,通過阿裡雲為企業提供服務。

  正因如此,Dataphin除了大資料處理全鍊路涉及到的資料內建、開發、釋出、排程、運維能力,同時還将為企業提供資料規範定義、邏輯模型定義、代碼自動化生成、資料主題式服務能力,高效地完成好資料的建構。

  也正是基于Dataphin産品的能力,财通證券打通既有多個系統資料,實作資料及時接入及标準統一,整合加工處理後,基于市場形态完成包括“金融屬性”“産品類型”等在内的300多個資料标簽。

  數禾科技也在長達7個月的共創共建後,完成傳統數倉體系地重構更新,統一資料資産管理平台,同時借助項目全面梳理了公司核心業務流程,将所有的業務過程及背後對應的資料串聯起來,統一一套資訊系統,每個業務過程在資訊化平台都能看到具體的數倉表、名額、名額目前的值、環比同比等資訊,一旦這些名額出現異常,就可以快速自動化歸因,定位問題環節,創新性建立了資料營運模式。

  數禾科技大資料負責人萬鵬說道:“阿裡雲資料中台自帶One Service資料接口服務,之前我們自研的資料平台,面向線上業務提供資料接口的鍊路太長太複雜,目前通過阿裡雲資料中台産品Dataphin建構資料輸入輸出的鍊路既通暢又迅速,産品本身自帶內建通道。”

  而除了Dataphin,阿裡雲資料中台還在全域營運、資料可視化分析等多個領域,面向金融機構提供專業産品服務。

2021阿裡雲金融資料智能峰會——阿裡巴巴資料中台建設經驗之談

  大資料的本質是資料的融合,阿裡雲資料中台把原本各自孤立的資料互相關聯、融合,通過抽象、加工建構資料資産類目體系,進而賦予資料更深層次的語義和價值,洞察事物的本質。

  過去一年,它在技術能力上已然完成重大更新——率先實作“湖倉一體”,通過協同工作架構,引領下一代大資料處理平台的演進方向;通過融合圖計算、時序計算、隐私計算等,大幅提升平台資料智能能力,幫助客戶進行智能化決策。

  而在三年發展規劃臨近收官的這一年,資料中台必将給予金融行業的數智化轉型更多可能。

資料中台是企業數智化的必經之路,阿裡巴巴認為資料中台是集方法論、工具、組織于一體的,“快”、“準”、“全”、“統”、“通”的智能大資料體系。

目前正通過阿裡雲對外輸出系列解決方案,包括通用資料中台解決方案、零售資料中台解決方案、金融資料中台解決方案、網際網路資料中台解決方案、政務資料中台解決方案等細分場景。

其中阿裡雲資料中台産品矩陣是以Dataphin為基座,以Quick系列為業務場景化切入,包括:

  • - Dataphin,一站式、智能化的資料建構及管理平台;
  • - Quick BI,随時随地 智能決策;
  • - Quick Audience,全方位洞察、全域營銷、智能增長;
  • - Quick A+, 跨多端全域應用體驗分析及洞察的一站式資料化營運平台;
  • - Quick Stock, 智能貨品營運平台;
  • - Quick Decision,智能決策平台;

官方站點:

資料中台官網 https://dp.alibaba.com

釘釘溝通群和微信公衆号

原文連結:

https://developer.aliyun.com/article/785464?

版權聲明: 本文内容由阿裡雲實名注冊使用者自發貢獻,版權歸原作者所有,阿裡雲開發者社群不擁有其著作權,亦不承擔相應法律責任。具體規則請檢視《阿裡雲開發者社群使用者服務協定》和《阿裡雲開發者社群知識産權保護指引》。如果您發現本社群中有涉嫌抄襲的内容,填寫侵權投訴表單進行舉報,一經查實,本社群将立刻删除涉嫌侵權内容。

繼續閱讀