MaxCompute 持續定義 SaaS 模式雲資料倉庫——雲資料倉庫+資料銀行 | 學習筆記

開發者學堂課程【SaaS  模式雲資料倉庫系列課程 —— 2021數倉必修課：MaxCompute持續定義SaaS模式雲資料倉庫——雲資料倉庫+資料銀行】學習筆記，與課程緊密聯系，讓使用者快速學習知識。

課程位址：

https://developer.aliyun.com/learning/course/55/detail/1033

MaxCompute 持續定義 SaaS 模式雲資料倉庫——雲資料倉庫+資料銀行

内容簡介：

一、雲資料倉庫

二、資料銀行

三、 MaxCompute +資料銀行

四、案例介紹

​

（一）MaxCompute: SaaS 模式企業級雲資料倉庫

1.應用場景

■ 廣告場景——使用者标簽計算、分析

■ 業務營運場景——業務名額計算、查詢

■ 各行業搭建資料倉庫

■ 雲上彈性擴充大資料計算和存儲

2.産品優勢

■ 雲原生極緻彈性:雲原生設計，無伺服器架構，支援秒級彈性伸縮，快速實作大規模彈性負載需求。

■ 簡單易用多功能計算:預置多種計算模型和資料通道能力，開通即用。

■ 企業級平台服務:支援開放生态，提供企業級安全管理能力。與阿裡雲衆多大資料服務無縫內建

■ 安全:多租戶環境下安全控制能力強。

■ 大規模叢集性能強、全鍊路穩定性高，阿裡巴巴雙11場景驗證。

3.推薦組合

■ BI分析場景 -MaxCompute +Hologres + Flink+ DataWorks +Quick BI

■ 機器學習場景 -MaxCompute+ PAI+DataWorks

（二）MaxCompute 算力資源産品解決方案

1.包年包月

滿足正常需求穩定财務支出

支援作業優先級，保限關鍵任務穩定産出支援在儲與計算資源包購買

2.按需使用

無伺服器架構，超大規模的存儲和計算擴充能力

自動比對業務需求，完美适配業務的高速變化

不使用不付費

3.多計算資源打通

融合打通包年包月與按需使用的彈性資源，隻需

聯合開通，即可實作更優的成本與性能平衡的資

源解決方案

4.搶占空閑資源

非預留計算資源，搶占并使用服務空閑計算資源。價格較包年包月标準計算資源下降74%。

（三）安全能力重大更新，持續保護企業雲上安全解決方案

建構全面、多層次的安全管理能力，持續保護雲上資料及服務安全。

安全事件頻發，雲上大資料服務，如何保網企業教據和服務安全

● 資料洩露

● 惡意删庫

● 安全攻擊

● 業務中斷

關鍵釋出

● 資料安全加密

● 持續備份恢複

● 實時審計日志

● 跨地域的容災備份

（四）飛天大資料平台解決方案

● 方案說明:适用于電商、遊戲、社交等網際網路行業資料化營運，如智能推薦、日志采集分析、使用者畫像、資料治理、 業務大屏、搜尋等場景；

● 方案優勢:阿裡巴巴最佳實踐的大資料平台，1) 技術領先性; 2) 降本提效; 3)高附加值業務收益;

● 涉及産品:日志服務 SLS .資料傳輸DTS. DataHub. 實時計算 Flink、互動式分析、雲數倉 MaxCompute、資料治理 DataWorks、Quick BI 報表、 DataV大屏、ES 搜尋、機器學習 PAI。

(一)什麼是資料銀行

目的:通過資料融合、共享、交易，實作資料價值變現最大化。

定義:資料銀行旨在通過聚合内外部資料，融合共享，實作盤活資産營運、變現資料交易、釋放資料價值，打造面向企事業産業鍊、面向生态鍊、面向社會的資料資産變現交易平台。

服務範圍:資料交易(提供資料資産陳列、API傳輸及資料交易服務，拉通供需，實作資料價值變現)、資料增值(通過内外部資料融合及深度挖掘，提升資料内涵，實作資料增值)。

特點:融合資料，交易變現，深度挖掘，最大化釋放資料價值并賦能

産業發展:

● 盤活資料資産:融合企業内部資料，引入外部高價值資料，豐富資料價值及内涵，應用資料資産交易能力，實作資料價值變現;

● 資料價值提升:依托資料銀行提供算法及模組化能力，持續挖掘并沉澱資料标簽，提升資料資産價值;

● 産業發展賦能:資料銀行提供多元度智能分析體系，賦能客戶輕松應用資料可視化報表，智能決策，智能營銷及智能營運等多元度智能應用，支援業務決策數字化;

● 三大資料服務: 儲存(雲存儲)、儲備(雲備份)、儲蓄(雲訂閱)。

（二）行業應用架構-友盟

本章節介紹雲資料倉庫 MaxCompute +資料銀行(友盟)實踐

友盟資料銀行-資料開放平台 DOP

1.主題資料包介紹

主題資料包及資料來源

● 統計分析: U-App AI/Pro (移動統 計) U-Web (網站統計) U-Mini Program (小程式統計)

● 開發省工具 :U-Push/ Pro (消息推送)

● 營銷增長: U-AppTrack/ Pro移動廣告監測)

我們如何共享、轉讓、 公開披您以及您最終使用者的個人資訊

● 共享:承擔保密義務，不會為滿足第三方的營的或非法日的而向其出告或出相它的資訊，會與這些合作夥件合作以多種形式 U-DP 數整中台處理加工後的脫本資料用于包括優化廣告投放和院升營銷效果等商業化使用。

● 轉讓:不會向任何第三方轉讓意以及您最終使用者的個人資訊

● 公開披露:(1)獲得您或您最終使用者明确同意; (2) 基于法律的披露:在法律、法律程式、訴訟或政府主管部門強制性要求的情況下，我們可能會公開披露您或您最終使用者的個人資訊。(3) 在緊急情況下，經合理判斷是為了保護我們、我們的客戶、最終使用者或其他人的重要合法權益。

2.友盟資料銀行-資料開放平台 DOP 已實作産品功能和價值"一鍵通"模式

● 每日高性能采集加工海量資料，自動生産 APP/WEB/ 小程式/廣告 /PUSH 主題據包

● 與 Maxcompute(DataWorks) 雲資料倉庫無縫對接，一鍵訂閱資料

● 預置分析模闆和拖拽式自助分析能力，業務人員無需麻煩開發跑數即可完成分析

3.友盟資料銀行-資料開放平台 DOP 通過和 MaxCompute 共創帶來的客戶體驗提升

● 開放多端、多主題的的明細資料與名額資料，為開發者建構私域資料體系

● 名額資料開放，将友盟+9年行業經驗沉澱回饋于開發者

①實時名額大屏展示

②多元名額分析監控

● 明細資料開放，助力開發者進行與業務資料的資料融合自助分析

①實時管道 ROI 分析

②投放使用-轉化大漏鬥

③使用者分層營運

④實時推薦服務

4.友盟資料銀行-資料開放平台 DOP 支援雲上數倉無縫連結，為開發者提供一鍵式資料模型體系開放的體驗

開發者雲上數倉:

● 高成本效益互動式查詢服務，相容接入異構資料源進行詢和分析，無縫連結，一鍵訂閱，支援訂閱資料資料寫入開發者雲上數倉。

● 為您提供快速、完全托管的 PB 級資料倉庫解決方案，經濟并高效的批量分析海量資料。

本章節介紹 MaxCompute + 資料銀行的應用案例及分析

MaxCompute + 友盟資料銀行

案例1:本地生活行業客戶，業務資料化+資料可視化背景

背景：

客戶:本地生活類，智慧社群服務平台

痛點:資料化營運程度低，資料分散，業務人員的資料需求實作周期長。

實施方案：

1.規範化的多端資料采集

基于業務需求梳理進行埋點方案設計，APP. H5. 小程式等多端 SDK 采集。

2.實時資料和離線資料的訂閱返還

經過友盟統-ETL服務的采集資料分别投遞至客戶 SLS (實時)、DLA (離線)。

3.資料報表設計與開發

離線資料自動聯通 QBI ,除4個預置看版外，根據具體業務需求搭建業務分析監測。

方案結果：

業務資料化:多端采集行為資料納入數倉體系建設

資料可視化:日常資料監測看版，讓業務人員快速看到産品疊代、營運動作的效果。

MaxCompute+ 友盟資料銀行

案例2:遊戲行業客戶，多源資料融合

客戶:獨立遊戲工作室

痛點: APP 行為資料與背景業務資料割裂

1.資料采集

使用遊戲行業埋點方案進行 APP 端資料采集，擷取多種使用者識别 ID

2資料遷移

存入其他雲廠商的使用者付費、廣告收入等資料遷移入阿裡雲

3.資料融合

采集行為資料鍵投遞至阿裡雲資料庫，通過使用者唯識别将資料融合

資料融合分析:

結合使用者留存行為和收入資料，測算使用者生命周期價值，判新管道回本周期管道投放優選。