天天看點

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

雲資料倉庫概述

今天和大家一起探讨一下我們Saas模式下雲資料倉庫加上商業智能BI能有什麼新的東西出來。我們先來看一下雲資料倉庫的一些概述。預測到2025年, 全球資料增長至175ZB, 中國資料量增長至48.6ZB。資料量暴漲這個前提下,我們看一下BI市場規模的增長。預測到2023年,我們中國BI軟體市場年複合增長率為32%。雲計算也同樣在增速發展,2019年第四季中國雲資料市場的增長率已經達到66.9%。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

雲資料倉庫可以讓企業幾分鐘内建立并開始使用資料倉庫服務,在更低的成本下,專注業務,通過對大規模資料進行多樣化的處理、挖掘、分析,快速獲得業務洞察。它有四大特點:大規模資料分析,高性能,靈活擴容,低成本。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

BI使用場景與趨勢

商業智能(BI,Business Intelligence)是一種以提供決策分析性的營運資料為目的而建立的資訊系統。随着我們社會發展以及資料量的爆發,在這麼大量的資料支援之下,企業希望能快速從這些資料裡邊挖掘出更科學的一些資料,然後對我們的企業有一個科學化和資料化決策的幫助力。同時,BI也會助力企業用到一個精細化營運,客戶關系維護,還有成本控制等。

我們看一下商業智能建立一個資訊系統它主要的一個流程。首先是資料接入,将分散于我們企業内外各種資料內建和進行整合。然後再進入一個資料準備階段,就是一個ETL的階段。然後再到一個資料分析的階段,最後将這些成果交給決策層,決策層就可以通過這資料進行一些決策。不管是精細化營運,還是客戶維護關系,還是成本控制,都可以從這些資料裡邊得到一些助力。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

随着資料量的暴漲,我們的業務快速的增長,産生了各種分析需求。不僅僅是分析多樣,而且還想要實時的,比如說秒級的即時查詢。同時在這麼大量的資料基礎上,資料的安全合規也越來越受到重視。是以需要快速的整合多系統資料和實作資訊透明,以及建構一個統一的簡單易用的可視化分析平台,提高制表效率。這已經成為BI系統的新的趨勢。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

基于MaxCompute雲數倉+BI的特性

MaxCompute(原ODPS)是一項大資料計算服務,它能提供靈活快速、完全托管、高性能、低成本、安全的PB級資料倉庫解決方案,使您可以經濟并高效的分析處理海量資料。基于MaxCompute雲資料倉庫的基本架構如下圖所示。底層的叢集是MaxCompute本身搭建好的,使用者無需感覺。再往上,有多種的計算引擎。引擎之上提供各種的API,還有深度的內建了一個一站式大資料智能雲研發平台DataWorks。在雲資料倉庫的這麼一個體系下,可以做資料準備,進行各種清洗、加工、分析之後,就可以進入一個資料消費的階段。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

總結一下MaxCompute雲數倉的特性。第一,是一個開箱即用的線上服務。免平台運維,總體擁有成本低。第二,極緻彈性能力。彈性擴充,無需容量規劃即可應對業務規模的快速變化。第三,簡單易用,多功能計算服務。多種計算模型,多種資料通道,外部資料源聯邦計算。第四,企業級安全能力。多租戶安全保障機制,細粒度授權,資料加密、脫敏,備份恢複。第五,生态融合。支援多樣資料源、生态工具和标準。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

基于MaxCompute雲資料倉庫,我們和BI工具是如何對接的呢。MaxCompute主要是一個存儲和計算服務,加上一個資料開發平台DataWorks,組成了一個離線的雲資料倉庫。在這之上,深度的內建了一個阿裡雲的Quick BI。它是一個分析報表工具,直接連接配接一MaxCompute的資料表即可以自己對這個表進行分析。還有第三方的一些工具,帆軟,Tableau。同時我們在生态這一方面,JDBC同樣也是支援。還有一些企業、一些客戶對于商業智能這一塊有更加多樣化的一個需求或者個性的需求,現有對接的這些工具有可能不支援,那麼它也可以通過SDK的方式來連接配接,進而實作基于MaxCompute雲資料倉庫對接的一個商業智能的資訊平台。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

我們看一下MaxCompute離線數倉是怎麼實作一個高性能低延遲的分析查詢。它可以直接讀取離線數倉,支援多樣化的查詢分析,包括一些簡單的查詢、複雜的查詢、點查詢、聯邦查詢等等。它底層也可以有豐富的資料源,通過MaxCompute + Hologres組成一個互動式分析。這麼一個大資料生态下,它都可以無縫的對接。比如說Quick BI,Tableau,帆軟。是以它可以做到很快的上手,通過這麼一個組合我們可以很快速的實作一個企業的資訊平台。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

實踐案例

接下來我們看一下幾個實踐案例。

新零售的一個行業案例,需求背景: 基于Hadoop開源生态打造,軟硬體維護成本高昂,穩定性問題不斷,嚴重影響業務經營分析;線上業務爆發,需求積壓嚴重,期望有整體解決方案,能夠快速靈活支援業務發展所需的技術擴充。通過這麼一個大資料解決方案,直接用了阿裡雲的Quick BI這個産品,實作了快速數智化轉型,擁抱新零售,降低TCO的同時,更好的依托雲上生态,實作資料資産業務化閉環。最終新零售這個案例,基于我們的MaxCompute + DataWorks,提高了他的資料業務的開發效率。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

我們再看一個新金融的案例。需求背景:金融業務資料,對安全管控有極強要求,需要一個完整的安全管理體系,同時還要滿足個性化安全需求;業務快速發展,需要能快速搭建、成本低、秒級擴充的資料中台體系。我們給客戶創造的價值:基于MaxCompute開箱即用的應用滿足其在安全審計過程中的資料安全需求,縮短了需求響應時間并滿足其在資料安全上的個性化需求。

持續定義Saas模式雲資料倉庫+BI雲資料倉庫概述BI使用場景與趨勢基于MaxCompute雲數倉+BI的特性實踐案例

繼續閱讀