天天看點

智能資料引擎Dataphin重磅釋出,提供一站式的技術管理能力

面對各行各業日趨強烈的大資料建設、管理及應用訴求,2018年春季的MWC大會,阿裡雲重磅推出了智能資料建構與管理平台Dataphin——從資料接入到資料消費全鍊路,提供一站式的大資料能力,包括産品、技術和方法論等,緻力于助力企業打造标準統一、融會貫通、資産化、服務化、閉環自優化的智能資料體系。

智能資料引擎Dataphin重磅釋出,提供一站式的技術管理能力
Dataphin作為智能的大資料平台,能夠協助各行各業智能地建設與管理屬于自己的智能資料。自2018年2月28日MWC大會全球首發後,3月12日又推出了專有雲v3.3首發V0.8版本,6月15日,則将推出專有雲v3.5釋出更新後最新的V1.0版本。 場景應用 資料急劇增長的情況下,企業會面臨着多種資料問題:

    1. 資料建構過程艱辛,資料管理結果差強人意;
    2. 資料建設周期與效率越發難以保證。因為缺乏工具化支援,依賴專業人才設計數倉、開發過程繁雜,同時隻有文檔沉澱、不可持續疊代使用;
    3. 高效生産管理資料越發困難。因為缺乏一站式平台,導緻設計與開發脫節、資料名額不一緻,資料建設不規範而難維護、資源浪費而成本增高;
    4. 資料價值難發掘、難用于業務、難量化。因為缺乏系統化方法論和配套産品,無法輸出智能易用的資料及資料服務以更好支援業務,資料投入産出不高也難追蹤到問題;
    5. ......

是以對于資料量達到TB級别的客戶,企業一方面需要盡力招聘更多專業的數倉人員或分析師滿足資料需求,另一方面卻依然存在資料重複建設、資料前後不一緻的問題。此外,業務需求依然難以快速滿足,資料資源成本指數級增長依然難以控制。

為此,Dataphin基于實踐驗證的OneData、OneID、OneService方法論與技術,提供了工具化、産品化的一站式資料建構與管理平台,既可以保證資料生産标準規範、資料模型設計即開發為代碼、即時生成主題式資料服務,同時還能提供資料資産化管理的門戶,有效降低了數倉建設門檻,提高生産效率、降低生産成本,讓資料從成本中心真正變成價值中心。

在适用客戶上,Dataphin服務于所有以資料業務(包括資料驅動業務、資料即業務)為核心的客戶,可應用于資料量大或者增長過快、資料類型多樣豐富的場景下,幫助快速生産管理标準規範的公共資料,快速服務業務使用(如經營報表、營銷圈人)。

從具體的應用場景來看,Dataphin提供了四種能力:

有了Dataphin之後,如上問題彈指間即可解決。

Dataphin基于實踐驗證的OneData、OneID、OneService方法論與技術,既可以保證資料标準規範定義、資料模型設計即自動化開發、主題式資料服務即時生成,同時還能提供資料資産化管理的門戶,有效降低數倉建設門檻,也提高生産效率、降低生産成本,輕松實作讓資料從成本中心真正變成價值中心,且可量化呈現。

智能資料引擎Dataphin重磅釋出,提供一站式的技術管理能力
    1. 數倉規劃與模組化研發:模組化研發支援通過可視化定義SQL表達式的方式完成模型設計,而系統自動釋出生成任務與生産資料,且所有資料名額标準規範無二義性,适用于業務對資料需求多且及時性要求高而專業人才有限情況的客戶,一般需要全局化資料監控;
    2. 資料萃取:支援通過自定義配置參數的方式三步完成以實體對象為中心的業務主資料提煉、DMP建構,實作ID識别連接配接、标簽标準規範地自動化生産,消除資料孤島,适用于可以有豐富資料自建DMP、有營銷投放等對象識别分析需求、用資料驅動業務發展而專業人才有限情況的客戶,一般需要資料化營運;
    3. 資産分析及治理:支援資産化視角建構及管理資料體系并一目了然資料價值,适用于資料類型多樣、資料豐富、資料成本或者品質安全對企業很重要等需要統一管理資料的客戶,特别是以資料為業務的、資料融入業務的;
    4. 資料服務:支援面向主題的邏輯表查詢,保證資料被快捷友善地查找定位、資料查詢SQL得到最大的簡化,提高效率的同時,保證規範、标準、無二義的資料輸出至業務應用,适用于有很多資料應用、需要API化或者其他非代碼查詢方式使用資料的客戶,資料化營運或者資料業務化都會有需求。

目前,Dataphin已在大潤發和海底撈兩個項目進行測試。基于Dataphin平台,有望實作公司業務10%以上的資料開發工作工具化和标準化,還能形成一套以公共層資料支援為基礎的經營報表分析和營銷分析平台。

技術解讀

6月15日,Dataphin将更新推出專有雲v3.5釋出後最新的V1.0版本。

作為PaaS層工具産品,這一版本最大的提升在于功能易用性,比如即可視化資料模組化、代碼自動化生成、資料資産圖譜自動化生成,通過可視化配置方式建設資料模型,送出後系統自動化生成代碼,同時有一個直覺的可視化資産圖譜揭示資料關系、便于确定資料使用方式。

其中,模組化研發設計與開發的一體化完成,能夠極大提高原有完全人工編寫代碼的效率(可視化勾選填寫後,代碼和資料自動化生産)、降低數倉建設複雜度。此外,利用工具将數倉模型的知識進行沉澱,那麼後續的疊代也會更加便利。同時,Dataphin還申請了專利的智能黑盒技術,通過近一年的打磨,保證産品端簡單的操作錄入數倉建設資訊後,經過智能黑盒可以輸出穩定的、計算和存儲機制最優的資料生成代碼。

目前,業界也有多個項目聚焦資料建設相關方面,比如騰訊資料工坊、teradata、informatica都有相似做資料建設開發的工具,在代碼編輯、送出排程等方面功能穩定性和性能度上的表現也都較為穩定。但是,它們都沒有Dataphin所提供的全局數倉架構設計功能,也沒有模組化設計後立即自動化代碼生成的功能。

實操接入

目前,Dataphin資料平台的技術水準遙遙領先于國内同類型産品的榜首。它具有很強的自動化代碼生成能力,除去高效建設以降低生産資源(因業務差異),核心可以釋放20%甚至以上的分析師和資料開發工程師的人力,還能将企業資料資産留在自己的系統工具内,對于廣大企業來說,選擇Dataphin絕對物超所值。

智能資料引擎Dataphin重磅釋出,提供一站式的技術管理能力

對于企業來說,借力阿裡的智能資料引擎Dataphin,通過其結合資料中台實踐沉澱的方法論和自動化代碼生成等技術能力,能夠極好地解決人才和工具兩方面的問題。

想了解更多産品詳情,請點選官網:

https://www.aliyun.com/product/dataphin

繼續閱讀