-更多關于數智化轉型、資料中台内容請加入 阿裡雲資料中台交流群—數智俱樂部 和關注官方微信公總号(文末掃描二維碼或 點此加入 )
-阿裡雲資料中台官網 https://dp.alibaba.com/index
作為IT人
您是否還在為每天開發報表慢,不能複用而煩惱?
是否還在天天被業務、老闆催着做一些臨時資料提取,或臨時報表而加班奮戰呢?
是否還在為反複和業務對資料口徑,陷入反複溝通中無法自拔呢?
是否還在被業務吐槽“做的資料報表太醜了”而深深地感到審美和設計無力嗎?
沒錯,在這個高速發展的數字化時代,于業務而言 沒有資料就沒有正确的方向;在每一次重大決策和方向判斷的時候,都需要通過資料來看看背後的實際情況是什麼。
是以其實有時候業務自己也不清楚确實需要看的東西是什麼,也是在反複假設猜測,然後期待資料可以給一個可解釋的答複,是以總是需要咱們IT部門或資料部門 來提供大量的資料支撐。
以下是站在IT人的角度,圍繞以下兩個主題來展開:一個是 IT部門 如何 提高資料報表的開發效率;另一個是 IT如何賦能業務做臨時性資料查詢和自助資料分析?内容中包含了我們主要要講的産品Quick BI,在面對不同場景如何用,才能解決我們面臨的問題;還有如何引導我們的業務人員真的來用我們的産品 這種方法論層面的,隻有業務會用能用, 人人都是資料分析師才不是一句空話。
一.IT部門如何提高資料報表的開發效率
1.1 Quick BI功能鍊路說明
産品是阿裡雲客戶都在用的BI産品--Quick BI,下面是其功能的主結構圖。

Quick BI針對企業中的不同角色提供對應的産品功能支援,如此設計是考慮到我們國内企業正常組織結構,以及考慮到怎麼做才可以實作人人都能做 都可将資料應用起來 這麼來設計的。
最左側是系統管理者的角色,比如運維、IT負責人、項目PM之類,來進行整個系統的管理工作;系統管理這裡可以添加組織使用者,以及工作空間。工作空間 可以認為是有協同性質的部門協作空間。其目的是為了從資料 或 權限 或 主題的角度做隔離。以下三種場景應用最常見:
(1)企業内自用,多個不同部門都要使用。
(2)企業内自用,多個不同項目/主題。
(3)嵌入內建到自己軟體/saas應用,給自己的多個客戶使用。
中間是主要是面向 報表開發者或者資料分析師的,是整個資料應用的開發流程,從連接配接資料源(也就是資料庫)->建立資料集(資料模組化的過程)->制作可視化儀表闆或電子表格、自助取數(儀表闆就是常見的折線圖/柱狀圖這種 可視化分析報表;電子表格可認為是 業務可以使用的線上化excel)。
最右側是面向資料通路者,比如業務同僚、老闆 上司等, 他們可以對結果分析報表 進行檢視。對于搭建完成的報表,Quick BI可以直接授權通路,或者以以郵件、釘釘微應用等形式多種形式進行分享傳播,實作PC、移動、大屏等多端資料檢視。
1.2 開發工作主流程
開發工作第一步就需要有資料庫可以對接。
在資料庫對接上,會分為三類:一類是最常用業務庫,可能是劃出來的一塊做分析之用,比如mysql、postgresql等;第二類是資料量級較大的慢查詢庫,比如maxcompute、hive、hbase之類,或較特殊的有特定應用場景的,如時序資料庫之類;第三類是專門作為查詢分析相關的資料庫,比如ADB 、DLA、presto 之類。
而這些資料庫的對接,不區分是阿裡雲資料庫,還是自己本地的。
除此之外,文本資料 excel、csv也同樣可以支援。
當連接配接好了資料庫之後,就可以進行建立資料集的工作,可以直接通過表建立,也可以通過寫SQL代碼來建立;建立好資料集之後,可以對次元、度量進行編輯和處理,在表結構有變化時候也可以用同步表結構功能。同時也支援資料集的關聯操作(join),跨資料源的情況也可以進行關聯操作,使用非常友善。
同時,Quick BI是和資料庫直接互動的,不做資料存儲,隻進行資料計算,也保證了應用的穩定性。Quick BI是即時查詢,對資料庫性能和網絡狀況會有一定依賴,但Quick BI的加速引擎和智能預計算都能盡可能保證性能和穩定性,在面對資料量相對較大,實時性要求不那麼強的分析需求時,可以開啟資料緩存功能來加速查詢。
說完資料源資料集,咱們再看一下 到前端建立儀表闆的操作。
在儀表闆的選擇圖表區域有熟悉的柱圖、餅圖、折線圖等等40多種圖表元件;中間是畫布可以進行拖拽操作,右側是對頁面的樣式、屬性設定,以及資料操作區。最右側是選擇資料集的操作,其中次元度量和咱們數倉中的概念一樣,次元都是一些文本或者時間類型,度量一些可計算的數值資料,咱們可以将資料字段從資料區域拖拽到配置區,然後在畫布中預覽進行預覽。整個操作過程是比較符合我們中國人的了解和操作習慣的。
同時對于調整好了的模闆,可以反複作為模闆來利用,比如對于審美比較好的同僚,或者是UI互動來設計好老闆和業務認可的主題風格模闆,後續就可以快速套用,快速得到自己所需的 ,而且老闆和業務也不會吐槽醜的分析模闆。
在做好了儀表闆,确認測試環境效果也沒問題之後,就可以将測試環境的内容釋出到線上環境。
小型一點的企業,為了追求業務足夠快速上線使用,會快速将測試環境上線,直接作為正式生産環境使用。在Quick BI中可以直接切換資料掉資料庫,更改為正式線上資料庫的資訊,對應的資料報表資訊就會全部切換為正式線上的結果。
而大型一些有成熟完整上線流程的企業,會有固定的上線流程要走,甚至專門要求有測試環境和正式環境,為了保證資源可以備份,以及降低切換環境的風險,可以用資源包功能,将資源導入到正式環境進行使用。
在釋出之後,可以通過郵件訂閱 或者釘釘推送;比如我們定期的日報/周報/月報,或者日常會用到的固定名額報表,可以通過郵件方式訂閱。如果綁定釘釘,還可通過釘釘的工作通知做推送。同時可以在移動端做資料檢視,效果如下所示。
PS:也可移動端打開
此連結檢視詳情。
1.3權限管控
而為了保證資料應用的安全性,資料權限是最需要保證的。在權限上,我們分三個方面來說。
第一個方面是組織賬号權限體系
對于組織成員本身的劃分上,設定成員角色為:
(1)組織管理者:建議1-3個人,項目PM或者負責BI平台的人員來擔任這種角色。
(2)開發者和分析師:一般會給要做編輯操作、做報表的這些使用者;正常開發者會給IT其他人員 或者資料分析師,資料營運人員之類;而分析師角色可以給要做業務分析的,技術能力稍弱的業務人員。
(3)檢視者:一般都是純檢視的使用者,比如老闆上司這種角色,或 純看資料結果的一線業務同學。
在整個權限體系的設計是按照上述主流程分的;最左到最右側整個産品功能是全量管理權限;中間的主流程到右側 是開發權限,從儀表闆/電子表格/自助取數到右側資料檢視,是分析師權限,最右側就隻有檢視權限。整個資料體系非常細,也非常完善,可以保證多種業态下的企業都都可以 用的起來我們的産品。
第二個方面是資料的行列權限,是為了保證使用者隻能看自己權限下的資料,也為了保證可以不用每一類權限使用者開發一個不同的報表,這個時候有兩種操作方式,使用者量多的話建議用标簽授權,使用者量少的話可以使用 使用者/使用者組授權,如下是标簽授權的效果:
第三個權限是 儀表闆/資料門戶的權限。
這裡看一下儀表闆的權限,有三種情況:
(1)公開連結,開放公開連結之後全網可見,無論使用者是否登入阿裡雲;權限上是和做公開連結分享者的權限一緻。
(2)分享檢視或導出,是可以分享給組織空間中的成員,且授權類型可以是僅檢視儀表闆或者可以檢視和導出。
(3)協同編輯,可以開放給組織成員一起編輯,協同場景下的開發比較友善。
二.IT如何賦能業務做臨時性資料查詢和自助資料分析?
提到業務方自助分析之類,業務方其實很排斥的。因為業務方了解這本來是IT方要做的工作,為何現在要交給我們業務方來做,我們沒時間學,也學不會。如果這種情況處理不好,那麼即使咱們買的BI再專業,也釋放不了IT方的壓力。是以能夠賦能業務來 使用的BI,才是咱們IT方最需要的産品。
2.1自助取數&線上EXCEL
在IT方,經常會面臨這種場景:業務方要求做很多臨時性的取數查詢要求,比如看一下近一個月新增的交易使用者有多少,産生多少營收。那我們就要給業務方寫一段SQL,确認下邏輯,然後導出下資料給業務方。這時候業務方可能有三種情況:
(1)少字段了,又要我們增加字段,确認邏輯,導出資料給業務方。
(2)取數的邏輯不對,比如要的近一個月是8-1到8-31 但是我們給成了 8-16到 9-15的,那又要重新寫過濾條件,确認邏輯,導出資料給業務。
(3)一次到位,沒任何問題。
實際情況中,我們經常是反複重複(1)、(2)這兩種情況,之後才會到第(3)種情況。
這種場景下,可以使用我們的自助取數功能,給業務方做好大寬表,确認好常用字段邏輯,之後業務方想取什麼數,都可以自己操作實作,比如改過濾條件或者選擇不同字段之類。
Quick BI的自助取數功能是可以支援百萬級别的,是以在大資料量級的金融保險、工業制造的場景中都可以用到。
業務方常用EXCEL,而且覺得用一用EXCEL也就沒問題。但是在多部門之間的互動、以及涉及到一些權限不同的部門間的資料互動會有問題,不便于協同。這時就可以引導業務使用者來用電子表格功能,現在電子表格支援EXCEL的400多種函數,便于業務人員的使用。
2.2智能資料應用
日常報表過多,業務想看的東西找不到就會來問人,以前都是人力堆上去 做回複。現在可以用Quick BI 智能機器人來實作這種互動式問答場景。除了對業務足夠友善,對IT而言也可以減輕一些正常看結果的壓力。
智能小Q詳細介紹
點此連結檢視。
而業務人員在做分析的時候,除了正常的關聯 鑽取 跳轉 功能,能夠滿足業務的互動式分析需求之外,還有智能輔助分析、趨勢預測、異常檢測等功能。
以及設定監控預警功能,比如價格同比低于X%,或者環比上月低于X%,就發郵件/短信/釘釘給對應使用者以提醒。
同時也有智能波動分析,如下示例,當訂單金額出現比較大的波動情況時,可以通過波動原因分析來檢視具體造成訂單金額變化的原因和貢獻占比,提供分析結果給業務使用者參考。
2.3IT賦能方案
以上都是業務關注的資料應用能力,那麼如何給業務賦能,讓業務可以用起來産品,完成日常臨時性分析呢?
我們可以将日常接觸到的資料上的應用分成四類來看:
第一類是定期正常的日報/周報/月報;第二類是與行業屬性有關的固定資料監控報表,比如流量監控報表,留存率監控報表,經營分析名額之類,甚至是一些業務方逐漸沉澱确認可以固定下來的業務名額等。這種正常性、有固定屬性的資料報表,一定是需要咱們的IT部門來完成。
第三類是臨時資料查詢,比如上述的自助取數場景。而第四類 是帶探索性的分析,比如作為一個營運,起初負責某個産品的時候,不确定需要看哪些名額,比如活躍率,怎麼定義客戶是活躍的,是看客戶每天登入多少次,浏覽多少次,還是購買多少次之類,都是不确定的。那就需要不斷猜測,然後看資料不斷驗證确認。涉及到這種探查性分析的過程,是業務方可以自己來用工具實作的,在确定好資料名額和門檻值之後,才會讓資料研發落成正常報表。這種臨時性、 不确定性很大的資料應用場景,則推薦由我們的業務方自行實作。
之前有IT客戶擔心 上了BI,自己日常工作會被技術優化替代。其實這種擔心完全沒必要,且不說老闆為了降低成本會如何考慮。單看以上的推薦配合方式,其實是在以技術和資料,去助力業務增長。隻要業務增長,IT隻會被擴張來覆寫新增長的業務。且在這裡IT扮演的是賦能教育訓練師角色,來解決業務方真實的業務問題和IT方的重複低效工作的問題而已。
言歸正傳,在賦能業務過程中,基本可以分為三個階段:
(1)基礎入門階段 需要要保證咱們基礎固定報表可看可用 且好用,這是最基本也是最重要的起點。然後通過電子表格和自助取數功能來引導我們的業務方。
(2)第二階段是讓業務方産生意願,有意向了解這個産品,有意向将自己線下EXCEL應用,或者是依賴 IT方很久才能拿到臨時資料查詢的結果,通過一個平台可以自己查詢快速拿到。同時咱們IT方準備好相關的demo和模闆之類,來降低業務方的學習成本,讓其對平台和工具産生信任感,有意願來學習了解,且真的給自己的工作帶來便利。
(3)再慢慢進入到第三階段,真的讓業務能自行用資料做探索分析。然後結合企業内配合較好的業務部門的例子,在内部做分享傳播,然後複制到更多其他的業務部門。
三個階段之間是順序關系,根據咱們實際的IT和業務部門的配合情況以及 業務的資料應用能力來看的。對于咱們中小企業而言,可能更多在一二階段,而對于咱們稍大型企業,可能已經可以到二三階段,依據自己的實際情況來确定目前重點,是比較重要的。
最後,幾個保護IT發際線的小tips。
1.雲上應用,無需運維,遠離當機風險。再也不用上線保平安
2.如果業務方自己做東西的話,會存在拖拽錯了,或不了解什麼是次元度量啥的,導緻出錯。在Quick BI中,咱們可以看SQL,出現問題可以快速定位、排查。
3.報錯有人快速排查,拿到Traceid給到Quick BI的答疑人員,問題都可以被快速解決。
Quick BI有免費的試用版本,可以去
申請試用。
目前,企業資料報表與BI分析更新活動正在火熱進行中,掃碼加釘釘群,讓IT部門開啟 高效、靈活 的資料利潤中心轉變之路 ~ 更有産品功能操作學習材料、配套Demo/方案、直播答疑 等您來。
資料中台是企業數智化的必經之路,阿裡巴巴認為資料中台是集方法論、工具、組織于一體的,“快”、“準”、“全”、“統”、“通”的智能大資料體系。
目前正通過阿裡雲對外輸出系列解決方案,包括
通用資料中台解決方案、
零售資料中台解決方案 金融資料中台解決方案 網際網路資料中台解決方案 政務資料中台解決方案等細分場景。
其中阿裡雲資料中台産品矩陣是以Dataphin為基座,以Quick系列為業務場景化切入,包括:
- - Dataphin,一站式、智能化的資料建構及管理平台 ;
- - Quick BI,随時随地 智能決策
- - Quick Audience,全方位洞察、全域營銷、智能增長
- - Quick A+, 跨多端全域應用體驗分析及洞察的一站式資料化營運平台
- - Quick Stock, 智能貨品營運平台
- - Quick Decision,智能決策平台
官方站點:
資料中台官網
https://dp.alibaba.com釘釘溝通群和微信公衆号: