天天看點

中繼資料管理的價值是什麼?

一、什麼是中繼資料

中繼資料不是你聊天的内容也不是你的資料,更不是你在網上釋出了什麼消息,中繼資料是更底層的資料。最直接了解(中繼資料)的方式是活動資料:你在裝置上從事活動、手機自動運作的記錄。舉例來說,手機中繼資料可能包括:來電日期與時間、通話時長、來電号碼,通話位置……通過分析你不同裝置的中繼資料,監視者能得知你昨晚入睡與今早起床的時間、每天逛了哪些地方、在哪裡待了多久,以及你接觸過的對象有誰,誰又與你聯系過。中繼資料,忠實而冷酷的記錄者。

中繼資料管理的價值是什麼?

一間擺滿書的屋子能被稱為圖書館嗎?

要在圖書館中找到某本書,不能隻是在圖書館中走來走去,單靠運氣去找。

盡管中繼資料一詞隻有幾十年的曆史,然而幾千年的圖書館管理者們一直在工作中使用着中繼資料,隻不過我們先所謂的“中繼資料”是曆史上被稱為“圖書目錄資訊”。圖書目錄中的資訊解決了一個十分關鍵的問題,就是如何幫助使用者在圖書館快速地、準确地找到想要的圖書。

圖書目錄中依然延續至今的資訊片段:書名、作者、主題、簡介等。但如今其含有更多的資訊,如出版社、出版時間、定價、條形碼和上架建議等等。

有一個關于中繼資料的例子,中繼資料就像“戶口本”,戶口本中除了有姓名、出生日期、住址、民族等資訊外,還有家庭的血緣關系,父子關系、兄弟關系等。這些資訊就構成了對這個人的較長的描述,那這些資訊就是描述這個人的中繼資料。

是以中繼資料是什麼?

中繼資料:描述資料的資料

中繼資料分類:業務中繼資料、技術中繼資料、管理中繼資料

業務中繼資料:面向業務分析人員。業務中繼資料是描述資料的業務含義、業務規則等。通過明确業務中繼資料讓人們更容易了解和使用業務中繼資料,中繼資料消除了資料二義性,讓人們對資料有一緻的認證,避免“各說自話”,進而為資料分析和應用提供支撐。常見的業務中繼資料包括:業務定義、業務術語、業務規則、業務名額等

技術中繼資料:技術中繼資料是對資料的結構化,友善計算機或資料庫之間對資料進行識别、存儲、傳輸和交換。技術中繼資料可以服務于開發人員,讓開發人員對資料的存儲、結構更明确,進而為應用的開發和系統的內建奠定基礎。技術中繼資料也可服務于業務人員,通過中繼資料理清資料關系,讓業務人員能夠更快速的找到想要的資料,進而對資料的來源去向進行分析,支援資料血緣追溯和影響分析。常見的技術中繼資料包括:存儲位置、資料模型、資料庫表、字段長度、字段類型、ETL腳本、SQL腳本、接口程式、資料關系等

管理中繼資料:面向IT系統運維技術人員。管理中繼資料描述了資料的管理屬性,包括管理部門、管理責任人等,通過明确管理屬性,有利于資料管理責任到部門和個人,是資料安全管理的基礎。常見的管理中繼資料包括:資料所有者、資料品質定責、資料安全等級等。

二、中繼資料管理是管理些啥

中繼資料也是資料,同樣适用資料生命周期管理。

中繼資料管理的價值是什麼?

中繼資料管理平台從應用層面,可以分為:中繼資料采集存儲,中繼資料管理服務、中繼資料分析服務以及中繼資料通路服務。

中繼資料管理的價值是什麼?

中繼資料采集服務:在資料治理項目中,通常涉及到的中繼資料還包括:資料源的中繼資料,資料加工處理過程的中繼資料,資料倉庫或資料主題庫的中繼資料,資料應用層的中繼資料,資料接口服務的中繼資料等等。中繼資料采集服務提供各類擴充卡滿足以上各類中繼資料的采集,并将中繼資料整合處理後統一存儲于中央中繼資料倉庫,實作中繼資料的統一管理。這個過程中,資料采集擴充卡十分重要,中繼資料采集要能夠适配各種DB、各類ETL、各類DW和Report産品,同時還需要适配各類結構化或半結構化資料源。目前市場上的主流中繼資料産品還沒有哪一家能做到“萬能适配”,都需要在實際應用過程中做或多或少的定制化開發。

元模型驅動的設計與開發:通過中繼資料管理平台實作對應用的邏輯模型、實體模型等各類元模型管理,支撐應用的設計和開發。

中繼資料不是停留在紙面,作為一個查詢的字典,它更大地發揮作用是在管控。通過中繼資料實作了全方位的日監控,做到總部級别能夠看到各分子公司每天的業務系統中繼資料的運轉。隻要發現異常,總部這邊會形成T+1的監控機制,當天就會發出通報,通報相關的子公司或者相關的業務機關中繼資料發生了變更有異常,要趕緊處理,通過這一個管控手段保障了集團資訊化系統建設的一緻性和版本的管控性。以前沒有抓手,但是通過中繼資料管控我們實實在在地抓住了核心和根本

三、中繼資料管理的價值是什麼

(一)從功能角度

1、一圖在手,天下我有

通過中繼資料以企業全局視角對企業各業務域的資料資産進行盤點,實作企業資料資源的統一梳理和盤查,有助于發現分布在不同系統、位置的資料,讓隐匿的資料顯性化。資料地圖包括了資料資源的基本資訊,存儲位置資訊、資料結構資訊、各資料之間關系資訊,資料和人之間的關系資訊,資料使用情況資訊等,使資料資源資訊詳細、統一、透明,降低“找資料”的溝通成本,為資料的使用和大資料挖掘提供支撐。

2、追根溯源,發現資料問題本質

企業在做資料分析的時候,資料分析結果不正确,原因可能是資料分析過程出現資料問題,也可能是資料源本身就有問題,還可能是資料在加工處理過程中出現了資料問題……。通過中繼資料血緣分析,能夠快速定位資料來源和加工處理過程,能夠幫助資料分析人員快速定位資料問題。另外,通過中繼資料血緣關系分析,可以了解不同資料名額間的關系,分析産生名額的資料源頭波動情況帶來的影響。

(二)從使用對象的角度

1、對技術人員而言,中繼資料管理平台将分散、存儲結構差異大的資源資訊進行描述、定位、檢索、評估、分析五大操作,以描述和分類的形式實作對資訊的格式化,進而為機器處理創造了可能,大大降低了資料治理的人工成本。正因如此,中繼資料管理已經成為很多大型資料治理項目的基礎。

2、對業務人員而言,中繼資料管理平台通過對業務名額、業務含義、業務規則、取數口徑、影響範圍等資訊進行各方位管控,協助他們快速了解業務相關内容,進行資料資産的管理。

四、中繼資料管理的高效玩法

中繼資料管理的高效玩法,那就是工具化!

中繼資料管理的價值是什麼?

億信華辰中繼資料管理平台,緻力于處理技術中繼資料、業務中繼資料、管理中繼資料,幫助各行各業使用者獲得更多的資料洞察力,進而挖掘出隐藏在資源中的價值。

1、 全面支援各類采集擴充卡:平台内置豐富的擴充卡,全面保障各類源頭的中繼資料自動化采集,一鍵采集對接,同時可支援擴充卡快速擴充

2、 可擴充元模型,滿足不同管理需求:中繼資料的應用都基于元模型。億信中繼資料管理平台(EsPowerMeta)中的元模型支援CWM(公共倉庫元模型)規範的同時,提供了一套便捷的自定義管理接口功能,可完全自定義擴充,能夠滿足中繼資料管理快速實施的需要,可适應使用者在不同時期的不同管理需要。

3、 智能擷取中繼資料,管理維護便捷:億信中繼資料管理平台(EsPowerMeta)提供了完善的元模型和中繼資料維護功能,采用多種方式簡化中繼資料維護的複雜性。系統支援中繼資料的自動擷取和時間排程管理,支援手工建立和變更中繼資料,并配合版本管理,能完整存儲中繼資料整個生命周期動态和變化,友善使用者跟蹤業務運作的曆史資料。

4、 全文搜尋引擎,準确定位目标中繼資料:億信中繼資料管理平台(EsPowerMeta)内置全文搜尋引擎,讓各層次使用者可快速定位自己所關心的中繼資料。EsPowerMeta支援基于名稱、基本屬性、中繼資料間關系查找的同時,還支援全文搜尋。通過多種組合條件的模糊查詢,即可在整個中繼資料環境中随時檢索所需中繼資料。

5、 落地全行業,全中文硬核系産品:目前國内支援全中文核心中繼資料管理的為數不多的産品之一,具有自主知識産權,已成功實施于多家銀行和政府機構,同時适用于業務使用者、技術使用者和運維管理使用者。

6、 圖形化分析,快速理清中繼資料關系:億信中繼資料管理平台(EsPowerMeta)提供圖形化的中繼資料基礎分析以及進階應用分析。血緣分析是指從某一實體出發,往回追溯其處理過程,直到資料源接口,可快速追溯資料來源和加工過程,影響分析可掌握中繼資料之間的互相影響。

五、億信華辰​​中繼資料管理平台​​成功案例

佛山某區政務服務資料管理局中繼資料管理平台

建設内容:政務服務資料管理局基于區内各政府部門的資料進行彙總和治理,面向各部門提供統一的資料服務和應用,實作“用資料決策、用資料監管、用資料創業”的資料統籌發展運作機制。本項目通過中繼資料管理平台,梳理各類資料來源,實作衛計委、工商局、流管局等各政府部門的中繼資料自動采集,理清現有的資料流轉流程和資料架構,并基于其建構一套新的資料架構,同時提供資料血緣分析、影響分析等,最後形成全區的政務資料地圖。

項目價值:幫助資料管理局确定資料來源和資料架構,為後續資料标準建設,資料品質管理打下堅實的基礎,并為政務資源目錄、自主填報系統、教育無紙化等應用提供支撐。