天天看點

一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️

作者:帆軟軟體

一文講清👉資料倉庫的整體架構

  ✅資料倉庫整體架構

  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層

  1️⃣資料采集

  資料采集層的任務就是把資料從各種資料源中采集和存儲到資料存儲上,期間有可能會做一些ETL操作,資料源的種類有很多種。

  2️⃣資料存儲與分析

  随着公司的規模不斷擴張,産生的資料也越來越多,目前hdfs是大資料環境下資料倉庫/資料平台最完美的資料存儲解決方案。

  3️⃣資料共享

  資料分析與計算後的結果存放的地方,其實就是關系型資料庫和NOSQL資料庫;一些實時計算的結果資料可能由實時計算子產品直接寫入資料共享。

  4️⃣次元模組化

  次元模組化是專門用于分析型資料庫、資料倉庫、資料集市模組化的方法。次元表就是你觀察該事物的角度(次元),事實表就是你要關注的内容。

  5️⃣中繼資料管理

  中繼資料通常定義為”關于資料的資料”,在資料倉庫中是定義和描述DW/BI系統的結構,操作和内容的所有資訊。中繼資料分為技術中繼資料和業務中繼資料,常用的存儲有兩種,一種以資料集為基礎,另一種以資料庫為基礎。

  6️⃣任務排程與監控

  作為資料倉庫的中樞,負責排程和監控所有任務的配置設定與運作。#資料倉庫##大資料#

一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️
一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️
一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️
一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️
一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️
一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️
一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️
一文講清👉資料倉庫的整體架構  ✅資料倉庫整體架構  🔸四大概念:資料源、ODS層、DW層、DWS層、DA應用層  1️

繼續閱讀