天天看點

278頁13萬字新型智慧城市大資料雲資源中心及大資料平台建設方案

作者:優享智慧方案

來源網絡,旨在交流學習,如有侵權,聯系速删,更多相關來源公衆号:優享智庫,本文僅截取主要内容進行簡介。

支撐平台技術架構設計

278頁13萬字新型智慧城市大資料雲資源中心及大資料平台建設方案

支撐平台技術架構設計

支撐平台總體技術架構設計如上,整個架構從下往上包括雲計算基礎設施層、雲計算平台資源層、雲計算業務資料層、雲計算管理層和雲計算服務層。其中:

  1. 雲計算基礎設施層:主要包括雲計算中心的實體機房環境;
  2. 雲計算平台資源層:在雲計算中心安全的實體環境基礎上,采用虛拟化、分布式存儲等雲計算技術,實作伺服器、網絡、儲存設備的虛拟化,建構計算資源池、存儲資源池和網絡資源池,實作基礎設施即服務。
  3. 雲計算業務資料層:主要為實作業務資料的安全存儲,同時針對雲平台的各個虛拟機鏡像資料和模闆資料進行共享存儲,支援虛拟機的動态遷移和資料的遷移;實作部門間資料共享與交換;實作業務應用接入。
  4. 雲計算管理層:通過自主可控的雲計算作業系統,實作雲計算中心的服務管理及業務管理的協調統一,提高運維及營運的效率。
  5. 雲計算服務層:是雲計算中心與最終用于互動的接口和平台,通過該平台能夠實作雲計算中心統一對外提供服務,為客戶人員提供整體的雲應用和服務。支撐平台通過統一的雲服務平台對外提供服務。

支撐平台網絡拓撲設計

278頁13萬字新型智慧城市大資料雲資源中心及大資料平台建設方案

支撐平台網絡拓撲設計

通過雲作業系統實作雲計算中心營運管理

278頁13萬字新型智慧城市大資料雲資源中心及大資料平台建設方案

雲計算中心邏輯架構圖

層次清晰的雲計算中心部署架構設計

278頁13萬字新型智慧城市大資料雲資源中心及大資料平台建設方案

雲計算中心部署架構設計

依據雲計算中心建設的總體需求,勾畫整個項目的部署架構,指導項目整體建設。

雲計算中心部署主要包括幾個層面:計算資源池的建構、業務資料的分區規劃、共享存儲的設計等。從整個部署架構來看:

計算資源池的建構主要采用高端多核心X86伺服器作為伺服器基礎支撐,通過虛拟化技術實作底層實體資源的虛拟化,通過雲資源管理平台進行虛拟機的建立、動态配置設定、遷移及管理,形成統一的計算資源池。

大資料平台架構

整個方案設計分為4個層次,即資料源、資料預處理層(資料抽取、轉換、脫敏、加載、規約等)、大資料支撐平台(資料存儲,資料處理)、資訊惠民大資料應用層等。資料由資料源經過統一的資料抽取和轉換平台對資料進行抽取、格式轉換、脫敏等操作。

通過資料抽取、轉換和加載工具,将清洗好的資料加載到大資料平台中進行存儲,由于彙聚了多個源的資料,通常資料量非常大,是以大資料平台需要具有良好的可擴充性。加載到大資料平台中的資料将被用于進行最終的資料分析和資料挖掘,同時還可以根據具體的分析和挖掘需求,設計自己的查詢任務流及更多的應用系統。最後大資料應用層通過模組化對大資料平台中經過初步加工的資料進行進一步的分析挖掘,然後通過大資料可視化工具對分析挖掘結果進行展現,展現形式豐富多樣,可以是圖表,也可以是文檔等易于人們了解的形式,這樣資料就轉化為資訊,進而由資訊轉化為可供決策支援的知識。系統整體邏輯架構如下圖所示。

278頁13萬字新型智慧城市大資料雲資源中心及大資料平台建設方案

大資料平台邏輯架構

繼續閱讀