天天看點

353頁13萬字數字政府大資料中心及大資料資源平台建設方案WORD

作者:優享智慧方案

來源網絡旨在交流學習,如有侵權聯系速删,更多相關參考公衆号:優享智庫。本文僅截取主要内容進行介紹

總體建設方案概述

項目建設目标

搭建XX區大資料資源平台,加快推進與承接S市大資料資源平台的落地資料資源,按需實作共享交換,逐漸建構形成XX區公共資料彙聚、整合、共享、應用、展示、評價為“六位一體”的大資料資源體系,并通過建構XX區資料基礎庫、專題庫和主題庫為核心的資料資産。

充分挖掘與發揮資料應用價值,建構資料內建、資料共享、資料管理、資料決策的綜合管理服務體系,確定大資料平台全面支撐XX區公共資料協同服務、城區管理協同服務、惠民資料協同服務和興業資料協同服務,實作全區的業務資料閉環,為全區經濟建設、規劃布局,城市管理等實作全方位的資料賦能。加快推進實作如下要求:

1)聚:推進與市級人口、法人、空間地理庫的資料內建,促進電子證照庫對接利用;逐漸推進視訊資料、物聯資料以及基層業務資料等采集彙聚;逐漸推進XX區級各部門的資料彙聚。

2)管:建構一站式資料資産管理平台,通過與市級資料平台級聯實作區内上報資料的落地,結合區内情況進行本地資料資産目錄的管理,形成對資料的全生命周期管理,以及各環節安全監管。整理制作郎豐利。

3)通:實作基于應用場景的資料資源授權管理機制,推動公共資料按需充分共享。實作資料分級分類開放管理,擴充共享交換平台功能。整理制作郎豐利。

4)用:開展主題資料庫建設,推動資料資源整合及資料分析應用。開展資料應用模型及算法研究,探索資料服務模式創新;推進區級跨部門資料智能應用的行業能力平台建設。

5)安:打造整體安全管控體系,保證平台上政務資料在資料彙聚、資料管理、資料共享、資料開放等全生命周期中的安全防護能力。整理制作郎豐利。

項目建設内容

對于本次區級大資料資源平台的建設,将按照“總體規劃一步到位,平台建設分步實施,資料賦能逐漸更新”的原則,落實資料交換共享和協同應用需求,逐漸提升區級大資料資源中心能級。初期先完成資料資源平台的搭建,後續依托基礎平台的建設成果,逐漸完善豐富XX區大資料資源、營運平台、管理機制、運維支撐、組織保障體系和典型智慧應用的建設。

區級大資料資源平台項目建設的主要目标是要搭建XX區統一的大資料資源管理平台并實作基礎功能架構,出台相關管理辦法,支撐全區各政務部門的資料共享需求;建立大資料資源中心,完成标準化資料倉庫的建設,并建構基礎及融合資料庫,為全區的政務處理、經濟發展、社會民生、城市管理、鄉村振興等實作資料賦能。

  • 建設統一的大資料資源管理與應用平台:建設包含資料支撐底座、資料交換子平台、資料整理治理子平台、資料服務子平台,資料分析支撐子平台以及資料資源門戶為核心功能的大資料資源平台,實作大資料綜合管理與服務功能;
  • 啟動區級大資料資源中心建設:完成标準化資料倉庫的設計與規劃建設,并完成與區各委辦業務與管理系統、S市大資料資源平台以及物聯網相關平台資料的對接,彙聚各類業務資料,建構區級大資料資源中心;
  • 在XX區資源中心資料湖基礎上,建設基礎資料庫,包括人口綜合庫、法人綜合庫、電子證照庫以及地理空間庫,為全區各政務部門提供人口、法人、證照與地理空間相關的資料服務;
  • 在區級資源中心資料湖以及基礎庫的基礎上,持續深入大資料資源的建設與應用探索,基本完成支撐全區一網通辦、一網統管、城市規劃、應急指揮等主題的資源歸集,并形成相關的專題庫和主題庫;
  • 建立統一的政府資料資訊資源目錄,建立動态更新機制,明确全區各部門可向其他政府機構共享的公共資料,建立全區統一的資料交換共享平台及資料中心,對上對下實作垂直共享,橫向打通各部門間的資料交換共享,實作部門間業務協同和指揮關聯;
  • 充實作有管理功能,形成共享工作體制和制度。

建設資料交換子平台

建設全區統一的資料資料交換子平台,形成公共資料歸集、交換、共享的核心樞紐;打通全區各機關之間資料資源共享通道,實作雙向資料互通。具體,在本次區級大資料資源平台建設項目中,資料交換子平台的建設内容包括:

  • 資料交換配置:提供資料交換配置功能,能夠提供對于交換周期,時間的交換政策配置、接口配置交換任務配置功能;
  • 資料服務管理:提供資料服務管理功能,将清洗後的資料以及場景化分析後的資料注冊為資料服務,統一進行管理與對外共享;
  • 資料共享接口:将清洗後的資料以及場景化分析後的資料注冊到服務管理系統中,統一進行對外共享,并且對共享行為進行統一管理和審計;
  • 資料交換監控:提供資料交換監控功能,實時監控交換過程中核心服務運作狀況,包括交換平台整體運作狀态、交換域運作狀态、交換節點運作狀态、交換流程運作狀态等,保障資料交換穩定。

建設資料治理子平台

建設大資料治理子平台,提供資料标準管理、中繼資料管理、資料品質管理能力,實作對資料的規範治理與管理;提供資料工廠能力,實作對歸集的資料進行清洗、加工,支撐業務的資料應用需求。具體,在本次區級大資料資源平台建設項目中,資料治理子平台的建設内容包括:

  • 資源目錄管理:提供資源目錄管理功能,包括:資源編目、目錄送出、目錄稽核、目錄釋出、目錄彙總、目錄查詢等;
  • 資料标準管理:提供資料标準管理功能,包括:字典标準管理、命名标準管理、次元标準管理及資料項标準管理;
  • 中繼資料管理:提供中繼資料管理功能,包括:中繼資料正向采集、中繼資料維護、中繼資料查詢、中繼資料導入/導出、中繼資料血緣分析;
  • 資料品質管理:提供資料品質管理功能,包括:品質模型配置、品質規則管理、方案配置排程、質檢結果檢視、質檢分析報告;
  • 資料開發平台:提供資料開發平台能力,支援可視化開發和原生态開發兩種開發模式,實作原生态開發與可視化編排的互相轉換;
  • 統一排程管理:提供統一排程管理功能,提供流程設計與管理、排程政策管控、任務排程控制、等功能子產品。

建設資料資源門戶

建設統一的資料資源門戶,有效內建整合各子平台應用功能子產品,資料資源目錄整合、統一使用者賬号、組織架構、角色權限、業務流程、資訊展示以及統一運維等方面的管理,全面打造面向各機關從業人員的一體化統一資料管理與應用門戶。

利用資料資源門戶推動全區公共資料和社會資料的互動和開放使用,加強政企資料互動、加快統一公共資料歸集、強化資料管理治理、探索資料應用,促進資料共享協同與開放,為提升全區政府治理能力,實作管理向服務轉變提供支撐。具體,在本次區級大資料資源平台建設項目中,資料資源門戶的建設内容包括:

  • 門戶首頁:提供門戶首頁,在首頁可以看到共享目錄數量、共享資源數量、推薦目錄和接口、資訊資源;
  • 統一使用者管理:提供統一使用者管理功能,實作統一組織架構、人員管理,對使用者的屬性、權限進行劃分設定;
  • 統一認證管理:提供對使用者身份的統一管理與統一的系統使用者身份認證服務;
  • 整合資源管理:提供統一的資料資源整合服務,包括:資源檢索、資源查詢、資源展示、資源申請等;
  • 統一審批管理:提供統一的流程審批管理功能,包括:流程發起、流程流轉、流程審批等;
  • 統一消息管理:提供統一消息管理功能,包括:消息類型管理、消息管道管理、通用規則管理、自定義規則管理、消息過期、消息發送;
  • 統一日志管理:提供多種日志記錄方式,并支援日志提醒與日志分析、日志審計管理;
  • 資料資産管理:提供資料資産管理功能,包括:資料資産分類管理、資産目錄、資産地圖、資産版本管理、資産統計管管理;
  • 資源目錄服務:提供資源目錄服務功能,實作資源目錄對外共享,并提供目錄查詢、目錄統計等服務;
  • 統一監控運維:提供統一監控運維功能,保證整個資料資源平台的穩定與高效運作,并提升資料資源全生命周期的保障執行力和運維效率。具體功能包括:
  • 提供監控資源管理功能,支援資源模型的增删改基本維護操作,建立需要管理的資源對象,并對所有被監管對象進行集中管理;
  • 提供基礎資源監測功能,對整個平台所涉及到的伺服器、存儲、作業系統、中間件等基礎實施進行監控;
  • 提供應用系統監控功能,對平台的各個應用服務的運作情況進行監控,及時發現故障與風險,并告警;
  • 提供監控告警管理功能,提供告警規則管理功能,實作告警規則的自定義管理和維護;
  • 提供平台運維管理功能,負責對使用者送出以及系統自動發現的故障或檔案進行集中記錄,可将故障分派給不同人員進行處理并對故障處理過程及結果進行跟蹤管理。

總體建設方案

中心總體定位

區級大資料資源平台建設的核心是彙聚全區各類公共資料,建立面向政務顧問、經濟發展、城市管理、社會公共服務與鄉村振興的資料資源庫與資料服務。為智慧城市提供全面、高效、安全、智能的資料管理與應用支撐,是智慧城市建設總體戰略與落地規劃中的重要組成部分。

總體解決方案

平台總體藍圖

針對區級大資料資源平台的建設,我們将基于目前主流的大資料技術架構為XX區搭建一個大資料管理與應用平台。利用資料平台的資料采集功能,将XX區各級政府機關的政務資料、城市管理相關的監控視訊等物聯資料、企業事業機關資料,網際網路等社據彙聚起來,形成統一的XX區級大資料資源池。

之後,在利用平台的資料治理與模組化開發能力,将采集到的資料有效地進行分類整理與融合,建構諸如綜合人口庫、産業經濟主題庫、旅遊資料庫、菜園花鳥資料庫,鄉村産業經濟振興庫等資料應用服務,并利用統一門戶将相關資料應用對外開放,向XX區各級機關、企事業機關等使用者提供資料服務,由此建構XX區的資料資源中心,實作對全區政務等資料的集中彙聚、統一管理與共享利用,為全區政務處理與經濟發展提供資料支撐。具體,本次項目的解決方案藍圖如下:

353頁13萬字數字政府大資料中心及大資料資源平台建設方案WORD

平台總體架構

區級大資料資源平台平台基于基礎設施(網絡&技術&存儲)、技術标準體系規範及資訊安全保障體系建設資料支撐底座、資料交換、資料資源中心(基礎及融合資料庫)、資料整理治理、資料服務、資料分析、資料共享應用及資料資源門戶子產品,并實作與S市大資料資源平台的共享與交換。

353頁13萬字數字政府大資料中心及大資料資源平台建設方案WORD

平台架構關系

353頁13萬字數字政府大資料中心及大資料資源平台建設方案WORD

架構關系說明:

  • 基于資料治理平台,搭建資料治理産線:各個委辦局梳理資源,形成目錄清單并制定資料治理相關規範,基于目錄及規範搭建資料治理産線;
  • 資料共享交換平台:資料治理/服務/分析平台設定資料歸集排程任務,通過資料源采集資料到資料湖(資料資源中心);
  • 資料源:各個委辦設定前置機放置源資料;
  • 資料資源中心:對通過資料共享交換平台采集的資料進行存儲;
  • 資料基礎支撐平台:資料治理/服務/分析平台通過資料基礎支撐平台進行資料讀取、處理與存儲;
  • 資料資源門戶:通過治理後資源在門戶進行展示,并為各個委辦提供浏覽及申請入口,同時經過申請的資料如果需要清洗/轉換操作,則資料治理平台将根據治理規範及産線進行資料的加工處理,并将處理後的有效資料同步給門戶;
  • 資料共享交換平台:使用者經過門戶申請的資料,将通過資料共享交換平台進行資料的共享。
  • 統一維護平台及資料安全管理将為整個數字區級大資料資源平台的平台建設保駕護航。

項目實施方案

在本項目中,首先需要建設一套大資料資源管理與應用平台,并基于大資料資源管理與應用平台,利用平台中的各類功能,通過彙聚資料、資料治理、資料開發與資料服務等手段,逐漸建設各類區級資料資源(包括:資料湖、基礎庫、主題庫、主題庫等)。

資源平台建設方案

平台總體架構

區級大資料資源平台的總體架構由支撐體系(标準規範支撐體系、管理運作維護支撐體系、安全支撐體系)、網絡系統、資訊資源平台軟硬體系統環境、平台應用系統(資料支撐底座、資料交換子平台、資料整理治理子平台、資料資源門戶),以及資料資源中心(資料湖、基礎庫、主題庫、專題庫)組成。具體平台架構如下:

353頁13萬字數字政府大資料中心及大資料資源平台建設方案WORD

資料交換子平台建設

建設全區統一的資料資料交換子平台,形成公共資料歸集、交換、共享的核心樞紐;打通全區各機關之間資料資源共享通道,實作雙向資料互通。

建設方案概述

通過本項目資料共享交換平台建設,建構XX區資料共享交換體系,推動政務資料的跨層級、跨地域、跨系統、跨部門、跨業務的共享利用,為公共基礎庫、業務主題庫,提供底層資料支撐。

XX區資料交換系統基于電子政務雲搭建,為全區資料管理部門提供雲端的資料共享交換服務的統一平台,可實作部門前置節點與政務雲中心節點間、部門與部門間穩定可靠的雙向資訊傳遞。

架構設計

鑒于資料源應用的異構平台、異構系統接入的複雜性,資料共享交換平台建設應統一技術架構、統一接入标準規範(包括技術規範、接入規範、管理規範、運作規範等),同時既要充分考慮系統的安全性、可擴充性,又要充分考慮資料交換的實時性、可靠性和高效性,實作各系統資料的采集、同步、篩選比對等業務功能目标。

是以,本次資料共享交換平台建設将充分利用資訊化手段,采用目前主流的技術标準,主要包括資料庫技術、資料內建技術、消息中間件、SOA體系架構等技術,采用元件化和松耦合的設計思路,實作統一平台架構、統一技術标準、統一資料接口。資料交換子平台建設圍繞資料資源的采集交換、資料傳輸、交換監控流程進行,以保證平台功能、服務更加貼近實際業務應用需要。

具體,本次區級大資料資源平台中的資料交換子平台的總體業務與邏輯架構設計如下:

353頁13萬字數字政府大資料中心及大資料資源平台建設方案WORD

利用資料交換平台與各政務部門進行互聯,通過資料傳輸系統各委辦的資料資源彙集到資料中心;對彙集到資料中心中的資料進行統一的加工、處理;将經過資料治理後的資料中心中的資料交換到各類基礎資訊庫中,服務管理系統将各類基礎資訊庫中的資料進行服務封裝和服務釋出,提供給各委辦或決策分析等系統使用。

總之,通過資料交換平台的建設與實施,将為XX區建構完善的資料共享交換體系,為本項目總體體系建設提供資料共享交換服務支撐。

繼續閱讀