政務大數據雲平臺體系及作用

數據採集體系

產品及服務：

共享交換系統

共享交換系統是企業級批量數據處理總線產品。可以快速穩定的實現異地、異構數據庫的數交換和整合，確保參建部門之間，參建部門與交換系統之間數據交換過程中的安全，並提供交換審計的管理，對交換流程、交換節點、交換量等進行統一配置和監控等。

 

治理平臺

社會治理平臺是，用於對政府機構的各種數據源進行標準化採集與管理，並對提供數據源的採集隊伍進行全方位督查與管理的平臺型產品。雲採利用移動系統與GPS相結合，採用大數據分析技術、GIS分析技術、公安部數字身份認證等技術，對政府機構所採集的各類事件、人口、房屋、法人、地址、地理空間等數據進行彙總統計、建立全業務關聯、智能分撥，全方位構建數據採集與隊伍管理系統。

 

數據填報系統

智能填報功能主要爲系統終端用戶，或者說是使用系統的業務人員，提供一個純HTML頁面、界面友好、簡單易用的填報表設計、發佈、管理與填報數據彙總分析的平臺。用戶不再需要使用專門的報表設計器來設計填報表模板、設計報表樣式與填報屬性、在模板上設置填報數據向數據庫存儲的更新屬性、發佈報表至應用系統平臺、抽取 填報數據進行統計分析等等的一系列複雜且具有開發性質的製表過程。

 

衆包採集系統

衆包採集系統，將通過發展大衆建立衆包數據採集隊伍，採用移動設備進行衆包採集，將數據進行集中管理，保障數據上傳的及時、高效、更新速度快。同時提供數據的及時更新彙總與輸出，對數據進行過濾、篩選、校驗、整理等，對數據進行質量把控與管理，爲小微企業等衆多數據的需求者（稱爲“金主”）提供數據支持。

 

深網爬蟲系統

爬蟲系統的功能是下載網頁數據，爲搜索引擎系統提供數據來源。很多大型的網絡搜索引擎系統都被稱爲基於 Web數據採集的搜索引擎系統，比如 Google、Baidu。由此可見網絡爬蟲系統在搜索引擎中的重要性。網頁中除了包含供用戶閱讀的文字信息外，還包含一些超鏈接信息。網絡爬蟲系統正是通過網頁中的超連接信息不斷獲得網絡上的其它網頁。正是因爲這種採集過程像一個爬蟲或者蜘蛛在網絡上漫遊，所以它才被稱爲網絡爬蟲系統或者網絡蜘蛛系統，在英文中稱爲Spider或者Crawler。

數據治理體系

 

數據資源體系：

1. 數據監管保護系統：

數據監管保護系統是對部門、用戶、角色的不同屬性的用戶，在數據庫級、表級、字段級進行訪問控制。對數據採集、數據抽取、數據清洗、數據融合以及數據服務支撐等過程進行監控管理。根據政務數據敏感程度、使用對象、數據用途不同等對數據進行數據脫敏，確保政務數據安全。

1. 數據集成管理系統

數據比對系統是根據預定義的數據比對和校驗規則，對數據進行差異分析和異常分析，對於分析的結果，反向推送給數據提供部門，進一步提升數據質量。同時可以配置爲一個自動化的流程，定義比對的時間、比對的業務規則進行數據比對工作。本系統提供數據比對配置，管理和調度功能，通過可視化配置比對任務，並進行任務調度，系統根據比對規則，進行數據比對，並找出數據差異，提供差異數據的導出，同時統計數據匹配情況。

1. 數據集成管理系統

數據集成管理系統作爲數據融合與數據治理體系的一個環節，負責將分佈的、異構數據源中的數據如關係數據、平面數據文件等抽取到臨時中間層後進行清洗、轉換、集成，最後加載到數據倉庫或數據集市中，成爲聯機分析處理、數據挖掘的基礎。

1. 數據質量工單系統

爲了及時的發現問題數據，包括殘缺數據、錯誤數據、重複數據等，同時，能夠及時來修復這些數據，因此，對於城市政務信息資源庫的數據需要提供數據質量提升服務，保障發現問題數據的及時性，以及完善快速處理問題數據流程。具體通過數據質量工單系統來實現數據質量提升服務。對數據質量進行實時監測，結合數據稽查，進一步建立全面的、完整的數據質量提升規則。

數據標準治理系統：

數據標準治理系統主要針對核心數據、系統間交互數據定義的共有約束。數據標準治理系統包括數據標準、數據元、主題分類、制定組織、用途描述等信息。同時數據標準治理系統還支持對標準相關信息進行增、刪、改、版本管理、審批、發佈等服務功能，確保標準及時滿足業務需要及規範化管理。

數據服務支撐系統：

數據服務支撐系統是從信息資源庫的人口、法人、房屋三大基礎庫提取數據，並進行相關的數據處理與接口封裝，爲應用支撐平臺提供數據支撐服務，爲滿足城市級（省級）各個業務部門在應用支撐平臺上的各類應用建設的數據需求。數據服務支撐系統的建設主要內容包括：數據服務門戶、數據管理與接口管理，以及後臺管理幾大模塊。

數據質量治理系統：

數據質量治理系統是對數據質量進行實時監測，結合數據稽查，進一步建立全面的、完整的數據質量監測規則。能從宏觀查看總體的處理流程，也能從微觀瞭解到每一個數據表、每一個數據字段的加工過程。通過數據質量評價模型，對每一個清洗加工後的政務基礎信息實體對象進行評級。如對每一個人口實體對象的數據質量通過其得分進行評價，直觀瞭解數據的質量情況。對數據進行打標籤，如人口數據，按照居住、工作、學習、辦事、落戶等方面進行打便籤，能夠精確到每一類人羣、每一個個體。在建立起數據質量監測服務體系之後，要求定期根據數據質量監測的成果，形成相應的定期監測報告。

數據質量評估系統：

數據質量評估系統，即大數據探索稽查軟件。功能包括數據概況統計、數據列分析、數據關聯探索、質量評估等，並支持超大數據集。實現數據概況的統計分析，包括：Schema概況統計、表概況統計、敏感信息探查、主外鍵關聯探索。

信息資源目錄管理系統：

信息資源目錄管理系統，具備對元數據的採集、存儲、維護、更新、安全等進行管理。主要功能模塊包括元數據模型管理、元數據採集管理、元數據維護管理、元數據分析、系統管理等功能。

主數據管理系統：

數據的管理可以將政務基礎信息的核心數據進行有效的資產管理，促進數據標準與數據質量體系的建立，進而支撐政府決策及政府公共服務主動化、精準化。

數據開放系統：

數據開放平臺具備從數據編目、數據採集、數據清洗、數據質量、數據脫敏、數據開放全過程管理功能，並在實踐中積累了豐富的管理規範和技術底蘊，專注於提升數據質量和數據價值，保障數據安全。

 

政務數據融合治理解決方案

一、方案背景

1.1   建設背景

智慧城市是以信息和通信技術爲支撐，通過透明、充分的信息獲取，廣泛、安全的信息傳遞，有效、科學的信息利用，提高城市運行和管理效率，改善城市公共服務水平，是以智慧技術、智慧產業、智慧人文、智慧民生、智慧管理、智慧生活等爲重要內容的城市發展新模式。大數據是指所涉及的海量數據信息，可以通過對數據進行存儲、清洗、索引、分析，把信息轉化爲對現在的判斷和將來的預測。大數據技術不僅能夠提高人們利用數據的效率，而且能夠實現數據的再利用和重複利用，進而大大降低交易成本，提升人們開發自我潛能的空間。

隨着全社會信息量爆炸式增長，數量巨大、來源分散、格式多樣的大數據對政府服務和監管能力提出了新的挑戰，智慧城市大數據面臨着諸多問題。首先，全社會信息量爆炸式增長，城市發展積累了很多數據，但沒有深入應用；其次，數據雖多，但大都分散在各個政府部門，沒有整合共享。與此同時，大數據爲政府治理能力的提升也帶來了發展機遇。首先，在政府治理領域，通過讓海量、動態、多樣的數據有效集成爲有價值的信息資源，推動政府轉變管理理念和治理模式，進而加快治理體系和治理能力現代化。其次，推動政府治理決策精細化和科學化，降低政府治理偏差概率，推動政府治理提高效率，節約成本。

1.2 現狀與分析

雖然各個職能部門在社會建設領域開展了很多卓有成效的工作，但是，由於各部門之間的信息交換的渠道、機制不通暢，使得各部門在日常工作中獲得的信息都只能片面的，靜態的反映社會狀況，一定程度上形成了“信息孤島”的問題，影響了黨委、政府服務管理工作的針對性和科學性。因此，爲了打通各部門的“信息壁壘”，形成整體合力，打造反映包括人口、法人、房屋、城市部件等各類社會信息的“蓄水池”，不僅需要各級政府、各相關職能部門按照基礎信息資源庫的建設要求，準確、及時地提供辦理業務產生的信息，而且還需要對來源於各個部門不同制式的數據進行規範處理，從而最終共同構建起權威的信息數據庫，並使這個“蓄水池”既保持“水量充足”，又做到“水質優良”，發揮好信息數據對服務管理的支撐作用。

 

二、方案建設內容

2.1   建設目標

由於城市的“基礎信息資源庫”需要從全市相互獨立的多個業務系統中抽取數據，這些業務系統並沒有經過頂層設計和統籌規劃，他們之間的數據之間必然存在不完整、重複、錯誤、不一致的問題。爲解決上述數據問題，一方面需要在把這些業務系統數據加載到基礎資源庫之前對數據進行全面的質量稽查、修復、關聯和匹配融合；另一方面需要把經過修復、融合後的數據和社區網格管理員採集的人口、法人數據進行關聯比對，最終形成全市統一的實有人口、法人（機構）、房屋（城市部件）數據，爲覆蓋市、區、街道、社區四級網絡的綜合信息系統提供支撐，爲社會建設、城市管理和公共服務提供信息資源保障。尤其對基礎資源庫的數據梳理要形成數據質量評估報告。

在數據梳理完成的“基礎信息資源庫”上，可以對城市的人口進行數據上的普查，通過對數據的分析得出全市常住人口、家庭戶人口、性別構成等各項人口普查指標。與傳統的人口普查方法相比，從數據上進行人口普查，不僅簡單快捷，沒有時間限制，還能節省大量人力物力成本。

2.2   建設內容

由於城市的“基礎信息資源庫”需要從全市相互獨立的多個業務系統中抽取數據，這些業務系統並沒有經過頂層設計和統籌規劃，他們之間的數據之間必然存在不標準、不完整、重複、錯誤、不一致的問題。爲解決上述數據問題，需要根據確立的“基礎信息資源庫”的數據標準，讓數據收集和交換的過程有章可循，在每個局點業務系統數據加載到公共基礎資源庫之前對數據進行全面的質量稽查、標準化、修復和匹配融合，最終形成全市統一的實有人口、法人（機構）、房屋（城市部件）數據，並對這些數據間的關係進行挖掘，形成城市社會關係大圖，爲覆蓋市、區、街道、社區四級網絡的城市綜合信息系統提供支撐，爲社會建設、城市管理和公共服務提供信息資源保障。爲實現該目標，大數據城市數據治理方案的內容包括數據治理體系建設，包括數據質量評估、數據標準管理、政府數據倉庫模型、數據比對融合、數據質量清洗、數據質量提升、數據安全管理、數據資產管理等方面。

 

三、解決方案價值

隨着信息技術與經濟社會的交匯融合,雖然各政府部門中存儲着海量的政務數據，但是各部門間的數據都互不共享，沒有進行統一的管理。如何行之有效地將這些數據應用起來，成爲了各政府部門的共同難題。

通過對城市大數據數據治理就能很好的解決數據應用的難題。方案結合了先進的大數據技術和傳統的數據倉庫技術，對廣泛分佈在各個政府部門觸角的海量零碎的政務數據資源進行收集、整理、清洗、轉換、融合、分析和挖掘，打破各部門間的數據壁壘，實現數據共享，將各類數據充分的應用起來。爲政府管理解決了一些實際性的問題：

 

                1. 融合分析各部門數據，爲領導決策提供數據支撐；

                2. 分析挖掘各部門數據，提供各類市民服務；

                3. 融合共享各部門數據，建立智慧政務數據服務平臺；

                4. 按地域塊化數據，實現數據的按需安全分發。

 

 

城市數據大腦解決方案

Address standardization solution

一、方案背景

1.1   建設背景

 總體目標以實際需求爲導向，搭建城市大腦大數據平臺，充分挖掘與發揮數據應用價值，構建數據集成、數據共享、數據管理、數據決策的綜合管理服務體系，全面支撐城市政務數據協同服務、城區管理協同服務、惠民數據協同服務和興業數據協同服務。爲城市領導決策和減輕基層人員工作量提供堅實的數據支持。通過城市大腦大數據建設和應用，實現，綜合決策科學化。將大數據作爲支撐管理科學決策的重要手段，實現“用數據決策”。利用大數據支撐綜合研判、政策措施制定、風險預測預警、重點工作會商評估，提高綜合治理科學化水平，提升經濟發展與宏觀調控的能力。

政府服務精準化。充分運用大數據提高政府監管能力，助力簡政放權，健全事前事中事後監管機制，實現“用數據管理”。利用大數據支撐法治、信用、行政服務等監管手段，提高監管的主動性、準確性和有效性。

公共服務便民化。運用大數據創新政府服務理念和服務方式，實現“用數據服務”。聚焦社會民生、生態環境、城區建設、商貿金融等領域，重點推進一批廣受關注的數據資源向社會開放。

1.2 現狀與分析

目前，我過各地方政府有相同的問題，人口老齡化現象嚴重，流動人口衆多，交通擁擠、停車困難、場地緊張等問題突出，有效協同性地解決這些深層次的治理難題，大數據應用將發揮極大的作用。由於大數據應用從整體視角出發基於協同聯動，精確性的揭示諸多誘導因數，對於在人口、商業、養老、交通等方面大數據應用有着巨大潛在效應。充分利用城市大腦大數據平臺，破解城區治理難題、建設城區生態體系、解決民生關切難題、保持經濟穩定增長已經勢在必行。

 

二、方案建設內容

2.1   建設目標

 匯聚政府、社會、互聯網、城市感知等數據，建立城市大腦大數據平臺，利用多元異構數據融合的先進技術思想，對數據進行統計分析，深度挖掘，洞察其潛在的價值，帶來多樣化的大數據服務，讓“軟件定義數據”，通過技術的革新帶動政府服務的創新，爲公共安全、綜合治理、行政執法、市場監管、公共信用、經濟運行監測預警、統計調查、社會保障、醫療健康、教育文化、交通運行、旅遊服務等城市治理領域的大數據應用提供大數據服務，爲實現社會治理精細化、經濟運行科學化、民生服務智能化等政府科學決策提供有力的數據支撐。

2.2   建設內容

智慧城市大腦大數據平臺，是面向智慧城市應用垂直業務之上的集成大者，將極大促合各部門各領域業務協同和數據整合，形成“城區運行全景圖”，實現對城區內社會經濟、公共安全、生態環境、交通、政務建設等重點領域運行狀況綜合展示。城市大腦大數據平臺將以數據融合爲核心的共享融合、以業務爲對象的管理協同、以城區事件態勢爲重點的可視化管理、以融合通訊爲工具手段的協同指揮，通過數據關聯融合形成城區關鍵體徵運行監控管理，全面呈現城區運行綜合態勢，感知城區運行風險和發展趨勢，便於領導及各綜合部門調整相應處置方法和政策。

 

三、解決方案價值

有利於領導全面、及時、準確掌握城市經濟社會發展動態，併科學決策、精準指揮。是政府協同整合數據資源的有力抓手，過去，往往缺乏對大數據應用的推動核心動力，政府數據整合停留於缺乏應用支撐的數據層面整合，而常常不能達到效果。通過城市大腦大數據平臺的建設，可以從整體視角出發，在大數據平臺支撐下，形成政府各級部門數據貫通迫切性。通過大數據平臺系統集成了城市碎片化的數據，且經過清洗，在經過口徑分析基礎上搭建起科學的數據模型，及時、準確、直觀進行展示城市經濟社會發展動態，並輔助領導進行決策。同時，還提供垮部門智慧調度的支持。

有利於部門精準施政、高效施政。一是通過大數據和模型分析，通過可視化圖形直觀顯示，科學分析部門施政面臨的各種問題，輔助部門決策，爲部門精準施政提供支持。二是打通各部門、各個業務系統的相互聯繫，使部門之間溝通協作更加方便和便捷，提高部門施政的效率。

有利於部門在重大事件中的工作聯動。城市大腦大數據平臺實時集成各個部門的業務數據，有利於提高部門工作聯動的效率，特別是在重大事件處理上，提升整體協調、聯動指揮的能力。

有利於政府內部實施精準的績效評估。城市大腦大數據平臺對接部門業務系統，集成部門行政行爲數據，有利於提高部門績效評價的及時性和科學性。

有利於提升政府服務的水平。基於政府大數據中心的數據資源，更加及時、準確的發佈城市重大事件信息、城市重要發展事項信息等信息，實現更大範圍的政務公開，提升政府面向公衆的服務水平。