【正文】 政務(wù)信息資源交換平臺(tái) 設(shè)計(jì)方案 概述 政務(wù)信息資源交換平臺(tái)采用基于分布式消息管道與 分布式服務(wù)調(diào)用 架構(gòu)，來(lái)建設(shè)電子政務(wù)數(shù)據(jù)交換共享、數(shù)據(jù)歸集、應(yīng)用支撐服務(wù)、仿真環(huán)境。并通過(guò)目錄服務(wù)器的相關(guān)管理功能，實(shí)現(xiàn)特定部分的元數(shù)據(jù)是否可對(duì)外服務(wù)。 3． 發(fā)布管理 信息目錄管理者通過(guò)目錄體系服務(wù)器將元數(shù)據(jù)庫(kù)的內(nèi)容發(fā)布到信息資源目錄服務(wù)系統(tǒng)中，支持公開(kāi)元數(shù)據(jù)庫(kù)數(shù)據(jù)的發(fā)布管理，支持多種元數(shù)據(jù)發(fā)布格式。 （ 5）信息資源目錄編碼管理 信息資源目錄提取各類信息的特征信息，編目成公開(kāi)信息資源核心元數(shù)據(jù)，支持資源庫(kù)元數(shù)據(jù)的編輯功能，支持資源庫(kù)元數(shù)據(jù)的分類功能。 對(duì)于提供者已經(jīng)對(duì)信息資源唯一標(biāo)識(shí)符賦碼的情況，管理者對(duì)信息資源的唯一標(biāo)識(shí)符進(jìn)行審核，檢查提供者 所提交的唯一標(biāo)識(shí)符是否符合要求。同時(shí)，進(jìn)行資源庫(kù)元數(shù)據(jù)審核、驗(yàn)證、 歸檔，實(shí)現(xiàn)多個(gè)元數(shù)據(jù)庫(kù)的數(shù)據(jù)整合及數(shù)據(jù)庫(kù)的數(shù)據(jù)傳輸與同步。 數(shù)據(jù)資源規(guī)劃將以上述的信息資源目錄體系為基礎(chǔ)，通過(guò)梳理業(yè)務(wù)流程、指標(biāo)代碼、元數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)建設(shè)實(shí)現(xiàn)。 （ 3）支撐環(huán)境：包括系統(tǒng)的軟件、硬件和網(wǎng)絡(luò)。 （ 2）功能服務(wù)層：主要由公共資源目錄和交換服務(wù)目錄組成。 信息資源 編目 信息資源 編目 體系結(jié)構(gòu) 信息資源目錄體系結(jié)構(gòu)如下圖所示： 信 息 資 源 目 錄 使 用 者信 息 資 源 目 錄 服 務(wù) 系 統(tǒng)公 共 資 源 目 錄 交 換 服 務(wù) 目 錄支 撐 環(huán) 境 （ 軟 件 、 硬 件 和 網(wǎng) 絡(luò) ）公 共 資 源 核 心 元 數(shù) 據(jù)交 換 服 務(wù) 核 心 元 數(shù) 據(jù)標(biāo)準(zhǔn)與管理安全保障 24 信息資源目錄體系 如上圖所示，信息資源目錄體系主要由信息資源目錄服務(wù)系統(tǒng)組成，以及標(biāo)準(zhǔn)與管理規(guī)范建設(shè)和安全保障。 用戶管理表：用戶名稱、密碼、角色等。 23 系統(tǒng)管理日志表：重要系統(tǒng)管理功能（如數(shù)據(jù)加載、代碼表維護(hù)等）記錄日志。主要包括數(shù)據(jù)集描述、指標(biāo)信息、代碼信息、映射規(guī)則等。包括： 數(shù)據(jù) 源信息：如名稱、類型、含義、單位等； 對(duì)象和數(shù)據(jù)結(jié)構(gòu)的定義（相當(dāng)于數(shù)據(jù)字典）：包括表和視圖的個(gè)數(shù)以及名稱；表或者視圖中列的個(gè)數(shù)以及每一列的名稱、數(shù)據(jù)類型、長(zhǎng)度、精度、描述等；表上定義的約束；表上定義的索引以及主鍵 /外鍵的信息。 如果沒(méi)有維護(hù)權(quán)限，或者由上級(jí)維護(hù)的編碼不存在，需要增加時(shí)，可以向上級(jí)藥監(jiān)組織提出編碼申請(qǐng)，經(jīng)上級(jí)審核同意后進(jìn)行添加，并下發(fā)給下級(jí)組織，下級(jí)組織才可以使用。由工業(yè)和信息化部電信研究院統(tǒng)一制定編碼規(guī)則、維 20 護(hù)權(quán)限和編碼管理流程，并對(duì)行業(yè)公用的編碼和指標(biāo)進(jìn)行維護(hù)；下級(jí)單位在統(tǒng)一的編碼規(guī)則下，對(duì)本地編碼進(jìn)行維護(hù)。用來(lái)在樹(shù)中顯示某個(gè)編碼的顯示順序，但是內(nèi)在編碼順序不會(huì)改變的。 英文名稱：對(duì)編碼的英文描述。在這個(gè)分類體系中，被劃分的類目稱為上位類，劃分出的類目稱為下位類，由一個(gè)類目直接劃分出來(lái)的下一級(jí)各類目，彼此稱為同位類。 19 編碼組織規(guī)則 基礎(chǔ)編碼信息包含以下內(nèi)容： 行業(yè)級(jí)編碼對(duì) 應(yīng)工業(yè)和信息化部電信研究院制定的各類編碼。 設(shè)計(jì)思路 信息資源目錄建設(shè)包括以下幾個(gè)部分： 首先需要制定數(shù)據(jù)編碼體系以及編碼體系的管理和維護(hù)規(guī)則，即編碼管理辦法； 在數(shù)據(jù)編碼體系基礎(chǔ)上形成信息資源目錄； 在這個(gè)過(guò)程中，通過(guò)目錄管理服務(wù)對(duì)數(shù)據(jù)標(biāo)準(zhǔn)體系進(jìn)行管理維護(hù)，提供以下工具用于維護(hù)編碼數(shù)據(jù)標(biāo)準(zhǔn)體系： （ 1）編碼體系管理維護(hù)工具； （ 2）基礎(chǔ)指標(biāo)維護(hù)管理工具； （ 3）數(shù)據(jù)目錄管理維護(hù)工具； 編碼體系和管理辦法 基礎(chǔ)編碼體系 通過(guò)構(gòu)建基礎(chǔ)編碼（包括統(tǒng)計(jì)指標(biāo)）管理體系，實(shí)現(xiàn)基礎(chǔ)編碼和統(tǒng)計(jì)指標(biāo)的規(guī)范管理，形成對(duì)行業(yè)應(yīng)用和數(shù)據(jù)交換的支撐，為系統(tǒng)集成、資源整合、信息共享提供基礎(chǔ)。 其中，主題分類是核心，是信息資源的基礎(chǔ)性分類。 （ 3）服務(wù)面。 信息資源目錄 分類 設(shè)計(jì) 根據(jù)信息資源分類要求，頂層通過(guò)以下四個(gè)面來(lái)分類分類采用從頂層通過(guò)以下四個(gè)面來(lái)分類，如下圖所示： 17 資源分類圖 對(duì)于信息資源分類，頂層通過(guò)以下四個(gè)面來(lái)分類： （ 1）基礎(chǔ)面。相應(yīng)的用戶作為信息資源目錄的使用者，可以結(jié)合自身的業(yè)務(wù)需求查找和定位相應(yīng)的數(shù)據(jù)信息。然后再分類標(biāo)準(zhǔn)的基礎(chǔ)上結(jié)合應(yīng)用系統(tǒng)建設(shè)情況，對(duì)信息資源分類進(jìn)行進(jìn)一步的細(xì)化，對(duì)信息資源的目錄體系進(jìn)行整體規(guī)劃。因此在信息資源目錄體系建設(shè)過(guò)程中需對(duì)規(guī)范數(shù)據(jù)格式、數(shù)據(jù)內(nèi)容的各類標(biāo)準(zhǔn)進(jìn)行統(tǒng)一規(guī)劃一保證信息資源目錄體系的建設(shè)的合理性、科學(xué)性和可擴(kuò)充性。按照目錄服務(wù)接口要求形成并提交查詢請(qǐng)求，以及信息查詢和信息查詢結(jié)構(gòu)展現(xiàn)界面。 目錄服務(wù)子系統(tǒng) 目錄服務(wù)子系統(tǒng)實(shí)現(xiàn)信息資源元數(shù)據(jù)的發(fā)布和檢索。 目錄報(bào)送子系統(tǒng) 傳送子系統(tǒng)實(shí)現(xiàn)目錄內(nèi)容在目錄內(nèi)容庫(kù)與目錄中心目錄管理信息庫(kù)之間的傳送，包括數(shù)據(jù)包生成、消息總線、傳輸狀態(tài)監(jiān)控和目錄內(nèi)容存儲(chǔ)等功能。目錄內(nèi)容服務(wù)系統(tǒng)由編目子系統(tǒng)、報(bào)送子系統(tǒng)、管理子系統(tǒng)、服務(wù)子系統(tǒng)、查詢子系統(tǒng)等組成。 目錄應(yīng)用子系統(tǒng)基于元數(shù)據(jù)網(wǎng)關(guān)，使用 B/S 結(jié)構(gòu)，向外網(wǎng)用戶提供基于元數(shù)據(jù)的目錄查詢服務(wù)，并提供針對(duì)目錄框架的管理功能。政務(wù)信息資源元數(shù)據(jù)的注冊(cè)、審核、管理的用戶管理功能，需要使用國(guó)家電子政務(wù)外網(wǎng)統(tǒng)一的用戶認(rèn)證與授權(quán)管理系統(tǒng)。 4）目錄查詢：在湖南外網(wǎng)目錄服務(wù)中心，建立基于 Web 的目錄查詢系統(tǒng)，方便使用者通過(guò)該人機(jī)交互界面查詢目錄內(nèi)容，發(fā)現(xiàn)和定位節(jié)點(diǎn)的共享政務(wù)信息資源。 （ 3）基本功能 依據(jù)國(guó)家政務(wù)信息目錄體系標(biāo)準(zhǔn)，目錄體系框架的基本功能包括元數(shù)據(jù)編目、注冊(cè)、發(fā)布、查詢和維護(hù)等主要功能。 （ 1）遵循的關(guān)鍵性標(biāo)準(zhǔn) 目錄體系框架所遵循的關(guān)鍵性標(biāo)準(zhǔn)包括以下： 12 元數(shù)據(jù)編輯器按照《政務(wù)信息資源目錄體系第 3 部分：核心元數(shù)據(jù)》、《政務(wù)信息資源目錄體系第 4 部分：政務(wù)信息資源分類》、《政務(wù)信息資源目錄體系第 5部分：標(biāo)識(shí)符編碼方案》的標(biāo)準(zhǔn)規(guī)定實(shí)現(xiàn)政務(wù)信息資源元數(shù)據(jù)的編目，并對(duì)所采集的元數(shù)據(jù)的標(biāo)準(zhǔn)符合性進(jìn)行形式化檢查，未通過(guò)標(biāo)準(zhǔn)符合性檢查的元數(shù)據(jù)不能向目錄服務(wù)中心的元數(shù)據(jù)庫(kù)或者本地的元數(shù)據(jù)庫(kù)進(jìn)行注冊(cè)。需滿足以下要求： 目錄管理子系統(tǒng)實(shí)現(xiàn)對(duì)政務(wù)資源管理平臺(tái)的全部操作，主要用來(lái)管理信息資源目錄，信息資源目錄 對(duì)信息資源進(jìn)行編目形成核心元數(shù)據(jù)，注冊(cè)到整合資源數(shù)據(jù)庫(kù)中，生成數(shù)據(jù)資源目錄。 信息資源目錄作為統(tǒng)一 數(shù)據(jù) 底庫(kù)和全局共享數(shù)據(jù)庫(kù)的信息資源的管理和服務(wù)中心，按照統(tǒng)一的標(biāo)準(zhǔn)規(guī)范和樹(shù)狀結(jié)構(gòu)實(shí)現(xiàn)對(duì)信息資源的采集、分類、描述、處理、展現(xiàn)、應(yīng)用和管理，為信息資源的共享和交換 提供基礎(chǔ)性支撐，實(shí)現(xiàn)對(duì)信息資源的識(shí)別、導(dǎo)航和定位服務(wù)，從而更加有效管理、利用和合理開(kāi)發(fā)信息資源，提高工作效率、提升服務(wù)水平提供科學(xué)的工具。 平臺(tái)提供 高效的數(shù)據(jù)傳輸能力，平臺(tái) 采用 優(yōu)化的分布式消息機(jī)制 與優(yōu)化 的加密 壓縮 算法 進(jìn)行 數(shù)據(jù) 傳輸高效保障 。 平臺(tái) 應(yīng) 提供 多種數(shù)據(jù)處理組件，能夠支持對(duì)數(shù)據(jù)進(jìn)行處理和計(jì)算。 運(yùn)行監(jiān)控 平臺(tái)提供運(yùn)行監(jiān)控的人機(jī)界面，對(duì)服務(wù)組件進(jìn)行遠(yuǎn)程管理和監(jiān)控。 10 模塊靈活配置 ? 平臺(tái)中的各個(gè)模塊可運(yùn)行在不同環(huán)境中，通過(guò)配置能夠使平臺(tái)適應(yīng)不同部門(mén)對(duì)平臺(tái)的需求。 平臺(tái) 提供多種接口能力， 能夠 與第三方系統(tǒng)或 平臺(tái) 進(jìn)行對(duì)接 ， 實(shí)現(xiàn)業(yè)務(wù)或平臺(tái)的對(duì)外擴(kuò)展。 ? 應(yīng) 具備安全可靠的 數(shù)據(jù) 傳輸能力。由前置機(jī)的 交換 平臺(tái)抽取 數(shù)據(jù) 并與云平臺(tái)中的交換平臺(tái)完成 整個(gè) 數(shù)據(jù)的 交換 。 ? 應(yīng) 具備 從流程 開(kāi)發(fā)到 項(xiàng)目運(yùn)維的各種 功能。 ETL 工具 應(yīng)具備如下技術(shù)要求： ? 應(yīng)具備 復(fù)雜 數(shù)據(jù)的轉(zhuǎn)換 與清洗能力。他支持的數(shù)據(jù)結(jié)構(gòu)非常松散，是類似json 的 bson 格式，因此可以存儲(chǔ)比較復(fù)雜的數(shù)據(jù)類型。 從 MapReduce 方面來(lái)說(shuō)， HBase 可以與 Hadoop 完美配合，較 MongoDB 方便很多?？赏ㄟ^(guò) MongoHadoop的數(shù)據(jù)中間件與 Hadoop 集成。 刪除方式 先標(biāo)記， insert 新數(shù)據(jù)時(shí)分配合適的已刪除記錄空間。 正則查找，范圍查找，支持 skip和 limit 等等，是最像 mysql的 nosql 數(shù)據(jù)庫(kù)。 按插入順序。 如果是文檔數(shù)據(jù)庫(kù)，則選用 MongoDB，因其查詢比較靈活，而 CouchDB 不支持動(dòng)態(tài)查詢，必須為每一個(gè)查詢模式建立相應(yīng)的 view，并在此 view 的基礎(chǔ)上進(jìn)行查詢。 功能相對(duì)局限。 查找速度快，可擴(kuò)展性強(qiáng)，更容易進(jìn)行分布式擴(kuò)展。 分布式的文件系統(tǒng)。 7 一起。 對(duì)于資源運(yùn)行時(shí)信 息，數(shù)據(jù)量較為龐大，具有一次寫(xiě)入多次讀取的特點(diǎn)，宜采用 NoSQL 存儲(chǔ)。 數(shù)據(jù)庫(kù)是存儲(chǔ)結(jié)構(gòu)化數(shù)據(jù)通常采用的軟件系統(tǒng)，從技術(shù)上數(shù)據(jù)庫(kù)可以分為關(guān)系型數(shù)據(jù)庫(kù)和非關(guān)系型數(shù)據(jù)庫(kù)兩類，在解決大數(shù)據(jù)存儲(chǔ)問(wèn)題時(shí)“非關(guān)系 型”數(shù)據(jù)庫(kù)技術(shù)是必不可少的，但是關(guān)系型數(shù)據(jù)庫(kù)也是不可或缺的。 大數(shù)據(jù)存儲(chǔ)需要涵蓋的數(shù)據(jù)類型主要有三類：結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)和基礎(chǔ)資源業(yè)務(wù)應(yīng)用系統(tǒng)網(wǎng)絡(luò)資源 硬件資源 操作系統(tǒng) 業(yè)務(wù)數(shù)據(jù)庫(kù)X X X 資源門(mén)戶 X X X 政府網(wǎng)站 X X X 應(yīng)用系統(tǒng) X X X 服務(wù)系統(tǒng)政務(wù)數(shù)據(jù)資源共享平臺(tái)統(tǒng)一資源管理運(yùn)行中心統(tǒng)一標(biāo)準(zhǔn)規(guī)范體系安全體系資源分類與管理 ( A R C )資源交換與共享 ( A D X P )資源接入與處理 ( A E T L )業(yè)務(wù)橋接 清洗 \ 轉(zhuǎn)換 數(shù)據(jù)標(biāo)準(zhǔn)化數(shù)據(jù)交換 數(shù)據(jù)共享 監(jiān)控管理數(shù)據(jù)分類 數(shù)據(jù)管理 數(shù)據(jù)服務(wù)統(tǒng)一監(jiān)控安全審計(jì)安全認(rèn)證容災(zāi)備份通道安全提供服務(wù)企業(yè) \ 團(tuán)體 公眾 政府 \ 機(jī)構(gòu) 行業(yè) 6 半結(jié)構(gòu)化數(shù)據(jù)。 其中，本期云平臺(tái)基礎(chǔ) 設(shè)施 部分 的 建設(shè)任務(wù)具體 包括以下： 完成湖南省電子政務(wù)外網(wǎng)升級(jí)改造（含安全平臺(tái)）； 建設(shè)主數(shù)據(jù)中心、同城雙活數(shù)據(jù)中心 40%的計(jì)算、存儲(chǔ)資源，數(shù)據(jù)交換和共 3 享平臺(tái)； 建設(shè)政府協(xié)同辦公平臺(tái)、政務(wù)安全郵箱； 提供省政府門(mén)戶網(wǎng)站群五年的運(yùn)維服務(wù)； 提供統(tǒng)一的運(yùn)維管 理服務(wù)（五年），確保本期建設(shè)的政務(wù)外網(wǎng)、安全體系、云計(jì)算中心安全穩(wěn)定運(yùn)行。 建設(shè)任務(wù) 充分考慮 省級(jí)電子政務(wù) 外網(wǎng)統(tǒng)一云平臺(tái) 計(jì)算、存儲(chǔ)資源需求的階段性和應(yīng)用系統(tǒng)建設(shè)的復(fù)雜性，為了保證投資的有效使用，采用分期建設(shè)的原則。 本次建設(shè) 省級(jí)電子政務(wù) 外網(wǎng)統(tǒng)一云平臺(tái)，總體框架為“ 1+2+N”， 即“ 1 網(wǎng)、2 中心、 N 多 應(yīng)用云 ”，省本級(jí) 政務(wù)大數(shù)據(jù)中心 ，初步形成“ 8+3+5”的基本框架。 建設(shè) 范圍 省級(jí)電子政務(wù) 外網(wǎng)主要滿足各級(jí)政府部門(mén)社會(huì)管理、公共服務(wù)等方 面的需求，為各省直部門(mén)的非涉密電子政務(wù)業(yè)務(wù)提供承載服務(wù)。 “ 8 大基礎(chǔ)數(shù)據(jù)庫(kù)、主題數(shù)據(jù)庫(kù)” —— 完成人口、法人、宏觀、地理空間、政務(wù)服務(wù)信息、工商企業(yè)、信用信息、電子證照等 8 大基礎(chǔ)數(shù)據(jù)庫(kù)、主題數(shù)據(jù)庫(kù) 2 的建設(shè)、遷移、備份共享； “ 3 大平臺(tái)” —— 完成大數(shù)據(jù)智能分析平臺(tái)、數(shù)據(jù)交換和共享平臺(tái)、數(shù)據(jù)開(kāi)放平臺(tái) 3 大平臺(tái)； “ 5 大示范工程” —— 完成全省旅游大數(shù)據(jù)分析、 12345 服務(wù)平臺(tái)、 區(qū)域經(jīng)濟(jì)臉譜大數(shù)據(jù)分析、湖南省互聯(lián)網(wǎng)產(chǎn)業(yè)發(fā)展?fàn)顩r分析、湖南省政府網(wǎng)站群智能監(jiān)測(cè)分析 5 大示范工程； 建設(shè)建設(shè)統(tǒng)一的安全體系； 建設(shè)統(tǒng)一運(yùn)維管理機(jī)制； 設(shè)計(jì)遷移策略，完成部分系統(tǒng)的遷移； 明確云平臺(tái)建設(shè)、管理、運(yùn)營(yíng)模式，節(jié)約投資，提升服務(wù)質(zhì)量。 （三） 第三期 —— 2018 年 2020 年 1．全面完成 N 應(yīng)用朵云建設(shè)。 可視乎 客戶需要與數(shù)據(jù)規(guī)?？梢灾С謧鹘y(tǒng)關(guān)系型數(shù)據(jù)庫(kù) ， 也 支持 以大數(shù)據(jù)存儲(chǔ) 歸集 數(shù)據(jù)以降低存儲(chǔ)成本，提高歸集數(shù)據(jù)資源的檢索統(tǒng)計(jì)速度。 半結(jié)構(gòu)化數(shù)據(jù)是指那些結(jié)構(gòu)隱含或無(wú)規(guī)則、不嚴(yán)謹(jǐn)?shù)淖晕颐枋鲂蛿?shù)據(jù)，介于嚴(yán)格結(jié)構(gòu)化數(shù)據(jù) (如關(guān)系數(shù)據(jù)庫(kù)和對(duì)象數(shù)據(jù)庫(kù)中的數(shù)據(jù) )和完全無(wú)結(jié)構(gòu)的數(shù)據(jù) (如聲音、圖像文件 )之間，典型的半結(jié)構(gòu)化數(shù)據(jù)包括 XML 文檔，它一般是自描述的，數(shù)據(jù)的結(jié)構(gòu)和內(nèi)容混在一起。 對(duì)于 歸集 公共 基礎(chǔ)數(shù)據(jù) 資源如自然人 庫(kù)等 因?yàn)?數(shù)據(jù)量龐大，具有一次寫(xiě)入多次讀取特點(diǎn)， 我們 也可支持采用 非 關(guān)系型數(shù)據(jù) 庫(kù) 技術(shù)進(jìn)行存儲(chǔ)。 以列簇式存儲(chǔ)，將同一列數(shù)據(jù)存在一系列鍵值對(duì)。專注于構(gòu)建關(guān)系圖譜。 利用圖結(jié)構(gòu)相關(guān)算法。 需要對(duì)整個(gè)圖做計(jì)算才能得出結(jié)果，不容易做分布式的集群方案。 如果是列存數(shù)據(jù)庫(kù)，則選用 HBase，其屬于 Hadoop 子項(xiàng)目，基于 HDFS，方便與 Hadoop 集成。 存放順序 基于字典序。 集合查找 只三種查找：通過(guò)單個(gè) row key 訪問(wèn)，通過(guò) row key 的range，全表掃描。 原地更新。 不夠強(qiáng)大，如不使用 MongoDB分片，則實(shí)際不是并行執(zhí)行。 從索引、查找功能來(lái)說(shuō)， HBase 比較單一，由于不支持二級(jí)索引，某些特殊 8 查詢需要全表掃描，效率會(huì)很慢。 MongoDB 是一個(gè)介于關(guān)系數(shù)據(jù)庫(kù)和非關(guān)系數(shù)據(jù)庫(kù)之間的產(chǎn)品，是非關(guān)系數(shù)據(jù)庫(kù)當(dāng)中功能最豐富，最像關(guān)系數(shù)據(jù)庫(kù)的。 所以 各 應(yīng)用間 的 數(shù)據(jù) 交換與共享 應(yīng)