【正文】 數(shù)據(jù)庫(kù)入站適配器，支持主流的關(guān)系型數(shù)據(jù)庫(kù)的主流版本，并且能夠支持初始數(shù)據(jù)同步和增量數(shù)據(jù)同步兩種數(shù)據(jù)同步模式。為數(shù)據(jù)交換業(yè)務(wù)的開發(fā)、上線、部署、監(jiān)控、審計(jì)提供了極大便利。交換傳輸是前置交換系統(tǒng)之間的信息交換通道，實(shí)現(xiàn)交換信息的打包、轉(zhuǎn)換、傳遞、路由、解包等功能。前置交換由網(wǎng)絡(luò)及硬件基礎(chǔ)設(shè)施、操作系統(tǒng)、交換信息庫(kù)、前置交換環(huán)境、交換服務(wù)配置工具等組成。 兩級(jí) 平臺(tái)主要實(shí)現(xiàn)功能： （ 1） 、負(fù)責(zé)匯集本級(jí)政府人口、法人、空間等基礎(chǔ)信息資源，并為各部門提供共享服務(wù)。 （ 2）查詢 為應(yīng)用系統(tǒng)提供標(biāo)準(zhǔn)的調(diào)用接口，支持公共資源核心元數(shù)據(jù)和交換服務(wù)核心元數(shù)據(jù)的查詢。根據(jù)公編目操作員提供的信息資源文本 類原文，實(shí)現(xiàn)關(guān)鍵詞的自動(dòng)抽取，支持將信息資源的文本類原文提交給主題詞提取模塊，主題詞提取模塊進(jìn)行主題詞提取，并將提取結(jié)果返回給資源目錄注冊(cè)模塊。 （ 1）提交 進(jìn)行注冊(cè)侯的的信息資源目錄，可通過管理者和提供者之間的信息資源元數(shù)據(jù)匯交平臺(tái)，實(shí)現(xiàn)信息資源元數(shù)據(jù)的提交。 信息資源建設(shè)是信息共享的前提，通過元數(shù)據(jù)描述和檢索機(jī)制，實(shí)現(xiàn)信息資源的定位和發(fā)現(xiàn)，為資源的整合和系統(tǒng)間的交互提供基礎(chǔ)方法。 信息資源目錄使用者 信息資源目錄使用者通過信息資源目錄提供的服務(wù)使用目錄服務(wù)。 其他數(shù)據(jù)庫(kù)管理表。 數(shù)據(jù)備份歷史記錄。 管理流程 在多級(jí)編碼體系下，工業(yè)和信息化部電信研究院通過權(quán)限控制實(shí)現(xiàn)對(duì)全系統(tǒng)的編碼進(jìn)行管理，只有工業(yè)和信息化部電信研究院為下級(jí)單位分配了可操作權(quán)限，下級(jí)單位才能對(duì)編碼進(jìn)行維護(hù)，否則只能讀取和使用編碼。 樹葉判別：是系統(tǒng)內(nèi)部的一個(gè)識(shí)別碼，前面說過編碼字典采用的是樹狀結(jié)構(gòu)，樹支和樹葉就是通過‘樹葉判別’來實(shí)現(xiàn)的。 簡(jiǎn)碼是為了在錄入和選擇時(shí)更方便的操作而設(shè)定的編碼，作為提高工作效率的碼，由各應(yīng)用系統(tǒng)的用戶各自維護(hù)。行業(yè)分類、服務(wù)分類和資源形態(tài)分類為輔助性分類。信息資源本身具有特定的含義，根據(jù)含義主題的不同，對(duì)政務(wù)信息資源進(jìn)行分類。 4．在信息資源各類規(guī)劃過程中，始終貫徹著元數(shù)據(jù)規(guī)劃，使用元數(shù)據(jù)對(duì)系統(tǒng)中的各類數(shù)據(jù)元、指標(biāo)、信息資源目錄、使用的技術(shù)等進(jìn)行描述，最終指導(dǎo)數(shù)據(jù)中心元數(shù)據(jù)庫(kù)的建設(shè)。 政務(wù) 資源管理平臺(tái) 系統(tǒng)設(shè)計(jì) 信息資源目錄子系統(tǒng) 信息資源目錄子系統(tǒng)的建設(shè)，按照統(tǒng)一的標(biāo)準(zhǔn)規(guī)范，將分散在各子平臺(tái)的信 15 息資源進(jìn)行整合和組織，形成邏輯上集中、物理上分散、可統(tǒng)一管理和服務(wù)的信息資源目錄，實(shí)現(xiàn)資源的共享，是公共基礎(chǔ)平臺(tái)實(shí)現(xiàn)數(shù)據(jù)資源共享的有效手段。 目錄傳輸子系統(tǒng) 目錄傳輸子系統(tǒng)實(shí)現(xiàn)部門信息資源目錄向省級(jí)目錄中心目錄匯總，以定期、不定期和自動(dòng) /人工等方式進(jìn)行傳輸。對(duì)當(dāng)用戶在查詢系統(tǒng)中選擇相應(yīng)的目錄或輸入查詢關(guān)鍵詞時(shí)，元數(shù)據(jù)應(yīng)用系統(tǒng)訪問元數(shù)據(jù)網(wǎng)關(guān)，元數(shù)據(jù)網(wǎng)關(guān)檢索節(jié)點(diǎn)的元數(shù)據(jù)，最終返回查詢結(jié)果，查詢系統(tǒng)將查詢結(jié)果顯示在相應(yīng)的結(jié)果頁面上。 5）目錄維護(hù)：在湖南外網(wǎng)目錄服務(wù)中心，提供針對(duì)元數(shù)據(jù)、目錄樹的基本的管理 、維護(hù)操作。 元數(shù)據(jù)服務(wù)器、元數(shù)據(jù)網(wǎng)關(guān)按照《政務(wù)信息資源目錄體系第 2 部分：技術(shù)要求》中對(duì)數(shù)據(jù)資源目錄接口和交換服務(wù)目錄接口的規(guī)定進(jìn)行實(shí)現(xiàn)，并對(duì)外界系統(tǒng)用戶提供系統(tǒng)查詢服務(wù)。 政務(wù) 資源管理平臺(tái) 需求 分析 政務(wù)資源管理平臺(tái)包括信息庫(kù)系統(tǒng)和目錄內(nèi)容服務(wù)系統(tǒng)。 支持以 圖形化拖拽方式進(jìn)行流程的配置 ， 無需人工編碼， 簡(jiǎn)化 流程配置步驟，提高 效率 。 ? 根據(jù)業(yè)務(wù)模式，平臺(tái)之間能夠?qū)崿F(xiàn)元數(shù)據(jù)、目錄、應(yīng)用各類信息的互聯(lián)互通。 多層次備份能力 交換 共享 平臺(tái)具備組件、服務(wù)、系統(tǒng)等多層次備份和恢復(fù)能力，實(shí)現(xiàn)對(duì)平臺(tái)中各個(gè)模塊和應(yīng)用軟硬件環(huán)境的統(tǒng)一管理；對(duì)中央 節(jié)點(diǎn)、政務(wù)資源 管理 平臺(tái)（ ARC）均 可提供 負(fù)載均衡機(jī)制；對(duì)前置機(jī) 節(jié)點(diǎn)也可 進(jìn)行 熱備支持。 云平臺(tái) 外 的 信息 資源交換 統(tǒng)一 云平臺(tái)外的 系統(tǒng) 與數(shù)據(jù)交換平臺(tái)可采用 前置機(jī) 的 方式進(jìn)行對(duì)接和實(shí)施 。 MongoDB 最大的特點(diǎn)是他支持的查詢語言非常強(qiáng)大，其語法有點(diǎn)類似于面向?qū)ο蟮牟樵冋Z言，幾乎可以實(shí)現(xiàn)類似關(guān)系數(shù)據(jù)庫(kù)單表查詢的絕大部分功能，而且還支持對(duì)數(shù)據(jù)建立索引。 讀寫效率 默認(rèn)適合寫多讀少，可配置。 更新方式 另一版本保存下來。 2． HBase 與 MongoDB 比較 名稱 HBase MongoDB 類型 列存數(shù)據(jù)庫(kù) 文檔數(shù)據(jù)庫(kù) 存儲(chǔ)位置 每個(gè)列族保存在單獨(dú)的 hdfs文件。 數(shù)據(jù)結(jié)構(gòu)要求不嚴(yán)格。 典型應(yīng)用 內(nèi)容緩存，適合混合工作負(fù)載并擴(kuò)展大的數(shù)據(jù)集。 數(shù)據(jù)存儲(chǔ)包括關(guān)系型數(shù)據(jù)存儲(chǔ)及非關(guān)系型數(shù)據(jù)存儲(chǔ)，關(guān)系型數(shù)據(jù)存儲(chǔ)采用傳統(tǒng)關(guān)系 型 數(shù)據(jù) 庫(kù) ，非關(guān)系型數(shù)據(jù)存儲(chǔ)采用 MongoDB，根據(jù)采集到數(shù)據(jù)的類型，由數(shù)據(jù)庫(kù)引擎統(tǒng)一處理。 4 第 2章 政務(wù)數(shù)據(jù)交換和共享平臺(tái) 建設(shè)方案 概述 本項(xiàng)目建設(shè)的政務(wù)數(shù)據(jù)交換和共享平臺(tái)是湖南省政務(wù)電子政務(wù)，基于分布式消息 管道 與分布式服務(wù)調(diào)用 技術(shù)進(jìn)行建設(shè)，能夠使湖南 省 公共服務(wù)平臺(tái)實(shí)現(xiàn)深度的數(shù)據(jù)共享、廣泛的業(yè)務(wù)協(xié)同及敏捷的業(yè)務(wù)提供，可以提高各部門之間的數(shù)據(jù)交換共享的運(yùn)行效率，通過數(shù)據(jù)的采集橋接、交換傳輸、落地 轉(zhuǎn)換、 資源歸集等服務(wù)完成 數(shù)據(jù)跨 部門 跨區(qū)域之間的交換 共享與 公共基礎(chǔ)數(shù)據(jù) 集的 歸集整理 ，從 而 改善公共服務(wù)、加強(qiáng)社會(huì)管理、強(qiáng)化綜合監(jiān)管、完善宏 觀調(diào)控、建設(shè)服務(wù)型政府 。具體業(yè)務(wù)目標(biāo)主要包括： “一個(gè)網(wǎng)絡(luò)” —— 優(yōu)化升級(jí)電子政務(wù)外網(wǎng)平臺(tái)，滿足省直部門間以及省 到市、市到縣網(wǎng)絡(luò)傳輸和承載的需求； “兩個(gè)中心” —— 建設(shè)云計(jì)算中心、大數(shù)據(jù)中心，滿足省 直部門十三五期間非涉密業(yè)務(wù)需求，為政府領(lǐng)導(dǎo)提供科學(xué)、合理的決策支持。 “ N 朵應(yīng)用云” —— 建設(shè)基于云平臺(tái)的 N 個(gè)全省性應(yīng)用系統(tǒng)，包括政務(wù) 服務(wù)、政務(wù)管理、政務(wù)行業(yè)、政務(wù)決策和政務(wù)辦公等領(lǐng)域。 5 總體架構(gòu) 設(shè)計(jì) 設(shè)計(jì)原則 大數(shù)據(jù) 融合 擴(kuò)展 設(shè)計(jì) 考量 金蝶天燕 數(shù)據(jù)系列產(chǎn)品支持與大數(shù)據(jù)的融合。 對(duì)于政務(wù) 數(shù)據(jù)交換管理 平臺(tái)配置信息、權(quán)限數(shù)據(jù)、 交換流程業(yè)務(wù)信息 等基本信息數(shù)據(jù)，更新操作可能會(huì)較為頻繁，且數(shù)據(jù)量不大，采用傳統(tǒng)關(guān)系 型 數(shù)據(jù) 庫(kù) 進(jìn)行存儲(chǔ)。 社交網(wǎng)絡(luò)，推薦系統(tǒng)等。 劣勢(shì) 存儲(chǔ)的數(shù)據(jù)缺少結(jié)構(gòu)化。 整個(gè)數(shù)據(jù)都存在磁盤中。默認(rèn)歷史數(shù)量為 3。 讀效率比寫高。 云平臺(tái)環(huán)境適配 支持 云平臺(tái) 內(nèi) 的信息 資源交換 湖南省各部門 系統(tǒng)統(tǒng)一遷移到 云平臺(tái) 后，由于處于統(tǒng)一 云平臺(tái) 環(huán)境 且 處于統(tǒng)一網(wǎng)絡(luò)環(huán)境下， 不 存 在 跨網(wǎng)絡(luò)和跨節(jié)點(diǎn)層級(jí)的情況。要求 各部門的應(yīng)用 系統(tǒng) 將 交換共享的數(shù)據(jù)統(tǒng)一 推送 到前置機(jī) 的數(shù)據(jù)庫(kù)中。 可擴(kuò)展能力 根據(jù)平臺(tái)所接入應(yīng)用、服務(wù)、數(shù)據(jù)的變化，平臺(tái)具備擴(kuò)展能力，并且所提供的擴(kuò)展方式不影響平臺(tái)工作效率。 ? 平臺(tái)的配置可動(dòng)態(tài)改變。 平臺(tái) 提供安全可靠的數(shù)據(jù)傳輸能力 且 支持 國(guó)密 算法， 具備安全 的傳輸通道與加密通道。信息庫(kù)系統(tǒng)由政務(wù)部門的共享信息庫(kù)、目錄內(nèi)容信息庫(kù)和目錄服務(wù)中心的目錄內(nèi)容管理信息庫(kù)、服務(wù)信息庫(kù)組成。 查詢系統(tǒng)按照《政務(wù)信息資源目錄體系第 4 部分：政務(wù)信息資源分類 》進(jìn)行網(wǎng)頁系統(tǒng)的開發(fā)。包含必須具有的基本功能要求和選擇實(shí)現(xiàn)的可選功能要求。 政務(wù) 資源管理平臺(tái) 結(jié)構(gòu)設(shè)計(jì) 金蝶通過 對(duì)目錄體系國(guó)家標(biāo)準(zhǔn)的研究分析，提出目錄體系的實(shí)現(xiàn)架構(gòu)模型，該模型按照國(guó)家標(biāo)準(zhǔn)的要求，依托電子政務(wù)網(wǎng)絡(luò)，建立的政務(wù)信息資源目錄體系技術(shù)支撐環(huán)境即金蝶 APUSIC 資源 目錄管理系統(tǒng) ，由信息庫(kù)系統(tǒng)和目錄內(nèi)容服務(wù)系統(tǒng)組成。 目錄管理子系統(tǒng) 目錄管理子系統(tǒng)完成對(duì)元數(shù)據(jù)的審核以及目錄信息庫(kù)的管理。使用目錄體系可以以更靈活的方式實(shí)現(xiàn)更多應(yīng)用，更多資源的接入與共享。 信息資源目錄體系建設(shè)任務(wù) 信息資源目錄體系中涉及的角色主要包括：信息資源目錄的使用者、信息資源目錄的子管理員、信息資源目錄的系統(tǒng) 管理員。 （ 2）行業(yè)面。信息資源的主題分類體現(xiàn)了其內(nèi)容的屬性或特征；信息資源的行業(yè)分類體現(xiàn)了政務(wù)部門職能的特點(diǎn)；信息資源的服務(wù)分類體現(xiàn)了政務(wù)信息資源面向用戶提供的功能服務(wù)的劃分；信息資源形態(tài)分類體現(xiàn)了信息的存在形式。 內(nèi)部碼為“信息資源目錄”編碼管理系統(tǒng)內(nèi)部使用的編碼 , 內(nèi)部編碼必須具有唯一性。 級(jí)次名稱：通過級(jí)次名稱可以更快的確定一個(gè)編碼相對(duì)應(yīng)的級(jí)別。 獲得操作權(quán)限的下級(jí)單位，可以維護(hù)權(quán)限范圍內(nèi)的編碼。 信息發(fā) 布?xì)v史記錄等。 技術(shù)元數(shù)據(jù)一般由數(shù)據(jù)庫(kù)管理系統(tǒng)提供的功能進(jìn)行維護(hù)。 目錄信息與服務(wù) 信息資源目錄信息與服務(wù)包括三個(gè)層次：目錄信息層、功能服務(wù)層和服務(wù)表現(xiàn)層。 信息資源的共享通過信息資源的目錄體系來實(shí)現(xiàn)。 （ 2）分類 能夠按照信息資源類別進(jìn)行分 分類 管理 ，支持信息資源關(guān)鍵詞的自動(dòng)提取，提供自動(dòng)建議分類。 對(duì)公共資源核心元數(shù)據(jù)和交換服務(wù)資源核心元數(shù)據(jù)的編輯，主要包括提取信 26 息相關(guān)特征信息，形成公共資源核心元數(shù)據(jù)；提取交換服務(wù)資源的相關(guān)特征信息，形成交換服務(wù)核心元數(shù)據(jù)；對(duì)信息資源核心元數(shù)據(jù)中的分類信息進(jìn)行賦值；提供者可在編目時(shí)對(duì)信息資源進(jìn)行唯一標(biāo)識(shí)符的賦碼等內(nèi)容。提供人機(jī)交互方式的目錄內(nèi)容的查詢功能。 （ 2） 、負(fù)責(zé)信息交換功能的統(tǒng)一管理，為跨部門、跨市州 /區(qū)縣的信息資源交換提供服務(wù)。交換前置支持不 同的交換信息庫(kù)之間的雙向信息交換，是交換信息庫(kù)和交換傳輸系統(tǒng)之間的橋梁，支持多個(gè)交換服務(wù)的并發(fā)運(yùn)行。交換管理支持對(duì)整個(gè)交換平臺(tái)的綜合管理監(jiān)控，包括交 換流程的配置、部署與管理以及對(duì)交換系統(tǒng)運(yùn)行情況的監(jiān)視與管理兩個(gè)方面。 內(nèi)部數(shù)據(jù)控制機(jī)制和調(diào)度方式過程 政務(wù)信息 資源 交換平臺(tái)數(shù)據(jù)控制和調(diào)度方式如下： 數(shù)據(jù)控制和調(diào)度方式圖 整體過程分為數(shù)據(jù)交換、數(shù)據(jù)轉(zhuǎn)換、監(jiān)控管理三大控制模塊，其中監(jiān)控管理模塊能夠?qū)?shù)據(jù)交換和數(shù)據(jù)轉(zhuǎn)換模塊完全監(jiān)控。 針對(duì)部門通過暴露 Web 服務(wù)的方式提供數(shù)據(jù)的場(chǎng)景，數(shù)據(jù)交換平臺(tái)提供 Web服務(wù)適配器，能夠通過調(diào)用 Web 服務(wù)的方式，獲取數(shù)據(jù)。 （ 3） 、數(shù)據(jù) 加 載 將抽取到 的數(shù)據(jù)經(jīng)過加工后，將加工后的結(jié)果數(shù)據(jù)存入數(shù)據(jù)庫(kù)， 橋 接交換子系統(tǒng)中要求將數(shù)據(jù)存入交換庫(kù)，所有涉及交換的數(shù)據(jù)均必須落地， 以實(shí)現(xiàn)對(duì)數(shù)據(jù)交換的 跟蹤、監(jiān)控和事后查詢等管理任務(wù)。 集群是 數(shù)據(jù)集成中間件工具的企業(yè)級(jí)特性。 3. 多種調(diào)度方式執(zhí)行交換任務(wù) 需要支持多種調(diào)度方式執(zhí)行交換任務(wù)，比如間隔時(shí)間，定時(shí)執(zhí)行，以及可以自定義調(diào)度周期執(zhí)行交換任務(wù)。 5. 運(yùn)行容器 功能模塊 按照如上整體架構(gòu)，系統(tǒng)整體由于四個(gè)模塊構(gòu)成，分別是括核心容器、流程管理模塊，任務(wù)管理模塊，部署開發(fā)模塊和日志審模塊。在本系統(tǒng)架構(gòu)中，業(yè)務(wù)系統(tǒng)和前置交換庫(kù)的數(shù)據(jù)異構(gòu)的復(fù)雜轉(zhuǎn)換由橋接子系統(tǒng)完成。在沒有橋接系統(tǒng)的情況下，前置交換系統(tǒng)可支持直接和業(yè)務(wù)庫(kù)的 交換，支持常見的數(shù)據(jù)轉(zhuǎn)換，包括字段拆分，字段合并，截取，計(jì)算器和常量等基本轉(zhuǎn)換。 2. 流程部署 提供部署接口，通過交換管理系統(tǒng)實(shí)現(xiàn)交換流程的遠(yuǎn)程部署到前置交換系統(tǒng)。 5. 不同類型交換庫(kù)的數(shù)據(jù)抽取 前置交換系統(tǒng)需要適應(yīng)各種類型的前置交換數(shù)據(jù)庫(kù)的數(shù)據(jù)抽取，必須支持目前的幾大主流關(guān)系數(shù)據(jù)庫(kù)作為前置交換庫(kù)，包括 MySQL,Oracle,SQL Server,DB2 等數(shù)據(jù)庫(kù)。提供了 Scale Out 的特性。 （ 4） 、 建模工具 Designer 設(shè)計(jì)器 是 基于 SWT GUI 編程框架的圖形化高度集成開發(fā)環(huán)境。 （ 2） 、數(shù)據(jù) 轉(zhuǎn)換 數(shù)據(jù)轉(zhuǎn)換是根據(jù)數(shù)據(jù)系統(tǒng)模型的要求，對(duì)抽取后的數(shù)據(jù)進(jìn)行轉(zhuǎn)換、拆分、匯總等處理，保證來自不同系統(tǒng)、不同格式 的數(shù)據(jù)的一致性和完整性，并按要求裝入數(shù)據(jù)庫(kù)。 2．調(diào)度策略靈活：按周期設(shè)定。 數(shù)據(jù)交換與共享系統(tǒng)主要包括金蝶 ApusicMQ 消息中間件、金蝶 ApusicETL數(shù)據(jù)集成軟件、金蝶 ApusicDXP 數(shù)據(jù) 交換 系統(tǒng)。交換管理支持對(duì)整個(gè)交換平臺(tái)的綜合管理監(jiān)控， 28 包括交換流程的配置、部署與管理以及對(duì)交換系統(tǒng)運(yùn)行情況的監(jiān)視與管理兩個(gè)方面。 （ 4） 、 通過前置交換 系統(tǒng) ，可以實(shí)現(xiàn)部門之間的數(shù)據(jù)對(duì)接，實(shí)現(xiàn) 相 同層級(jí)間部門信息交換，同時(shí) 前置 機(jī)上要部署前置 數(shù)據(jù) 庫(kù)做為 交換 數(shù)據(jù)庫(kù)，所有對(duì)接的數(shù)據(jù)在交換數(shù)據(jù)庫(kù)中要進(jìn)行落地，以實(shí)現(xiàn)對(duì)數(shù) 據(jù)交換的 跟蹤、監(jiān)控和事后查詢等管理任務(wù)。 政務(wù)信息資源交換平臺(tái) 設(shè)計(jì)方案 概述 政務(wù)信息資源交換平臺(tái)采用基于分布式消息管道與 分布式服務(wù)調(diào)用 架構(gòu)，來建設(shè)電子政務(wù)數(shù)據(jù)交換共享、數(shù)據(jù)歸集、應(yīng)用支撐服務(wù)、仿真環(huán)境。 3． 發(fā)布管理 信息目錄管理者通過目錄體系服務(wù)器將元數(shù)據(jù)庫(kù)的內(nèi)容發(fā)布到信息資源目錄服務(wù)系統(tǒng)中，支持公開元數(shù)據(jù)庫(kù)數(shù)據(jù)的發(fā)布管理，支持多種元數(shù)據(jù)發(fā)布格式。 對(duì)于提供者已經(jīng)對(duì)信息資源唯一標(biāo)識(shí)符賦碼的情況，管理者對(duì)信息資源的唯一標(biāo)識(shí)符進(jìn)行審核，檢查提供者 所提交的唯一標(biāo)識(shí)符是否符合要求。 數(shù)據(jù)資源規(guī)劃將以上述的信息資源目錄體系為基礎(chǔ)，通過梳理業(yè)務(wù)流程、指標(biāo)代碼、元數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)建設(shè)實(shí)現(xiàn)。 （ 2）功能服務(wù)層：主要由公共資源目錄和交換服務(wù)目錄組成。 用戶管理表：用戶名稱、密碼、角色等。主要包括數(shù)據(jù)集描述