【正文】 利用信息集成技術 構建勞動與社會保障數(shù)據(jù)交換平臺 IBM 技術建議方案 2 一、 概述 以現(xiàn)有信息網(wǎng)絡為依托，以現(xiàn)有業(yè)務信息為樞紐，為勞動與社?？蛻艚⒔y(tǒng)一的數(shù)據(jù)交換平臺。在建立集中統(tǒng)一的數(shù)據(jù)交換平臺，實現(xiàn)提取生產區(qū)的實際業(yè)務數(shù)據(jù)，并進行數(shù)據(jù)的過濾、檢測。統(tǒng)一數(shù)據(jù)標準。形成統(tǒng)一的交換資源數(shù)據(jù)庫，為統(tǒng)計分析提供基礎數(shù)據(jù)。完成全國聯(lián)網(wǎng)數(shù)據(jù)上報工作。同時實現(xiàn)業(yè)務資源數(shù)據(jù)庫的遠程備份。 1. 現(xiàn)狀 現(xiàn)在的勞動與社保數(shù)據(jù)庫有近十個，其中數(shù)據(jù)庫容量平均是 50G，而且數(shù)據(jù)源為異構數(shù)據(jù)源，包括 Oracle、 DB Sqlserver 等數(shù)據(jù)庫； 2. 系統(tǒng)主要建設目標： ? 建立 數(shù)據(jù)中心業(yè)務 資源庫的數(shù)據(jù)采集平臺 ， 用以實現(xiàn) 對垂直的下級 業(yè)務系統(tǒng)數(shù)據(jù)向 上級中心業(yè)務 資源庫的 及時 更新 以及數(shù)據(jù)轉換。 數(shù)據(jù)中心資源庫數(shù)據(jù)采集平臺包括數(shù)據(jù)采集和數(shù)據(jù)轉換兩個主要部分。 數(shù)據(jù)采集平臺起到隔離基層業(yè)務系統(tǒng)和相關資源庫應用的作用，使得未來任何的業(yè)務系統(tǒng)的變化（系統(tǒng)更新、升級、數(shù)據(jù)格式改變甚至數(shù)據(jù)庫系統(tǒng)變更等 ）都不會影響整個資源庫系統(tǒng)的運行。 數(shù)據(jù)轉換平臺起到 數(shù)據(jù)質量管理 的作用 ，對數(shù)據(jù)的屬性、邏輯正確性、完整性、一致性等進行驗證 查核 工作。 保障 信息資源庫 取 得的數(shù)據(jù)是真實、一致和完整的。 數(shù)據(jù)采集和數(shù)據(jù)轉換相結合，將形成一個長期穩(wěn)定的數(shù)據(jù)采集平臺。 ? 支持 數(shù)據(jù)分析和綜合決策。在資源庫基礎上，進行數(shù)據(jù) 信息的 綜合利用，實現(xiàn) 信息 分析 、數(shù)據(jù)挖掘 和決策 支持 。同時資源庫的建設將為數(shù)據(jù)倉庫及應用的建設打下基礎。 ? 建立對外的統(tǒng)一數(shù)據(jù)交換區(qū)， 實現(xiàn)業(yè)務資源數(shù)據(jù)與交換資源數(shù)據(jù)的數(shù)據(jù)交換、上報的功能， 將數(shù)據(jù)及時地通過統(tǒng)一的數(shù)據(jù)交換平臺，實現(xiàn)向部 3 里及橫向與其它平級單位間的數(shù)據(jù)交換。 實現(xiàn)業(yè)務資源數(shù)據(jù)庫到交換資源庫的數(shù)據(jù)交換，實現(xiàn)向部上報數(shù)據(jù)的功能。建立統(tǒng)一的交換數(shù)據(jù)區(qū)。 ? 基于交換平臺，實 現(xiàn)對業(yè)務數(shù)據(jù)的檢測、過濾、篩選、抽取等功能。實現(xiàn)業(yè)務資源數(shù)據(jù)的數(shù)據(jù)檢測、過濾、篩選、抽取。 數(shù)據(jù)交換平臺是建設勞動與社保數(shù)據(jù)分析區(qū)及數(shù)據(jù)交換區(qū)的核心系統(tǒng)，其主要的作用為： ? 為地市級社保信息向上級提供安全、高效的信息傳遞、采集通道； ? 保證社保分析數(shù)據(jù)信息交互的數(shù)據(jù)實時性和數(shù)據(jù)一致性； ? 在社保內部形成統(tǒng)一的數(shù)據(jù)視圖，方便管理； ? 提供向部里進行數(shù)據(jù)交換的統(tǒng)一平臺； ? 屏蔽當前勞動與社保內的 I T 環(huán)境的復雜性，方便應用開發(fā)和管理； ? 屏蔽當前勞動與社保管理機構內的 I T 環(huán)境的分布式特性（省級、地市級管理），方便應用 開發(fā)和管理； 在此，我們建議利用 IBM 最新的信息整合的技術和解決方案構建一個統(tǒng)一的公共數(shù)據(jù)交換平臺方案。下面我們對這樣的一個解決方案進行詳細說明。 二、 勞動與社會保障行業(yè)數(shù)據(jù)交換平臺方案 1. 本解決方案的設計出發(fā)點： ? 快速實現(xiàn)對多種異構數(shù)據(jù)源的集成 ? 保證勞動與社保分析區(qū)數(shù)據(jù)采集、交換區(qū)數(shù)據(jù)的實時性、一致性； ? 建立一套安全可靠的信息交換通道，實現(xiàn)數(shù)據(jù)在上、下級管理系統(tǒng)之間的數(shù)據(jù)交換、數(shù)據(jù)同步； ? 建立統(tǒng)一數(shù)據(jù)視圖，支持真正意義上的勞動與社保信息分析區(qū)及交換區(qū)的建立，提供復雜、分布式環(huán)境下的可讀寫操作環(huán)境，并支持今后建 立跨業(yè)務系統(tǒng)條塊的新的業(yè)務流程； 4 ? 簡化應用編程的難度，縮短開發(fā)和實施的周期，降低日常維護難度； ? 能夠很好地將當前業(yè)務系統(tǒng)與新的綜合業(yè)務系統(tǒng)的用戶管理、認證及授權機制結合，建立方便、清晰、易管理的用戶安全認證管理機制； ? 在分布式的環(huán)境下實現(xiàn)全局優(yōu)化，保證分析應用及數(shù)據(jù)交換的整體性能表現(xiàn)； ? 適應未來擴展性要求，方便應用范疇的擴展； 2. 建議通過 IBM 信息集成（ II）技術 方式 實現(xiàn)公共數(shù)據(jù)交換平臺 信息整合方式也稱為數(shù)據(jù)整合方式。信息整合就是將業(yè)務系統(tǒng)的數(shù)據(jù)進行有機的整合集成，從而實現(xiàn)對信息數(shù)據(jù)共享、交換的過程。 IBM 信息集成 II 的核心在于業(yè)務數(shù)據(jù)的采集，并不關心原有業(yè)務數(shù)據(jù)的流程。 因此， II 的核心是數(shù)據(jù)的集成。它采用數(shù)據(jù)包裝器作為連接件，將現(xiàn)有客戶的異種數(shù)據(jù)庫（ Oracle、 DB Sqlserver） 等連接在一起。 II 可以采用 XML 格式或者關系型格式對數(shù)據(jù)進行標準定義，平臺工具內嵌數(shù)據(jù)采集監(jiān)測功能。應用的開發(fā)支持 SQL9 XML 和 Web Service 標準，保障了數(shù)據(jù)使用的通用性。并且可以保證系統(tǒng)的有效性、性能和易開發(fā)性。 在 有效性 方面， II 的數(shù)據(jù)采集機制，對源數(shù)據(jù)增量識別的問題采用了偵聽同步或者數(shù)據(jù)復制的方式， 可以有效地解決數(shù)據(jù)采集同步的問題。而 II 的數(shù)據(jù)包裝器運行在資源庫系統(tǒng)中心，無需異地開發(fā)。 II 能跨本地和異地網(wǎng)提取數(shù)據(jù)，也能在源業(yè)務系統(tǒng)屏蔽訪問時，由源業(yè)務系統(tǒng)傳遞 XML 數(shù)據(jù)包，對 XML 數(shù)據(jù)文件進行信息分解和提取，能夠滿足不同的源業(yè)務系統(tǒng)的特點。 在 性能 方面，實際的測試表明， II 的數(shù)據(jù)復制能夠達到 提取量，而 II 的快速數(shù)據(jù)導入功能更能達到 30GB/小時，而該測試結果還是在一臺資源緊張的服務器運行出來的。由于 II 的平臺設計的目的就是為了解決數(shù)據(jù)整合的問題，因此能夠得到這樣比較理想的測試結果 ，而無需依賴于特殊的開發(fā)和編程手段。 基于上述理由，我們推薦使用信息集成平臺來完成資源庫的數(shù)據(jù)采集功能，以建立長期穩(wěn)定的綜合資源數(shù)據(jù)庫平臺，滿足中心業(yè)務數(shù)據(jù)庫交換和數(shù)據(jù)復用的 5 需求。 通過 IBM數(shù)據(jù)整合平臺，建立勞動與社會保障業(yè)務數(shù)據(jù)中心及數(shù)據(jù)分析區(qū)和交換區(qū) 我們利用 IBM 數(shù)據(jù)整合平臺建立一個信息集成訪問接口，建立起社保信息數(shù)據(jù)交換平臺，同時在分級上下系統(tǒng)間業(yè)務數(shù)據(jù)的數(shù)據(jù)采集平臺，并在分析數(shù)據(jù)區(qū)、交換數(shù)據(jù)區(qū)間建立一個可讀寫的雙向訪問接口，實現(xiàn)不同數(shù)據(jù)分區(qū)間的數(shù)據(jù)交換。 在所提供的統(tǒng)一訪問接口的支持下，就可以在 一個整體數(shù)據(jù)庫的邏輯視圖下（這一視圖跨越地市級勞動與社保信息管理系統(tǒng)），經過相應的數(shù)據(jù)轉換，來實現(xiàn)中心業(yè)務數(shù)據(jù)，和面向勞動與社保信息分析及交換的數(shù)據(jù)流程和業(yè)務流程，實現(xiàn)整個勞動與社保分析系統(tǒng)和數(shù)據(jù)交換系統(tǒng)快速開發(fā)和部署。 在分級縱向信息整合建立起數(shù)據(jù)中心的過程中，建議分階段實現(xiàn)，第一階段旨在利用數(shù)據(jù)映射層，實現(xiàn)統(tǒng)一查詢訪問，使全省數(shù)據(jù)可共享。第二階段，結合數(shù)據(jù)整合層的各項功能，進行分極系統(tǒng)的數(shù)據(jù)標準的規(guī)范化，提高共享的質量和數(shù)據(jù)復用，并為數(shù)據(jù)交換做準備。這兩個階段是信息整合所不可或缺的必要環(huán)節(jié)。第三階段，將 部分被頻繁訪問、且實時性要求有限的數(shù)據(jù)物理集中，提高數(shù)據(jù)查詢的質量，便于決策分析等業(yè)務應用。第四階段，在第二階段數(shù)據(jù)標準規(guī)范化的基礎上，實現(xiàn)統(tǒng)一的數(shù)據(jù)交換。這兩個階段可根據(jù)實際業(yè)務需求取舍，也可更換先后次序。 數(shù)據(jù)交換平臺的架構圖如下： 6 數(shù)據(jù)整合平臺負責從市級業(yè)務數(shù)據(jù)庫及外部數(shù)據(jù)源中獲取資源庫所需的數(shù)據(jù)，實現(xiàn)中心不同數(shù)據(jù)分區(qū)間的交換。數(shù)據(jù)整合平臺位于業(yè)務數(shù)據(jù)庫和數(shù)據(jù)轉換平臺之間，屏蔽了后續(xù)數(shù)據(jù)處理與數(shù)據(jù)來源間的直接關系。整合平臺主要實現(xiàn)兩個方面的功能： ? 業(yè)務數(shù)據(jù)中心的 數(shù)據(jù)采集和轉換 ? 不同數(shù)據(jù)分區(qū)（業(yè)務數(shù)據(jù)區(qū)、分析區(qū)、交換區(qū)）間的數(shù)據(jù)交換 為保證對數(shù)據(jù)整合平臺的統(tǒng)一控制和管理，我們采用集中式的數(shù)據(jù)整合平臺設計思路，即在中心部署一個大的平臺上完成對主要業(yè)務數(shù)據(jù)的采集，及不同數(shù)據(jù)分區(qū)間的數(shù)據(jù)交換。數(shù)據(jù)整合平臺設計的基本原則是在業(yè)務系統(tǒng)部署軟件，和編寫專用接口，所有的軟件部署也都在此平臺上實施。 實現(xiàn)數(shù)據(jù)交換 在本方案中，根據(jù)與已有系統(tǒng)連接的要求，需要支持實現(xiàn)與 Oracle， SQL Server， DB2等異構、多個數(shù)據(jù)庫系統(tǒng)之間的數(shù)據(jù)復制，這就面臨著一個異構數(shù)據(jù)庫之間雙 向復制的技術要求，這在數(shù)據(jù)庫領域一直是一個很難解決的問題。而IBM WebSphere Information Integrator 恰恰在解決一個企業(yè)級異構數(shù)據(jù)集成同時，很好地解決了這一棘手的問題。 IBM WebSphere Information Integrator 7 能夠支持用戶在一個廣泛的異構數(shù)據(jù)環(huán)境內，定義各個異構數(shù)據(jù)源之間的復制關系和復制機