【正文】 樣對多個數(shù)據(jù)源實施查詢和處理，同時保持數(shù)據(jù)源各自的獨立性和完整性。這種客 戶訪問和查詢語言靈活性的組合使現(xiàn)有開發(fā)和分析工具能夠通過集成服務(wù)器訪問更廣泛的數(shù)據(jù) ,并直接利用集成服務(wù)器所提供的信息集成功能。 靈活的訪問方式 IBM 的設(shè)想是通過行業(yè)標準接口提供對信息集成基礎(chǔ)構(gòu)架的靈活訪問。對數(shù)據(jù)管理系統(tǒng)的發(fā)展不僅是要實現(xiàn)對單一數(shù)據(jù)庫中存儲的信息進行管理，而且還要能夠提供對所有形式數(shù)據(jù)的增值性集成、對數(shù)據(jù)安排實施動態(tài)管理以滿足可用性、實時性同時滿足性能要求以及提供可繼續(xù)減輕 IT 人員管理復(fù)雜數(shù)據(jù)體系結(jié)構(gòu)負擔的自主特色功能。 3）雙層認證授權(quán)機制 WebSphere II 的雙層認證授權(quán)機制，充分保證異地數(shù)據(jù)訪問下的數(shù)據(jù)安全。第二階段，開發(fā)者可以編寫存儲過程、或應(yīng)用程序處理 CCD 表中的數(shù)據(jù)，再采用復(fù)制方法使數(shù)據(jù)作用到最終目標表。如下圖紫色方框標注的兩列：右側(cè)的是目標列，其定義長度為 30 個字符；左側(cè)的是對源表某列作 SUBSTR 字符串截取生成的計算列，截取前 30 個字符。為了使目標數(shù)據(jù)源能夠讀懂、接受復(fù)制數(shù)據(jù)源的數(shù)據(jù)，就必須進行復(fù)制轉(zhuǎn)換。 SQL 復(fù)制實現(xiàn)機制能夠解決以下三個主要問題： 增量復(fù)制 支持對數(shù)據(jù)的變化增量識別、提取和復(fù)制，與全量數(shù)據(jù)復(fù)制相比，可避免全量數(shù)據(jù)傳輸?shù)木薮筘撦d對各個系統(tǒng)的影響。 2） SQL 復(fù)制 在多種數(shù)據(jù)源的環(huán)境中，主要采用 SQL 復(fù)制技術(shù)。 ? 避免對現(xiàn)有數(shù)據(jù)源和應(yīng)用程序進行更改。 ? 雙向 SQL 訪問。其主要特點為： ? 透明性。信息整合服務(wù)器維護一個全局的數(shù)據(jù)字典，其中保存需在信息整合平臺被訪問的數(shù)據(jù)的相關(guān)描述，包括數(shù)據(jù)源的配置信息，數(shù)據(jù)源表的結(jié)構(gòu)，字段數(shù)據(jù)類型，相應(yīng)的索引及數(shù)據(jù)量數(shù)據(jù)分布的統(tǒng)計信息。對非關(guān)系型數(shù)據(jù)源，包裝器直接進行數(shù)據(jù)訪問。在此基礎(chǔ)上， WII 還提供異構(gòu)數(shù)據(jù)復(fù)制技術(shù)及數(shù)據(jù)偵聽技術(shù)，實現(xiàn)對增量信息的識別和同步。 3. IBM數(shù)據(jù)整合平臺的功能 我們建議選用 IBM 數(shù)據(jù)整合平臺 WebSphere Information Integrator 作為數(shù)據(jù)交換平臺的核心技術(shù)。首先通過數(shù)據(jù)偵聽獲取變更數(shù)據(jù)的主鍵及操作類型信息，并同步到數(shù)據(jù)采集平臺。數(shù)據(jù)偵聽與數(shù)據(jù)復(fù)制最大 的不同是在變更數(shù)據(jù)捕獲方面。對大多數(shù)據(jù)業(yè)務(wù)系統(tǒng)而言，數(shù)據(jù)復(fù)制對系統(tǒng)有一定影響，但影響有限。對 Oracle 數(shù)據(jù)源，通過 Trigger 機制實現(xiàn)。 數(shù)據(jù)復(fù)制 數(shù)據(jù)采集平臺提供對各類主流數(shù)據(jù)庫的各主要版本數(shù)據(jù)復(fù)制的能力。對于網(wǎng)絡(luò)條件較好的數(shù)據(jù)源，該方式可直接通過信息采集平臺向業(yè)務(wù)數(shù)據(jù)庫發(fā)送數(shù)據(jù)抽取的 SQL 語句，增量信息通過 Where 條件傳入，采集的數(shù)據(jù)直接保存在信息整合平臺。而從前，我們要實現(xiàn)這樣一個應(yīng)用，就需要花費大量的精力，進行數(shù)據(jù)采集匯總的工作，從各個地域、各個業(yè)務(wù)系統(tǒng)、各個數(shù)據(jù)庫平臺上進行數(shù)據(jù)遷移，工作量大，而且準確率和實時性都很差。 實現(xiàn)數(shù)據(jù)交換 在本方案中，根據(jù)與已有系統(tǒng)連接的要求，需要支持實現(xiàn)與 Oracle， SQL Server， DB2等異構(gòu)、多個數(shù)據(jù)庫系統(tǒng)之間的數(shù)據(jù)復(fù)制，這就面臨著一個異構(gòu)數(shù)據(jù)庫之間雙 向復(fù)制的技術(shù)要求，這在數(shù)據(jù)庫領(lǐng)域一直是一個很難解決的問題。 數(shù)據(jù)交換平臺的架構(gòu)圖如下： 6 數(shù)據(jù)整合平臺負責從市級業(yè)務(wù)數(shù)據(jù)庫及外部數(shù)據(jù)源中獲取資源庫所需的數(shù)據(jù)，實現(xiàn)中心不同數(shù)據(jù)分區(qū)間的交換。這兩個階段是信息整合所不可或缺的必要環(huán)節(jié)。 通過 IBM數(shù)據(jù)整合平臺，建立勞動與社會保障業(yè)務(wù)數(shù)據(jù)中心及數(shù)據(jù)分析區(qū)和交換區(qū) 我們利用 IBM 數(shù)據(jù)整合平臺建立一個信息集成訪問接口，建立起社保信息數(shù)據(jù)交換平臺，同時在分級上下系統(tǒng)間業(yè)務(wù)數(shù)據(jù)的數(shù)據(jù)采集平臺，并在分析數(shù)據(jù)區(qū)、交換數(shù)據(jù)區(qū)間建立一個可讀寫的雙向訪問接口，實現(xiàn)不同數(shù)據(jù)分區(qū)間的數(shù)據(jù)交換。 II 能跨本地和異地網(wǎng)提取數(shù)據(jù)，也能在源業(yè)務(wù)系統(tǒng)屏蔽訪問時，由源業(yè)務(wù)系統(tǒng)傳遞 XML 數(shù)據(jù)包，對 XML 數(shù)據(jù)文件進行信息分解和提取，能夠滿足不同的源業(yè)務(wù)系統(tǒng)的特點。應(yīng)用的開發(fā)支持 SQL9 XML 和 Web Service 標準，保障了數(shù)據(jù)使用的通用性。 IBM 信息集成 II 的核心在于業(yè)務(wù)數(shù)據(jù)的采集，并不關(guān)心原有業(yè)務(wù)數(shù)據(jù)的流程。 數(shù)據(jù)交換平臺是建設(shè)勞動與社保數(shù)據(jù)分析區(qū)及數(shù)據(jù)交換區(qū)的核心系統(tǒng)，其主要的作用為： ? 為地市級社保信息向上級提供安全、高效的信息傳遞、采集通道； ? 保證社保分析數(shù)據(jù)信息交互的數(shù)據(jù)實時性和數(shù)據(jù)一致性； ? 在社保內(nèi)部形成統(tǒng)一的數(shù)據(jù)視圖，方便管理； ? 提供向部里進行數(shù)據(jù)交換的統(tǒng)一平臺； ? 屏蔽當前勞動與社保內(nèi)的 I T 環(huán)境的復(fù)雜性，方便應(yīng)用開發(fā)和管理； ? 屏蔽當前勞動與社保管理機構(gòu)內(nèi)的 I T 環(huán)境的分布式特性（省級、地市級管理），方便應(yīng)用 開發(fā)和管理； 在此，我們建議利用 IBM 最新的信息整合的技術(shù)和解決方案構(gòu)建一個統(tǒng)一的公共數(shù)據(jù)交換平臺方案。 實現(xiàn)業(yè)務(wù)資源數(shù)據(jù)庫到交換資源庫的數(shù)據(jù)交換，實現(xiàn)向部上報數(shù)據(jù)的功能。 ? 支持 數(shù)據(jù)分析和綜合決策。 數(shù)據(jù)采集平臺起到隔離基層業(yè)務(wù)系統(tǒng)和相關(guān)資源庫應(yīng)用的作用，使得未來任何的業(yè)務(wù)系統(tǒng)的變化（系統(tǒng)更新、升級、數(shù)據(jù)格式改變甚至數(shù)據(jù)庫系統(tǒng)變更等 ）都不會影響整個資源庫系統(tǒng)的運行。完成全國聯(lián)網(wǎng)數(shù)據(jù)上報工作。 利用信息集成技術(shù) 構(gòu)建勞動與社會保障數(shù)據(jù)交換平臺 IBM 技術(shù)建議方案 2 一、 概述 以現(xiàn)有信息網(wǎng)絡(luò)為依托，以現(xiàn)有業(yè)務(wù)信息為樞紐，為勞動與社?？蛻艚⒔y(tǒng)一的數(shù)據(jù)交換平臺。形成統(tǒng)一的交換資源數(shù)據(jù)庫，為統(tǒng)計分析提供基礎(chǔ)數(shù)據(jù)。 數(shù)據(jù)中心資源庫數(shù)據(jù)采集平臺包括數(shù)據(jù)采集和數(shù)據(jù)轉(zhuǎn)換兩個主要部分。 數(shù)據(jù)采集和數(shù)據(jù)轉(zhuǎn)換相結(jié)合，將形成一個長期穩(wěn)定的數(shù)據(jù)采集平臺。 ? 建立對外的統(tǒng)一數(shù)據(jù)交換區(qū)， 實現(xiàn)業(yè)務(wù)資源數(shù)據(jù)與交換資源數(shù)據(jù)的數(shù)據(jù)交換、上報的功能， 將數(shù)據(jù)及時地通過統(tǒng)一的數(shù)據(jù)交換平臺，實現(xiàn)向部 3 里及橫向與其它平級單位間的數(shù)據(jù)交換。實現(xiàn)業(yè)務(wù)資源數(shù)據(jù)的數(shù)據(jù)檢測、過濾、篩選、抽取。信息整合就是將業(yè)務(wù)系統(tǒng)的數(shù)據(jù)進行有機的整合集成，從而實現(xiàn)對信息數(shù)據(jù)共享、交換的過程。 II 可以采用 XML 格式或者關(guān)系型格式對數(shù)據(jù)進行標準定義，平臺工具內(nèi)嵌數(shù)據(jù)采集監(jiān)測功能。而 II 的數(shù)據(jù)包裝器運行在資源庫系統(tǒng)中心，無需異地開發(fā)。 基于上述理由，我們推薦使用信息集成平臺來完成資源庫的數(shù)據(jù)采集功能，以建立長期穩(wěn)定的綜合資源數(shù)據(jù)庫平臺，滿足中心業(yè)務(wù)數(shù)據(jù)庫交換和數(shù)據(jù)復(fù)用的 5 需求。第二階段，結(jié)合數(shù)據(jù)整合層的各項功能，進行分極系統(tǒng)的數(shù)據(jù)標準的規(guī)范化，提高共享的質(zhì)量和數(shù)據(jù)復(fù)用，并為數(shù)據(jù)交換做準備。這兩個階段可根據(jù)實際業(yè)務(wù)需求取舍，也可更換先后次序。數(shù)據(jù)整合平臺設(shè)計的基本原則是在業(yè)務(wù)系統(tǒng)部署軟件，和編寫專用接口，所有的軟件部署也都在此平臺上實施。 使用 IBM WebSphere Information Igrator 后， IBM DB2， IBM Informix，Microsoft， Oracle，和 Sybase 都可以作為復(fù)制源或復(fù)制目標； 用戶可以配置一個多樣性的拓撲環(huán)境 ? 復(fù)制服務(wù)器支持分布式（從一個數(shù)據(jù)庫到多個數(shù)據(jù)庫的數(shù)據(jù)遷移）和集中式（從多個數(shù)據(jù)庫到一個數(shù)據(jù)庫的數(shù)據(jù)遷移） ? 數(shù)據(jù)遷移可以同時使用標準的 SQL 表達式或存儲過程 ? 數(shù)據(jù)遷移可以定時的自動執(zhí)行，或在一定的時間間隔執(zhí)行，或連續(xù)執(zhí)行，或者由事件觸發(fā)執(zhí)行 數(shù)據(jù)復(fù)制定義關(guān) 系如下圖所示： 8 從上圖可以看出，使用 IBM WebSphere Information Integrator 后，可以非常方便地實現(xiàn)跨業(yè)務(wù)平臺、跨數(shù)據(jù)平臺、跨地域的業(yè)務(wù)數(shù)據(jù)匯總、統(tǒng)計分析等工作的開展。 批量數(shù)據(jù)抽取的方式一般為非實時模式，在業(yè)務(wù)系統(tǒng)空閑時進行運行。這種模式要求在數(shù)據(jù)源部署卸載及數(shù)據(jù)傳輸程序，管理維護成本較大，建議盡量采用第一種方式。 復(fù)制可分為兩個步驟． Capture 用于獲取數(shù)據(jù)源數(shù)據(jù)的增量。 WII 所提供的數(shù)據(jù)復(fù)制方式提供多種調(diào)度手段，支持分鐘級數(shù)據(jù)的同步。 對于部分不能提供增量信息，而當前業(yè)務(wù)系統(tǒng)負荷又較重的系統(tǒng)，可采用數(shù)據(jù)偵聽的模式。 11 數(shù)據(jù)偵聽同步分兩個步驟完成數(shù)據(jù)的采集。 數(shù)據(jù)采