【正文】 ? 聯(lián)邦數(shù)據(jù)服務(wù)器使用基于成本的分布式查詢(xún)優(yōu)化器選擇最佳的訪問(wèn)路徑以獲取更好的查詢(xún)性能。 DB2 聯(lián)邦數(shù)據(jù)服務(wù)器的強(qiáng)大性在于： ? 聯(lián)合本地表和遠(yuǎn)程數(shù)據(jù)源，就象所有的數(shù)據(jù)都在本地一樣操作。在這種需求之下， IBM公司提供了 IBM Information Integrator 系列產(chǎn)品，能夠在整個(gè)企業(yè)范圍內(nèi)訪問(wèn)關(guān)系型、結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。如果在該級(jí)數(shù)據(jù)中心需要建立一個(gè)本地?cái)?shù)據(jù)庫(kù)系統(tǒng)來(lái)支撐類(lèi)似統(tǒng)一單位庫(kù)、統(tǒng)一人員庫(kù)等標(biāo)準(zhǔn)化的數(shù)據(jù)存儲(chǔ)，同時(shí)還考慮開(kāi)展決策分析系統(tǒng)，那么可以使用 IBM Information Integrator 內(nèi)置的企業(yè)級(jí)數(shù)據(jù)庫(kù)存儲(chǔ)引擎支持建立一個(gè)本地的數(shù)據(jù)庫(kù)系統(tǒng)?？蓪?SQL的輸出直接送入 MQ 的隊(duì)列，也可用 SQL 直接訪問(wèn) MQ 隊(duì)列，對(duì)應(yīng) 用的整合提供了更好的靈活性。 4． 5 先進(jìn)的 Cache 技術(shù)，保證系統(tǒng)性能 IBM Information Integrator 內(nèi)置了先進(jìn)的 Cache 技術(shù)，可以支持用戶(hù)建立物化查詢(xún)表（ Materialized Query Table），這個(gè)物化查詢(xún)表可以跨越各個(gè)業(yè)務(wù)系統(tǒng)建立一個(gè)針對(duì)經(jīng)常查詢(xún)內(nèi)容的預(yù)計(jì)算、預(yù)處理的結(jié)果集，使用 Cache 技術(shù)存放起來(lái)，來(lái)提高使用到這些結(jié)果集的運(yùn)算或查詢(xún)操作的速度。 獨(dú)特的查詢(xún)重寫(xiě)技術(shù) : IBM 對(duì)用戶(hù)的每一個(gè) SQL 語(yǔ)句的處理過(guò)程于其它數(shù)據(jù)庫(kù)有所不同：在經(jīng)過(guò)語(yǔ)法分析和語(yǔ)義檢查之后，先對(duì)用戶(hù)的 SQL 語(yǔ)句進(jìn)行查詢(xún)重寫(xiě)，再將重寫(xiě)后的查詢(xún) SQL 語(yǔ)句送交優(yōu)化器優(yōu)化。基于 IBM Information Integrator 可實(shí)現(xiàn)異構(gòu)平臺(tái)的表級(jí)數(shù)據(jù)庫(kù)的通用 SQL 操作。 IBM 繼續(xù)專(zhuān)注于信息集 成對(duì)“ IBM 軟件集團(tuán)”全線產(chǎn)品，特別是 WebSphere 業(yè)務(wù)集成系列產(chǎn)品的集成，以提供一套全面的業(yè)務(wù)集成基礎(chǔ)構(gòu)架。它是分布 20 式訪問(wèn)特色功能的有益補(bǔ)充，實(shí)現(xiàn)了對(duì)集中式數(shù)據(jù)存儲(chǔ)器的管理，并為高效管理數(shù)據(jù)高速緩沖存儲(chǔ)器提供了必需的基礎(chǔ)構(gòu)架。 2020 年， IBM 組建了“ IBM 搜索和文本分析研究院”，以通過(guò)集成式體系結(jié)構(gòu)統(tǒng)一并加速 IBM 在高級(jí)搜索和挖掘功能上的研究和部署。 19 異構(gòu)性 : 一如其名它具有聯(lián)邦異構(gòu)類(lèi)型數(shù)據(jù)的功能，這些數(shù)據(jù)類(lèi)型包括結(jié)構(gòu)化數(shù)據(jù)（例如，關(guān)系 數(shù)據(jù)庫(kù)）、半結(jié)構(gòu)化數(shù)據(jù)（例如， XML 文檔）、非結(jié)構(gòu)化數(shù)據(jù)（例如，自由格式文本）。 無(wú)論采用何種客戶(hù)訪問(wèn)方式和查詢(xún)語(yǔ)言，應(yīng)用程序都應(yīng)能夠訪問(wèn)通過(guò)集成服務(wù) 18 器連接的所有數(shù)據(jù)。 三、 IBM 信息集成技術(shù)的特點(diǎn) 全局統(tǒng) 一的數(shù)據(jù)視圖 按照 IBM 的預(yù)想，信息集成基礎(chǔ)構(gòu)架必須為應(yīng)用層提供對(duì)其所需訪問(wèn)數(shù)據(jù)的全局統(tǒng)一的數(shù)據(jù)視圖，使應(yīng)用對(duì)數(shù)據(jù)的訪問(wèn)不受數(shù)據(jù)格式、數(shù)據(jù)位置和訪問(wèn)接口差異的限制。 兩階段復(fù)制中，首先由源表復(fù)制到一致更改數(shù)據(jù) CCD 表，后者能夠記錄在源表上所有的更改操作的類(lèi)型（插入、更新 及刪除）和結(jié)果，從而捕獲源表中所有的增量信息。 圖 SQL 復(fù)制機(jī)制 源數(shù)據(jù)與目標(biāo)數(shù)據(jù)間的復(fù)制轉(zhuǎn)換 源數(shù)據(jù)與目標(biāo)數(shù)據(jù)之間 ,往往存在著數(shù)據(jù)類(lèi)型、格式、邏輯等不一致。 WebSphere II查詢(xún)接口提供了基于標(biāo)準(zhǔn)的完整功能 —— 包括對(duì)后端數(shù)據(jù)源中缺失能力的補(bǔ)償。從不同數(shù)據(jù)源整合數(shù)據(jù)。 除包裝器外，信息整合服務(wù)器還有三個(gè)核心的部分。 信息整合平臺(tái)基礎(chǔ)架構(gòu)如下所示： 12 基于聯(lián)邦數(shù)據(jù)映射能力，在數(shù)據(jù)整合平臺(tái)可直接獲取業(yè)務(wù)數(shù)據(jù)庫(kù)的數(shù)據(jù)。 11 數(shù)據(jù)偵聽(tīng)同步分兩個(gè)步驟完成數(shù)據(jù)的采集。 WII 所提供的數(shù)據(jù)復(fù)制方式提供多種調(diào)度手段，支持分鐘級(jí)數(shù)據(jù)的同步。這種模式要求在數(shù)據(jù)源部署卸載及數(shù)據(jù)傳輸程序，管理維護(hù)成本較大，建議盡量采用第一種方式。 使用 IBM WebSphere Information Igrator 后， IBM DB2， IBM Informix，Microsoft， Oracle，和 Sybase 都可以作為復(fù)制源或復(fù)制目標(biāo)； 用戶(hù)可以配置一個(gè)多樣性的拓?fù)洵h(huán)境 ? 復(fù)制服務(wù)器支持分布式（從一個(gè)數(shù)據(jù)庫(kù)到多個(gè)數(shù)據(jù)庫(kù)的數(shù)據(jù)遷移）和集中式（從多個(gè)數(shù)據(jù)庫(kù)到一個(gè)數(shù)據(jù)庫(kù)的數(shù)據(jù)遷移） ? 數(shù)據(jù)遷移可以同時(shí)使用標(biāo)準(zhǔn)的 SQL 表達(dá)式或存儲(chǔ)過(guò)程 ? 數(shù)據(jù)遷移可以定時(shí)的自動(dòng)執(zhí)行，或在一定的時(shí)間間隔執(zhí)行，或連續(xù)執(zhí)行，或者由事件觸發(fā)執(zhí)行 數(shù)據(jù)復(fù)制定義關(guān) 系如下圖所示： 8 從上圖可以看出，使用 IBM WebSphere Information Integrator 后，可以非常方便地實(shí)現(xiàn)跨業(yè)務(wù)平臺(tái)、跨數(shù)據(jù)平臺(tái)、跨地域的業(yè)務(wù)數(shù)據(jù)匯總、統(tǒng)計(jì)分析等工作的開(kāi)展。這兩個(gè)階段可根據(jù)實(shí)際業(yè)務(wù)需求取舍，也可更換先后次序。 基于上述理由，我們推薦使用信息集成平臺(tái)來(lái)完成資源庫(kù)的數(shù)據(jù)采集功能，以建立長(zhǎng)期穩(wěn)定的綜合資源數(shù)據(jù)庫(kù)平臺(tái)，滿(mǎn)足中心業(yè)務(wù)數(shù)據(jù)庫(kù)交換和數(shù)據(jù)復(fù)用的 5 需求。 II 可以采用 XML 格式或者關(guān)系型格式對(duì)數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)定義，平臺(tái)工具內(nèi)嵌數(shù)據(jù)采集監(jiān)測(cè)功能。實(shí)現(xiàn)業(yè)務(wù)資源數(shù)據(jù)的數(shù)據(jù)檢測(cè)、過(guò)濾、篩選、抽取。 數(shù)據(jù)采集和數(shù)據(jù)轉(zhuǎn)換相結(jié)合，將形成一個(gè)長(zhǎng)期穩(wěn)定的數(shù)據(jù)采集平臺(tái)。形成統(tǒng)一的交換資源數(shù)據(jù)庫(kù)，為統(tǒng)計(jì)分析提供基礎(chǔ)數(shù)據(jù)。完成全國(guó)聯(lián)網(wǎng)數(shù)據(jù)上報(bào)工作。 ? 支持 數(shù)據(jù)分析和綜合決策。 數(shù)據(jù)交換平臺(tái)是建設(shè)勞動(dòng)與社保數(shù)據(jù)分析區(qū)及數(shù)據(jù)交換區(qū)的核心系統(tǒng)，其主要的作用為： ? 為地市級(jí)社保信息向上級(jí)提供安全、高效的信息傳遞、采集通道； ? 保證社保分析數(shù)據(jù)信息交互的數(shù)據(jù)實(shí)時(shí)性和數(shù)據(jù)一致性； ? 在社保內(nèi)部形成統(tǒng)一的數(shù)據(jù)視圖，方便管理； ? 提供向部里進(jìn)行數(shù)據(jù)交換的統(tǒng)一平臺(tái)； ? 屏蔽當(dāng)前勞動(dòng)與社保內(nèi)的 I T 環(huán)境的復(fù)雜性，方便應(yīng)用開(kāi)發(fā)和管理； ? 屏蔽當(dāng)前勞動(dòng)與社保管理機(jī)構(gòu)內(nèi)的 I T 環(huán)境的分布式特性（省級(jí)、地市級(jí)管理），方便應(yīng)用 開(kāi)發(fā)和管理； 在此，我們建議利用 IBM 最新的信息整合的技術(shù)和解決方案構(gòu)建一個(gè)統(tǒng)一的公共數(shù)據(jù)交換平臺(tái)方案。應(yīng)用的開(kāi)發(fā)支持 SQL9 XML 和 Web Service 標(biāo)準(zhǔn)，保障了數(shù)據(jù)使用的通用性。 通過(guò) IBM數(shù)據(jù)整合平臺(tái)，建立勞動(dòng)與社會(huì)保障業(yè)務(wù)數(shù)據(jù)中心及數(shù)據(jù)分析區(qū)和交換區(qū) 我們利用 IBM 數(shù)據(jù)整合平臺(tái)建立一個(gè)信息集成訪問(wèn)接口，建立起社保信息數(shù)據(jù)交換平臺(tái)，同時(shí)在分級(jí)上下系統(tǒng)間業(yè)務(wù)數(shù)據(jù)的數(shù)據(jù)采集平臺(tái)，并在分析數(shù)據(jù)區(qū)、交換數(shù)據(jù)區(qū)間建立一個(gè)可讀寫(xiě)的雙向訪問(wèn)接口，實(shí)現(xiàn)不同數(shù)據(jù)分區(qū)間的數(shù)據(jù)交換。 數(shù)據(jù)交換平臺(tái)的架構(gòu)圖如下： 6 數(shù)據(jù)整合平臺(tái)負(fù)責(zé)從市級(jí)業(yè)務(wù)數(shù)據(jù)庫(kù)及外部數(shù)據(jù)源中獲取資源庫(kù)所需的數(shù)據(jù)，實(shí)現(xiàn)中心不同數(shù)據(jù)分區(qū)間的交換。而從前，我們要實(shí)現(xiàn)這樣一個(gè)應(yīng)用，就需要花費(fèi)大量的精力，進(jìn)行數(shù)據(jù)采集匯總的工作，從各個(gè)地域、各個(gè)業(yè)務(wù)系統(tǒng)、各個(gè)數(shù)據(jù)庫(kù)平臺(tái)上進(jìn)行數(shù)據(jù)遷移，工作量大，而且準(zhǔn)確率和實(shí)時(shí)性都很差。 數(shù)據(jù)復(fù)制 數(shù)據(jù)采集平臺(tái)提供對(duì)各類(lèi)主流數(shù)據(jù)庫(kù)的各主要版本數(shù)據(jù)復(fù)制的能力。對(duì)大多數(shù)據(jù)業(yè)務(wù)系統(tǒng)而言，數(shù)據(jù)復(fù)制對(duì)系統(tǒng)有一定影響，但影響有限。首先通過(guò)數(shù)據(jù)偵聽(tīng)獲取變更數(shù)據(jù)的主鍵及操作類(lèi)型信息，并同步到數(shù)據(jù)采集平臺(tái)。在此基礎(chǔ)上， WII 還提供異構(gòu)數(shù)據(jù)復(fù)制技術(shù)及數(shù)據(jù)偵聽(tīng)技術(shù)，實(shí)現(xiàn)對(duì)增量信息的識(shí)別和同步。信息整合服務(wù)器維護(hù)一個(gè)全局的數(shù)據(jù)字典，其中保存需在信息整合平臺(tái)被訪問(wèn)的數(shù)據(jù)的相關(guān)描述，包括數(shù)據(jù)源的配置信息，數(shù)據(jù)源表的結(jié)構(gòu)，字段數(shù)據(jù)類(lèi)型，相應(yīng)的索引及數(shù)據(jù)量數(shù)據(jù)分布的統(tǒng)計(jì)信息。 ? 雙向 SQL 訪問(wèn)。 2） SQL 復(fù)制 在多種數(shù)據(jù)源的環(huán)境中，主要采用 SQL 復(fù)制技術(shù)。為了使目標(biāo)數(shù)據(jù)源能夠讀懂、接受復(fù)制數(shù)據(jù)源的數(shù)據(jù)，就必須進(jìn)行復(fù)制轉(zhuǎn)換。第二階段，開(kāi)發(fā)者可以編寫(xiě)存儲(chǔ)過(guò)程、或應(yīng)用程序處理 CCD 表中的數(shù)據(jù)，再采用復(fù)制方法使數(shù)據(jù)作用到最終目標(biāo)表。對(duì)數(shù)據(jù)管理系統(tǒng)的發(fā)展不僅是要實(shí)現(xiàn)對(duì)單一數(shù)據(jù)庫(kù)中存儲(chǔ)的信息進(jìn)行管理，而且還要能夠提供對(duì)所有形式數(shù)據(jù)的增值性集成、對(duì)數(shù)據(jù)安排實(shí)施動(dòng)態(tài)管理以滿(mǎn)足可用性、實(shí)時(shí)性同時(shí)滿(mǎn)足性能要求以及提供可繼續(xù)減輕 IT 人員管理復(fù)雜數(shù)據(jù)體系結(jié)構(gòu)負(fù)擔(dān)的自主特色功能。這種客 戶(hù)訪問(wèn)和查詢(xún)語(yǔ)言靈活性的組合使現(xiàn)有開(kāi)發(fā)和分析工具能夠通過(guò)集成服務(wù)器訪問(wèn)更廣泛的數(shù)據(jù) ,并直接利用集成服務(wù)器所提供的信息集成功能。 可擴(kuò)展性 : 一種可將聯(lián)邦能力擴(kuò)展到幾乎任何數(shù)據(jù)源的功能。研究成果將可為 IBM 信