【正文】 應(yīng)用程序能夠訪問(wèn)傳統(tǒng)數(shù)據(jù)庫(kù)或 Web 應(yīng)用客戶端 針對(duì)異構(gòu)關(guān)系型 數(shù)據(jù)庫(kù)的復(fù)制服務(wù)器（ Websphere II Replication） 客戶可以在異構(gòu)關(guān)系型數(shù)據(jù)資源之間復(fù)制數(shù)據(jù) IBM DB2， IBM Informix， Microsoft， Oracle，和 Sybase 都是可以作為復(fù)制源或復(fù)制目標(biāo)； Teradata 可以作為復(fù)制目標(biāo)。 ? 一個(gè)開(kāi)發(fā)工具箱，提供開(kāi)發(fā)訪問(wèn)其它的數(shù)據(jù)源。 ? 在一個(gè)聯(lián)邦數(shù)據(jù)服務(wù)器上處理分布式請(qǐng)求的各個(gè)部分，彌補(bǔ)數(shù)據(jù)源上的 SQL限制。一個(gè)聯(lián)邦數(shù)據(jù)服務(wù)器包括一個(gè)作為服務(wù)器的 DB2 實(shí)例，另外還可以有一個(gè)或多個(gè)不同的數(shù)據(jù)源對(duì)應(yīng)不同廠商的關(guān)系型數(shù)據(jù)庫(kù)，以及訪問(wèn)數(shù)據(jù)庫(kù)和數(shù)據(jù)源的客戶端（用戶和應(yīng)用）。 IBM Information Integrator 包括聯(lián)邦數(shù)據(jù)服務(wù)器（ Federated Data Server）和復(fù)制服務(wù)器（ Replication Server），用于整合異構(gòu)的實(shí)時(shí)數(shù)據(jù)。但是目前很多企業(yè)受各方面因素的約束，分散的且不同廠商的數(shù)據(jù)源很難復(fù)制或集中到單一的數(shù)據(jù)庫(kù)上。同時(shí)我們建議購(gòu)置磁帶庫(kù)及相應(yīng)的企業(yè)級(jí)備份管理軟件，配合 IBM Information Integrator 實(shí)現(xiàn)數(shù)據(jù)的備份 /恢復(fù)工作。 在方案中，數(shù)據(jù)中心部署 IBM 數(shù)據(jù)整合平臺(tái)，建立數(shù)據(jù)中心的業(yè)務(wù)數(shù)據(jù)中心，形成一個(gè)全局范圍內(nèi)的業(yè)務(wù)數(shù)據(jù)全集，首先可以滿足對(duì)勞動(dòng)與社保業(yè)務(wù)的分析要求，而且，在一定程度上滿足了數(shù)據(jù)層面中心對(duì)市級(jí)單位數(shù)據(jù)的冗余，備份。即 Information Integrator 中的一個(gè)用戶，也就是省級(jí)數(shù)據(jù)交換平臺(tái)系統(tǒng)中的一個(gè)用戶可以映射到下屬各個(gè)業(yè)務(wù)系統(tǒng)中的某個(gè)或某幾個(gè)用戶上，由各個(gè)業(yè)務(wù)系統(tǒng)管理訪問(wèn)自身業(yè)務(wù)數(shù)據(jù)的所有用戶及其授權(quán)，而省級(jí)數(shù)據(jù)交換平臺(tái)的用戶僅是這些數(shù)據(jù)的一個(gè)使用者， 其對(duì)數(shù)據(jù)的操作權(quán)限不能超越自身系統(tǒng)的授權(quán)機(jī)制，這樣就保證了業(yè)務(wù)數(shù)據(jù)的安全性。 24 4． 8 對(duì) MQ 的直接支持 MQ 是在消息傳輸中間件市場(chǎng)的冠軍產(chǎn)品，在很多涉及數(shù)據(jù)傳輸和數(shù)據(jù)交換平臺(tái)建設(shè)中， IBM MQ 產(chǎn)品系列得到了廣泛的應(yīng)用，因此作為綜合業(yè)務(wù)系統(tǒng)整合的數(shù)據(jù)管理產(chǎn)品，一定要具備與 MQ 的直接訪問(wèn)和支持的能力。 IBM Information Integrator 提供了專用的 XML wrapper。 IBM Information Integrator 提供一 個(gè)本地的數(shù)據(jù)存儲(chǔ)支持，聯(lián)邦服務(wù)引擎實(shí)現(xiàn) SQL 的分解和訪問(wèn)路徑的優(yōu)化，其主要原則為將對(duì)數(shù)據(jù)的操作盡量分發(fā)到分布式的數(shù)據(jù)源，在 IBM Information Integrator 聯(lián)邦服務(wù)引擎中統(tǒng)一考慮處理的成本，選擇成本最低的路徑。另一方面，查詢重寫技術(shù)還有助于消除經(jīng)常見(jiàn)到的由于項(xiàng)目組中不同開(kāi)發(fā)人員的水平差異導(dǎo)致的程序執(zhí)行效率不同，或圖 形界面動(dòng)態(tài)生成 SQL 語(yǔ)句繁瑣、低效的現(xiàn)象。 IBM 的優(yōu)化器充分考慮了并行、大量并發(fā)用戶、復(fù)雜查詢等各種可能遇到的情況，使其能夠運(yùn)行于各種計(jì)算環(huán)境。因此對(duì)于新的省級(jí)社保信息綜合業(yè)務(wù)系統(tǒng)（如數(shù)據(jù)實(shí)時(shí)交換、綜合查詢、數(shù)據(jù)遷移等）的開(kāi)發(fā)者來(lái)說(shuō)，不必了解現(xiàn)有各種業(yè)務(wù)系統(tǒng)的數(shù)據(jù)庫(kù)訪問(wèn)接口及編程方法，而只需熟練掌握 IBM Information Integrator 所提供的一套編程訪問(wèn)接口就可以實(shí)現(xiàn)所有的應(yīng)用開(kāi)發(fā)工作。如下圖所示，通過(guò)采用 IBM Information Integrator， 將數(shù)據(jù)交換平臺(tái)各級(jí)業(yè)務(wù)管理系統(tǒng)中的各類數(shù)據(jù)源，通過(guò)聯(lián)邦的方式映射到一個(gè)邏輯的數(shù)據(jù)庫(kù)中。同時(shí)， IBM 也在投入力量使其能夠與 Microsoft VisualStudio 順暢協(xié)作并實(shí)現(xiàn)集成。這些工件包括隨 XML 數(shù)據(jù)數(shù)量和種類的增加而可能產(chǎn)生的 XML schema 文檔、文檔類型定義 (DTD) 和 Web Services 說(shuō)明文檔等。為支持業(yè)務(wù)的改良需求，此基礎(chǔ)構(gòu)架補(bǔ)充了強(qiáng)健的數(shù)據(jù)和內(nèi)容存儲(chǔ)器及附加集成技術(shù)，并采用了行業(yè)標(biāo)準(zhǔn)。轉(zhuǎn)換功能完成不同類型數(shù)據(jù)庫(kù) SQL 語(yǔ)句的動(dòng)態(tài)轉(zhuǎn)換 (如數(shù)據(jù)類型及函數(shù)的匹配 ).另外還包括對(duì)數(shù)據(jù)源缺失函數(shù)的補(bǔ)償和原有數(shù)據(jù)源專用功能 (如存儲(chǔ)過(guò)程和用戶自定義函數(shù) )的嵌入。 高速緩沖存儲(chǔ)器 : IBM 的信息集成基礎(chǔ)構(gòu)架將支持在數(shù)據(jù)層級(jí)中的多個(gè)點(diǎn)放置和管理數(shù)據(jù)，以改善性能。憑借超過(guò) 25 年的研究和開(kāi)發(fā)經(jīng)驗(yàn)及專利的優(yōu)化技術(shù)， IBM 可以事實(shí)證明，聯(lián)邦是一個(gè)能夠滿足性能要求的可行方案?？蓴U(kuò)展性專為這一目的而設(shè)計(jì)，即最大程度降低集成新數(shù)據(jù)源的工作量，同時(shí)靈活地為優(yōu)化查詢?cè)L問(wèn)提供必要的信息。視實(shí)施的具體情況，這些數(shù)據(jù)源可能是同構(gòu)或異構(gòu)數(shù)據(jù)源，也可能是集中或分散的數(shù)據(jù)源。它還使基礎(chǔ)構(gòu)架能夠通過(guò) Web Services 適應(yīng)以服務(wù)為導(dǎo)向的體系結(jié)構(gòu)，還可提供與工作流異步集成或輕松調(diào)度長(zhǎng)耗時(shí)的查詢?nèi)蝿?wù)，并能保護(hù)您在現(xiàn)有和新應(yīng)用程序基礎(chǔ)構(gòu)架上的投資。客戶應(yīng)用訪問(wèn)信息可通過(guò) ODBC、 JBDC、網(wǎng)絡(luò)服務(wù)、本地客戶機(jī)或異步客戶機(jī)接口來(lái)實(shí)現(xiàn)。為此， IBM 制訂了一項(xiàng)代號(hào)為 Xperanto 的計(jì)劃，旨在應(yīng)對(duì)客戶對(duì)集成結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù) 的需求。 16 Information Integrator 用戶對(duì)數(shù)據(jù)的操作權(quán)限，取決于各個(gè)應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)向它開(kāi)放的用戶的授權(quán)，是且僅可能是后者的子集。 可配置、可管理的數(shù)據(jù)分發(fā) 數(shù)據(jù)分發(fā)主要指 Apply 的過(guò)程，即將復(fù)制數(shù)據(jù)源的增量應(yīng)用到復(fù)制目標(biāo)。此外常用的 SQL 還有 DATE 函數(shù)、 CASE語(yǔ)句等等。在復(fù)制過(guò)程中的常用轉(zhuǎn)換方法有如下兩種： 復(fù)制映射和添加計(jì)算列 ： 復(fù)制映射主要指復(fù)制源和目標(biāo)之間的列映射，可以用如下圖所示的配置工具實(shí)現(xiàn)。 14 對(duì) DB2 家族的復(fù)制數(shù)據(jù)源而言，通過(guò)讀取數(shù)據(jù)庫(kù)日志信息獲取數(shù)據(jù)增量，可避免對(duì)數(shù)據(jù)庫(kù)運(yùn)行性能的影響。 SQL 復(fù)制技術(shù)能夠 支持網(wǎng)絡(luò)上同構(gòu)或異構(gòu)數(shù)據(jù)庫(kù)之間的數(shù)據(jù)的有效傳輸和冗余性復(fù)制， 能夠?qū)崿F(xiàn) 多 種復(fù)制 模式 （如： 準(zhǔn) 實(shí)時(shí)復(fù)制、定時(shí)復(fù)制、雙向復(fù)制、 復(fù)制轉(zhuǎn)發(fā) 等 ，復(fù)制范圍可整表復(fù)制或表中部分行復(fù)制或修改單元復(fù)制） 。 ? 其性能可以滿足實(shí)際應(yīng)用程序和可能應(yīng)用程序的需要，包括高級(jí)查詢優(yōu)化技術(shù)、本地?cái)?shù)據(jù)訪問(wèn)以及透明緩存支持?；跇?biāo)準(zhǔn)的通用訪問(wèn)方式，且雙向可讀寫。所有信息源看起來(lái)就像是一個(gè)信息源。（注：該類信息無(wú)需用戶自行輸入，在定義過(guò)程中，系統(tǒng)可從源數(shù)據(jù)庫(kù)系統(tǒng)的數(shù)據(jù)字典中自動(dòng)獲?。?。包裝器從信息整合服務(wù)器接受數(shù)據(jù)訪問(wèn)指令，進(jìn)行轉(zhuǎn)換為數(shù)據(jù)源所支持的 SQL，通過(guò)數(shù)據(jù)源的客戶端提交執(zhí)行。 其實(shí)現(xiàn)原理如下圖所示： 圖中：聯(lián)邦服務(wù)器（ Federated Database Server）通過(guò)稱為包裝器（ Wrapper）的軟件模塊與數(shù)據(jù)源進(jìn)行通信。將市社保的各類數(shù)據(jù)源通過(guò)聯(lián)邦的方式映射到一個(gè)數(shù)據(jù)采集平臺(tái)的邏輯數(shù)據(jù)庫(kù)中。然后在業(yè)務(wù)系統(tǒng)的空閑時(shí)間，通過(guò)偵聽(tīng)得到的變更信息，重新通過(guò)數(shù)據(jù)采集平臺(tái)訪問(wèn)數(shù)據(jù)源，批量將其他數(shù)據(jù)內(nèi)容信息抽取到數(shù)據(jù)采集平臺(tái)。數(shù)據(jù)偵聽(tīng)只捕獲變更數(shù)據(jù)的主鍵信息，占整個(gè)記錄的信息量很小。建議應(yīng)用在難以提供增量信息，而業(yè)務(wù)負(fù)荷又有一定擴(kuò)展性的系統(tǒng)。 Apply 負(fù)責(zé)將變 更的數(shù)據(jù)送到數(shù)據(jù)目標(biāo)。在復(fù)制 10 的過(guò)程中，系統(tǒng)自動(dòng)抽取數(shù)據(jù)的變化，通過(guò)中間的傳輸，最后加載到目的地。 對(duì)于網(wǎng)絡(luò)狀況不理想的業(yè)務(wù)系統(tǒng)，該方式可分兩步進(jìn)行。而在本方案中，這一切難題都會(huì)迎刃而解。而IBM WebSphere Information Integrator 恰恰在解決一個(gè)企業(yè)級(jí)異構(gòu)數(shù)據(jù)集成同時(shí)，很好地解決了這一棘手的問(wèn)題。數(shù)據(jù)整合平臺(tái)位于業(yè)務(wù)數(shù)據(jù)庫(kù)和數(shù)據(jù)轉(zhuǎn)換平臺(tái)之間，屏蔽了后續(xù)數(shù)據(jù)處理與數(shù)據(jù)來(lái)源間的直接關(guān)系。第三階段，將 部分被頻繁訪問(wèn)、且實(shí)時(shí)性要求有限的數(shù)據(jù)物理集中，提高數(shù)據(jù)查詢的質(zhì)量，便于決策分析等業(yè)務(wù)應(yīng)用。 在所提供的統(tǒng)一訪問(wèn)接口的支持下，就可以在 一個(gè)整體數(shù)據(jù)庫(kù)的邏輯視圖下（這一視圖跨越地市級(jí)勞動(dòng)與社保信息管理系統(tǒng)），經(jīng)過(guò)相應(yīng)的數(shù)據(jù)轉(zhuǎn)換，來(lái)實(shí)現(xiàn)中心業(yè)務(wù)數(shù)據(jù)，和面向勞動(dòng)與社保信息分析及交換的數(shù)據(jù)流程和業(yè)務(wù)流程，實(shí)現(xiàn)整個(gè)勞動(dòng)與社保分析系統(tǒng)和數(shù)據(jù)交換系統(tǒng)快速開(kāi)發(fā)和部署。 在 性能 方面，實(shí)際的測(cè)試表明， II 的數(shù)據(jù)復(fù)制能夠達(dá)到 提取量，而 II 的快速數(shù)據(jù)導(dǎo)入功能更能達(dá)到 30GB/小時(shí)，而該測(cè)試結(jié)果還是在一臺(tái)資源緊張的服務(wù)器運(yùn)行出來(lái)的。并且可以保證系統(tǒng)的有效性、性能和易開(kāi)發(fā)性。