【正文】 目 錄1引言 ..............................................................1 ......................................................1 ................................................1 ...............................................1 .........................................1 ..............................................2 ..............................................3 ..................................................3 ......................................................4 .................................................4 WebService ................................................62需求分析 ..........................................................8 ......................................................8 ......................................................9 ...................................................9 ....................................................10 ....................................................10 .....................................................10 ..................................................10 ..................................................10 ..................................................103系統(tǒng)設(shè)計 .........................................................11 .....................................................11 .............................................13 .................................................13 XML數(shù)據(jù)文件設(shè)計 ..............................................15 .................................................174系統(tǒng)實現(xiàn) .........................................................18 .....................................................18 .................................................185測試 .............................................................27 .....................................................27 .....................................................276結(jié)論 .............................................................287參考文獻(xiàn) .........................................................308致謝 .............................................................31基于 Web Services 的異構(gòu)數(shù)據(jù)庫的檢索系統(tǒng)11引言隨著 Inter的飛速發(fā)展，網(wǎng)絡(luò)迅速成為一種重要的信息傳播和交換的手段，數(shù)據(jù)資源的共享成為一個熱門話題。如何獲取網(wǎng)絡(luò)上自治、異構(gòu)、分布的數(shù)據(jù)并加以綜合利用，即數(shù)據(jù)集成 [1]，成為一個引起廣泛關(guān)注的研究領(lǐng)域。數(shù)據(jù)集成的概念是把不同來源、格式、特點性質(zhì)的數(shù)據(jù)在邏輯上或物理上有機(jī)地集中，實現(xiàn)分布的、異構(gòu)的、自治的數(shù)據(jù)共享的主要技術(shù)，數(shù)據(jù)集成一般還應(yīng)滿足用戶數(shù)據(jù)訪問的實時性和安全性等方面的要求。數(shù)據(jù)集成的核心任務(wù)是要將互相關(guān)聯(lián)的分布式異構(gòu)數(shù)據(jù)源集成到一起，使用戶能夠以透明的方式訪問這些數(shù)據(jù)源，而不用關(guān)心數(shù)據(jù)源的存儲位置和存儲方式。數(shù)據(jù)集成的數(shù)據(jù)源:包括結(jié)構(gòu)化的數(shù)據(jù)，如關(guān)系數(shù)據(jù)庫；半結(jié)構(gòu)化數(shù)據(jù)，如 XML文檔；已經(jīng)存在的文件系統(tǒng)等 [2]。目前，數(shù)據(jù)庫的數(shù)據(jù)轉(zhuǎn)換方法很多，例如微軟公司的 SQL Server數(shù)據(jù)庫，就有導(dǎo)入和導(dǎo)出數(shù)據(jù)的服務(wù)，它可以啟動數(shù)據(jù)轉(zhuǎn)換服務(wù)（Data Transform Service，簡稱 DTS），來完成各類異構(gòu)數(shù)據(jù)庫的轉(zhuǎn)換。同時國內(nèi)也存在一些數(shù)據(jù)轉(zhuǎn)換工具和軟件，比如 Beeload等。數(shù)據(jù)可能以各種格式保存并分布在不同的位置 [3]。數(shù)據(jù)轉(zhuǎn)換服務(wù)（DTS）通過提供一組工具，可以將來自完全不同的源的數(shù)據(jù)析取、轉(zhuǎn)換和合并到 DTS所支持的單個或多個目標(biāo)數(shù)據(jù)庫以滿足需求。通過 DTS工具圖形化地生成 DTS包或使用 DTS對象模型編制包，可創(chuàng)建適合自己需要的自定義數(shù)據(jù)移動解決方案。此服務(wù)以向?qū)У男问揭龑?dǎo)使用者實現(xiàn) DTS的功能，如數(shù)據(jù)和對象的導(dǎo)入、導(dǎo)出、驗證以及在異類 OLEDB和 ODBC數(shù)據(jù)源之間的轉(zhuǎn)換。Beeload是第一款國產(chǎn) ETL（Extract Transform Load）工具。它不僅支持Oracle、MS SQL、Sybase 等主流數(shù)據(jù)庫的數(shù)據(jù)抽取及裝載，而且還支持文本文件的抽取備份。此外，Beeload 內(nèi)置了大量的 API函數(shù)，提供強(qiáng)大的數(shù)據(jù)轉(zhuǎn)換功能；通西南石油大學(xué)本科畢業(yè)設(shè)計（論文）2過直觀的圖形操作界面，使用戶通過簡單的拖拽動作即可實現(xiàn) ETL規(guī)則的定義，使得元數(shù)據(jù)管理變得相當(dāng)容易。同時 Beeload 也是一種數(shù)據(jù)整合軟件，可對企業(yè)經(jīng)營過程中所產(chǎn)生的各類業(yè)務(wù)數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換和匯總，為數(shù)據(jù)倉庫提供高質(zhì)量的數(shù)據(jù)；它還集成了元數(shù)據(jù)管理、工作流管理及作業(yè)調(diào)度等功能。除提供直觀的圖形化操作方式外，還提供強(qiáng)大的腳本解釋功能，既適合一般用戶，又可充分滿足高級用戶需要的產(chǎn)品。Beeload數(shù)據(jù)轉(zhuǎn)換流程圖如圖 11所示可用數(shù)據(jù)源OracleMySQLMS SQLDB2AccessFoxProFlatFileInterBase Beeload 數(shù)據(jù)倉庫定時采集定時刷新定時抽取操作型系統(tǒng)圖 11 Beeload數(shù) 據(jù) 轉(zhuǎn) 換 流 程 圖在 Inter這樣一個動態(tài)環(huán)境中，各種數(shù)據(jù)庫不斷的加入或去除，數(shù)據(jù)庫中的數(shù)據(jù)也在不斷變化，而現(xiàn)在的絕大多數(shù)應(yīng)用是建立在這些分離的數(shù)據(jù)庫基礎(chǔ)之上，因而，為了實現(xiàn)信息資源的共享和交流，不同數(shù)據(jù)庫間相互操作和協(xié)作不可避免。 這樣隨著時間的推移和技術(shù)的進(jìn)步，這些由不同核心技術(shù)構(gòu)建的信息系統(tǒng)就像一個個“信息孤島” ，各自有著不同的處理對象、操作方法和專用客戶端，在各個環(huán)節(jié)之間存在著數(shù)據(jù)交流和部門協(xié)同的問題。這些情況都表明:在現(xiàn)代信息化進(jìn)程中，不同數(shù)據(jù)庫聯(lián)合使用的要求是非常迫切并會長期存在下去的，并且往往還伴隨著一個復(fù)雜的分布異構(gòu)環(huán)境。這種分布異構(gòu)性表現(xiàn)為:場地分布，由 LAN或 WAN支撐，存在多種網(wǎng)絡(luò)協(xié)議。數(shù)據(jù)分布，各種形式的數(shù)據(jù)分散在各節(jié)點，以各種形式存在:硬件平臺多樣化，從臺式機(jī)、工作站到大型主機(jī)等。操作系統(tǒng)多樣化，如 Windows Netware，各種 UNIX以及 VMS等:應(yīng)用平臺多樣化，包括來自不同開發(fā)組織的各種應(yīng)用軟件、基于 Web Services 的異構(gòu)數(shù)據(jù)庫的檢索系統(tǒng)3中間件和開發(fā)工具。 然而，要求用戶面對所有這些復(fù)雜的分布異構(gòu)特性，并指望他學(xué)會操作每一種數(shù)據(jù)庫是不現(xiàn)實的，在使用中也不方便。對于用戶而言，希望屏蔽掉各種層次的異構(gòu)特性，他們不必知道各個物理數(shù)據(jù)庫系統(tǒng)的分布，不必知道各個物理數(shù)據(jù)庫的機(jī)構(gòu)組成和操作方法，不必自己去進(jìn)行數(shù)據(jù)轉(zhuǎn)換和結(jié)果匯總，只需通過簡單的全局訪問就可以得到結(jié)果，這正是異構(gòu)數(shù)據(jù)庫集成技術(shù)的主要研究內(nèi)容，也是其意義所在。本系統(tǒng)的主要功能是實現(xiàn)跨平臺的異構(gòu)數(shù)據(jù)庫系統(tǒng)之間的數(shù)據(jù)轉(zhuǎn)換，所以結(jié)合當(dāng)前所具備條件提出以下研究方法。(1)通過數(shù)據(jù)庫接口軟件與不同的數(shù)據(jù)庫直接連接，如 ODBC和 JDBC等。在同時檢索的數(shù)據(jù)庫數(shù)量較少時，使用此技術(shù)可在一定程度上解決異構(gòu)檢索問題，但數(shù)據(jù)庫達(dá)到一定數(shù)量時，處理速度很難保證。這種方式僅適用于對屬于本單位的少量異構(gòu)數(shù)據(jù)庫進(jìn)行統(tǒng)一檢索。 (2)不同數(shù)據(jù)庫間的格式轉(zhuǎn)換 [4]。主要是利用數(shù)據(jù)庫產(chǎn)品本身提供訪問異構(gòu)數(shù)據(jù)庫的功能，以實現(xiàn)在異構(gòu)環(huán)境下建立具有較高性能的分布式數(shù)據(jù)系統(tǒng)?，F(xiàn)在一些圖書館制作的學(xué)科導(dǎo)航系統(tǒng)就此利用此方法設(shè)計的，其利用一些程序?qū)⒏鞣N異構(gòu)數(shù)據(jù)庫的部分?jǐn)?shù)據(jù)導(dǎo)入一個數(shù)據(jù)庫系統(tǒng)中，以方便讀者訪問，但是收錄的數(shù)據(jù)庫數(shù)量不能太多，此外還涉及版權(quán)問題。 (3)運(yùn)用元搜索引擎的基本原理,利用數(shù)據(jù)庫的 Web客戶端 進(jìn)行統(tǒng)一檢索。元搜索引擎主要運(yùn)用在網(wǎng)頁信息的搜索方面，但現(xiàn)有各種電子資源數(shù)據(jù)庫都提供相應(yīng)的客戶端接口，因此可利用元搜索引擎的原理對各個異構(gòu)數(shù)據(jù)庫進(jìn)行統(tǒng)一檢索。這種方法的缺點在于需要對各個數(shù)據(jù)庫的 Web處理接口進(jìn)行詳盡分析，各