【正文】 基于的搜索引擎 第 1 頁 共 34 頁 目錄 目錄 ................................................................................................................................. 1 摘要 ................................................................................................................................. 3 第一章 引言 .................................................................................................................... 5 第二章 搜索引擎的結(jié)構(gòu) ................................................................................................... 7 ................................................................................................................ 7 ..................................................................................................... 7 ..................................................................................................... 7 ..................................................................................................... 7 Web 服務(wù)器 ..................................................................................................... 8 .................................................................................... 8 ....................................................................................................................... 8 第三章 網(wǎng)絡(luò)機(jī)器人 .......................................................................................................... 9 .................................................................................................. 9 結(jié)構(gòu)分析 ........................................................................................... 9 HTML .............................................................................................. 9 Spider 程序結(jié)構(gòu) ........................................................................................... 10 Spider程序 .................................................................................... 11 ......................................................................................... 13 ..................................................................................... 14 ..................................................................................................................... 16 第四章 基于 LUCENE 的索引與搜索 ............................................................................. 17 LUCENE 全文檢索 ...................................................................................... 17 LUCENE 的原理分析 .............................................................................................. 17 ..................................................................................... 17 Lucene 的索引效率 ....................................................................................... 17 中文切分詞機(jī)制 ............................................................................................ 19 基于的搜索引擎 第 2 頁 共 34 頁 LUCENE 與 SPIDER 的結(jié)合 ..................................................................................... 20 ..................................................................................................................... 21 第五章 基于 TOMCAT 的 WEB 服務(wù)器 ......................................................................... 22 TOMCAT 的 WEB 服務(wù)器 ...................................................................... 22 ....................................................................................................... 22 ................................................................................................... 22 ................................................................................................... 22 TOMCAT 上部署項目 ......................................................................................... 29 ..................................................................................................................... 29 第六章 搜索引擎策略 .................................................................................................... 30 ..................................................................................................................... 30 ............................................................................................ 30 .......................................................................................................... 30 心網(wǎng)頁 ..................................................................................... 31 ..................................................................................................................... 31 參考文獻(xiàn) ........................................................................................................................ 32 基于的搜索引擎 第 3 頁 共 34 頁 摘 要 網(wǎng)絡(luò)中的資源非常豐富，但是如何有效的搜索信息卻是一件困難的事情。建立搜索引擎就是解決這個問題的最好方法。本文首先詳細(xì)介紹了 基于英特網(wǎng)的搜索引擎的系統(tǒng)結(jié)構(gòu)，然后從網(wǎng)絡(luò)機(jī)器人、索引引擎、 Web 服務(wù)器三個方面進(jìn)行詳細(xì)的說明。為了更加深刻的理解這種技術(shù)，本人還親自實現(xiàn)了一個自己的搜索引擎 —— 基于 搜索引擎。 搜索引擎 是從指定的 Web 頁面中按照超連接進(jìn)行解析、搜索，并把搜索到的每條 信息 進(jìn)行索引后加入數(shù)據(jù)庫。然后通過 Web 服務(wù)器接受客戶端請求后從索引數(shù)據(jù)庫中搜索出所匹配的。 本人在介紹搜索引擎的章節(jié)中除了詳細(xì)的闡述技術(shù)核心外還結(jié)合了 搜索引擎的實現(xiàn)代碼來說明，圖文并茂、易于理解。 基于的搜索引擎 第 4