周恒-搜索引擎原理(編輯修改稿)
2025-08-21 03:00 本頁(yè)面
【文章內(nèi)容簡(jiǎn)介】 象蜘蛛（ spider）在蜘蛛網(wǎng)（ Web）上爬行（ crawl） 搜索引擎原理（使用 Perl） － 維護(hù) URL ?系統(tǒng)進(jìn)行第一次全面的網(wǎng)頁(yè)搜集之后，維護(hù)相應(yīng)的 URL集合，以后的搜索基于此集合。 搜索引擎原理（使用 Perl） － 存儲(chǔ)網(wǎng)頁(yè) ?搜集到的網(wǎng)頁(yè)將存儲(chǔ)到知識(shí)庫(kù)（ repository）中。 ?知識(shí)庫(kù)包含每個(gè)網(wǎng)頁(yè)的 docID，長(zhǎng)度， URL以及網(wǎng)頁(yè)的全部 HTML。 ?由于網(wǎng)頁(yè)數(shù)量會(huì)很多，所以，網(wǎng)頁(yè)在存入知識(shí)庫(kù)時(shí)要進(jìn)行壓縮處理。 搜索引擎原理（使用 Perl） － PerlBEE的網(wǎng)頁(yè)搜集部分 ? 手動(dòng)執(zhí)行腳本，進(jìn)行資源搜集 ? 從維護(hù)的 url列表當(dāng)中獲得 url ? 支持 和 ftp協(xié)議 ? 獲得的網(wǎng)頁(yè)按照文件的形式存入知識(shí)庫(kù)中。 docID url 獲取的時(shí)間 Web原文 docID url 獲取的時(shí)間 Web原文 搜索引擎原理（使用 Perl） － PerlBEE的網(wǎng)頁(yè)搜集部分 ?
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1