freepeople性欧美熟妇, 色戒完整版无删减158分钟hd, 无码精品国产vα在线观看DVD, 丰满少妇伦精品无码专区在线观看,艾栗栗与纹身男宾馆3p50分钟,国产AV片在线观看,黑人与美女高潮,18岁女RAPPERDISSSUBS,国产手机在机看影片

正文內(nèi)容

基于java的網(wǎng)絡(luò)蜘蛛程序算法研究(專業(yè)版)

2025-01-02 22:00上一頁面

下一頁面
  

【正文】 protected void processWorkload()。//從等待隊(duì)列中請求一個(gè) URL 送入處理隊(duì)列中。 synchronized public Boolean foundOtherLink(String url)。 End。//初始化 URL 集合被加入到等待隊(duì)列中。當(dāng)一個(gè) URL 被處理后,它被移送到錯(cuò)誤隊(duì)列或者完成隊(duì)列中。 數(shù)據(jù)庫訪問技術(shù) 網(wǎng)絡(luò)機(jī)器人程序采用基于 SQL 的數(shù)據(jù) 庫隊(duì)列管理機(jī)制,必須有相應(yīng)的數(shù)據(jù)庫訪問技術(shù)。但是隨著用戶需求的不斷提高,目前基于關(guān)鍵字查詢的搜索引擎已經(jīng)不能滿足用戶對搜索結(jié)果要求更準(zhǔn)、搜索范圍更大的需求。對開發(fā)高性能網(wǎng)絡(luò)機(jī)器人所涉及的關(guān)鍵技術(shù)和算法進(jìn)行了詳細(xì)地分析。如果編寫的程序是扮演服務(wù)器的角色,就應(yīng)該采用 ServerSocket 類;如果程序是連接到服務(wù)器的那么他扮演的是客戶端的角色,我們 應(yīng)該使用 Socket 類,我們研究的網(wǎng)絡(luò)機(jī)器人程序扮演的就是客戶端的角色。網(wǎng)絡(luò)機(jī)器人程序通過分析網(wǎng)頁的 HTML代碼查找網(wǎng)頁內(nèi)所有鏈接到其它網(wǎng)頁的標(biāo)簽,根據(jù)標(biāo)簽的屬性 HREF(Hypertext Reference,超文本鏈接 )的值,網(wǎng)絡(luò)機(jī)器人程序?qū)龅饺N鏈接類型:內(nèi)部鏈接( Internal link)、外部鏈接 (External link)和其它連接 (other link)。 URL 處理狀態(tài)流程圖 : 發(fā)現(xiàn) URL 錯(cuò)誤隊(duì)列 完成 URL 完成隊(duì)列 等待隊(duì)列 處理隊(duì)列 圖 1 URL 處理狀態(tài)流程圖 算法分析 我 們的算法設(shè)計(jì)主要就是依據(jù)非遞歸的思想構(gòu)造的,當(dāng)一個(gè) URL 被加入到等待隊(duì)列中時(shí),網(wǎng)絡(luò)機(jī)器人就會開始運(yùn)行。 Document=PopQueue(url,RunQ,LinkType)。 網(wǎng)絡(luò)機(jī)器人程序是通過 Java語言編寫的, Java 是面向?qū)ο蟮木幊陶Z言,將各個(gè)模塊的主要功能封裝在相對獨(dú)立的類中,并通過接口函數(shù)將它們有效地連接起來,形成一個(gè)完整的系統(tǒng)。//當(dāng)網(wǎng)絡(luò)機(jī)器人沒有工作時(shí)調(diào)用。 protected void setStatus(Sting url,char status)。利用概念詞庫建立智能更高的網(wǎng)絡(luò)機(jī)器人能更好的提高查全率,這是我們今后的主要研究方向之一。 RobotWorker類 ―――-高性能的網(wǎng)絡(luò)機(jī)器人應(yīng)該是多線程的,把任務(wù)分成許多小任務(wù),必須有一種方法在不同的線程間分配任務(wù),工作的基本單元就是 RobotWorker 類對象。//啟動(dòng)機(jī)器人進(jìn)程。//從作業(yè)管理器獲得一個(gè)作業(yè)。 PopQueue(url,WaitQ,LinkType)。//隊(duì)列類型:等待、完成、處理、錯(cuò)誤隊(duì)列。網(wǎng)絡(luò)機(jī)器人發(fā)現(xiàn)每個(gè)新的網(wǎng)頁時(shí)不使用調(diào)用自身的方法,而是將新發(fā)現(xiàn)的鏈接加入到該隊(duì)列中。 數(shù)據(jù)庫技術(shù) 網(wǎng)絡(luò)機(jī)器人程序必須跟蹤它所遇到的每一個(gè) URL(Uniform Resource Locator),對這個(gè) URL 列表的管理就是網(wǎng)絡(luò)機(jī)器人程序的作業(yè)管理,作業(yè)管理對于一個(gè)高效的網(wǎng)絡(luò)機(jī)器人程序是非常重要的,這是因?yàn)榫W(wǎng)絡(luò)機(jī)器人程序必須跟蹤所訪問的上千個(gè)網(wǎng)頁的數(shù)據(jù)。search engine。Java 中圖分類號: TP393 文獻(xiàn)標(biāo)識碼: A Research on the HighPerformance Robot Based on Java CHEN JinYang,JIANG JianZhong, GUO JunLi (Institute of Inf
點(diǎn)擊復(fù)制文檔內(nèi)容
畢業(yè)設(shè)計(jì)相關(guān)推薦
文庫吧 www.dybbs8.com
備案圖鄂ICP備17016276號-1