【正文】 ormation Engineering,Information Engineering University,Zhengzhou 450002) Abstract:The highperformance robot is the core of the new Web intelligence search efficiency of the robot will directly influence the overall efficiency of the search key techniques and algorithm are mainly the end,the key classes of the program based on Java are pointed helps to the engineering applying and development. Key words: Web。 網(wǎng)絡(luò)機(jī)器人程序必須采 用多線程技術(shù)，多線程技術(shù)允許對(duì)成百上千的網(wǎng)頁(yè)的等待時(shí)間結(jié)合在一起，眾多的線程讓網(wǎng)絡(luò)機(jī)器人程序能同時(shí)等待大量的網(wǎng)頁(yè)，而不是讓它們一個(gè)接一個(gè)的執(zhí)行。 我們研究的高性能網(wǎng)絡(luò)機(jī)器人采用的是非遞歸程序設(shè)計(jì)思想，當(dāng)使用非遞歸的方法時(shí)，先給定網(wǎng)絡(luò)機(jī)器人一個(gè)要訪問(wèn)的網(wǎng)頁(yè)集合，它會(huì)把這一集合加到它將要訪問(wèn)站點(diǎn)的隊(duì)列中去。 Queue enum{WaitQ,FinishQ,RunQ,MistakeQ}。 If url linktype is EnternalLink Then//如鏈接是外部鏈接。 synchronized public void getWorkload(String url)。 public void run()。//清除作業(yè)管理器的存儲(chǔ)。 參考文獻(xiàn) 1． Zhang W F,Xu B W,and Yang H J,Learning Users， Interest for Web PreFetching,Proceedings of IEEE 4th International Workshop on Web Site Evolution (WSE2020), MONTRAL,Canada,October2,2020 2． Heaton J. Programming Spiders,Bots and Aggregators in Java. 3． Jeff Heaton[美 ]，董兆豐譯，網(wǎng) 絡(luò)機(jī)器人 JAVA編程指南〔 M〕，北京電子工業(yè)出版社， 2020,238252. 4． 佟曉筠等，面向主題的智能機(jī)器人 ROBOT 研究與實(shí)現(xiàn)〔 J〕，電子與信息學(xué)報(bào)， 25 卷 2020。//設(shè)置 URL 的狀態(tài)：等待、運(yùn)行、完成、錯(cuò)誤。 public void setMaxBody(int mx)。 這種結(jié)構(gòu)可以方便地引入新的方法改善和提高系統(tǒng)的功能，也可以建立新的類(lèi)擴(kuò)充其系統(tǒng)的功能。 SaveFileText(Document,FileText)。只要等待隊(duì)列中有一個(gè)網(wǎng)頁(yè)或網(wǎng)絡(luò)機(jī)器人正在處理一個(gè)網(wǎng)頁(yè)，網(wǎng)絡(luò)機(jī)器人就會(huì)繼續(xù)它的工作。內(nèi)部鏈接指的是超鏈接所指向的網(wǎng)頁(yè)與包含該鏈接的網(wǎng)頁(yè)在同一臺(tái) Web 服務(wù)器中；外部鏈接指的是超鏈接所指向的網(wǎng)頁(yè)所在的 Web 站點(diǎn)與包含該鏈接的 Web 站點(diǎn)不同；其它鏈接指的是超鏈接指向非網(wǎng)頁(yè)的資源，如指向 Email地址等。 3 關(guān)鍵技術(shù)的研究 網(wǎng)絡(luò)機(jī)器人程序的工作是異常繁重的，好像永遠(yuǎn)都不會(huì)結(jié)束，網(wǎng)絡(luò)機(jī)器人一邊訪問(wèn)網(wǎng)頁(yè)，一邊又要查找下一步要訪問(wèn)的網(wǎng)頁(yè)，訪問(wèn)了一個(gè)站點(diǎn)以后，仍然會(huì)有其