web數(shù)據(jù)采集系統(tǒng)(文件)
【正文】 架工作過(guò)程描述 采集的目的就是把對(duì)方網(wǎng)站上網(wǎng)頁(yè)中的某塊文字或者圖片等資源下載到自己的站網(wǎng)上，這個(gè)過(guò)程需要做如下配置工作：下載網(wǎng)頁(yè)配置，解析網(wǎng)頁(yè)配置，修正結(jié)果配置，數(shù)據(jù)輸出配置?！ ‘?dāng)對(duì)方網(wǎng)站數(shù)據(jù)進(jìn)行了更新，或者添加新數(shù)據(jù)時(shí)，系統(tǒng)自動(dòng)會(huì)進(jìn)行檢測(cè)，并進(jìn)行采集，然后更新到自己的數(shù)據(jù)庫(kù)(或者別的存儲(chǔ)方式)，這個(gè)過(guò)程不再需要人工干涉。 3. 支持采集結(jié)果輸出的多樣性，可以使用不同輸出插件進(jìn)行輸出，也可以自己開發(fā)輸出插件?？梢宰杂膳渲靡杉木W(wǎng)絡(luò)元數(shù)據(jù)，并可以對(duì)每個(gè)網(wǎng)絡(luò)元數(shù)據(jù)自定義字段名。 8. 采集條件設(shè)置，可以針對(duì)不同任務(wù)下的入口網(wǎng)站設(shè)置采集路徑、重點(diǎn)頁(yè)面、采集網(wǎng)址過(guò)濾等控制條件。11. 管理控制臺(tái)可以監(jiān)控采集過(guò)程的運(yùn)行情況。2. 易用性好 系統(tǒng)參數(shù)設(shè)置簡(jiǎn)單，一次設(shè)置多次使用。4. 實(shí)施部署容易系統(tǒng)用戶界面友好，抓取服務(wù)器在任意瀏覽器下運(yùn)行，實(shí)施部署過(guò)程簡(jiǎn)單， 即裝即用。七. 系統(tǒng)界面展示 第10頁(yè)。6. 抓取速度快系
試題試卷相關(guān)推薦
鄂ICP備17016276號(hào)-1