基于用戶群體行為分析的搜索引擎自動(dòng)性能評(píng)價(jià)-資料下載頁(yè)
2025-09-20 10:40本頁(yè)面
【導(dǎo)讀】信息檢索系統(tǒng)的評(píng)價(jià)方法?；谟脩粜袨榉治龅乃阉饕嫘阅茉u(píng)價(jià)。Web的發(fā)展帶來(lái)了什么？1994年，面向個(gè)人用戶的瀏覽服務(wù)誕生。2020年，Web上所存儲(chǔ)的數(shù)據(jù)超過(guò)500,000TB. “在信息化時(shí)代，知識(shí)實(shí)際上已經(jīng)不是資源，智慧。高科技企業(yè)員工1/3的時(shí)間用于查找資料。網(wǎng)絡(luò)信息檢索工具成為人們生活和工作中。–全球范圍內(nèi)84%的互聯(lián)網(wǎng)用戶使用搜索引擎，其中超過(guò)一半的人幾乎每天使用。–2020年1月，我國(guó)網(wǎng)民總?cè)藬?shù)為13700萬(wàn)人。用戶將搜索引擎作為得知新網(wǎng)站的主要途徑。–商用搜索引擎競(jìng)爭(zhēng)日趨激烈。挑選最有利于獲取信息的手段。算法及數(shù)據(jù)處理方式有效性的判斷。挑選最有效的廣告投放手段。于查詢樣例集、標(biāo)準(zhǔn)答案集和語(yǔ)料庫(kù)的評(píng)測(cè)方案，確立了評(píng)價(jià)在信息檢索研究中的核心地位。根據(jù)結(jié)果網(wǎng)頁(yè)的查詢?cè)~及近義詞詞頻進(jìn)行評(píng)判。H較低，檢索系統(tǒng)的處理難度較低，答案。不同搜索引擎的點(diǎn)擊分布差異大。結(jié)果不唯一，全面性難以保證
【正文】 的手工評(píng)價(jià)結(jié)果的正確性本身難以保證 ? 難以進(jìn)行答案可靠性的驗(yàn)證 – “搜索儀”的評(píng)價(jià)結(jié)果（參見(jiàn)演示） 提綱 ? 研究背景 ? 信息檢索系統(tǒng)的評(píng)價(jià)方法 ? 基于用戶行為分析的搜索引擎性能評(píng)價(jià) ? 演示系統(tǒng)：搜索儀 ? 結(jié)論與未來(lái)工作 搜索儀：評(píng)價(jià)搜索 ? 搜索儀：評(píng)價(jià)搜索 ? 搜索儀：評(píng)價(jià)搜索 ? 主要特點(diǎn) – 一定程度取代評(píng)價(jià)搜索引擎性能的繁瑣手工標(biāo)注操作 – 更加客觀、標(biāo)準(zhǔn)均一 – 反饋周期更短 – 標(biāo)注代表性更強(qiáng) ? 實(shí)現(xiàn)對(duì)數(shù)以千計(jì)查詢主題的標(biāo)注 ? 功能演示！ 提綱 ? 研究背景 ? 信息檢索系統(tǒng)的評(píng)價(jià)方法 ? 基于用戶行為分析的搜索引擎性能評(píng)價(jià) ? 演示系統(tǒng)：搜索儀 ? 結(jié)論與未來(lái)工作 結(jié)論與未來(lái)工作 ? 用戶行為分析的方法一直是信息檢索相關(guān)研究向前發(fā)展的推動(dòng)力 – 實(shí)質(zhì)：對(duì)人類信息獲取規(guī)律的研究 – 基于用戶行為分析的方法進(jìn)行搜索引擎性能評(píng)價(jià)是適當(dāng)?shù)? ? 搜索引擎的自動(dòng)性能評(píng)價(jià) – 導(dǎo)航類查詢需求能夠較好的實(shí)現(xiàn)自動(dòng)評(píng)價(jià) – 信息事務(wù)類查詢?nèi)孕柽M(jìn)一步的考察 可能的未來(lái)應(yīng)用方向 ? 檢索效果的實(shí)時(shí)監(jiān)控 – 檢索系統(tǒng)自身運(yùn)營(yíng)維護(hù)的需要 – 及時(shí)發(fā)現(xiàn)并預(yù)警系統(tǒng)問(wèn)題 ? 面向特定領(lǐng)域需求的性能評(píng)價(jià) – 特定領(lǐng)域需求 = 特定領(lǐng)域查詢?cè)~ – 針對(duì)特定領(lǐng)域需求，使用特定的查詢?cè)~進(jìn)行評(píng)價(jià)。 可能的未來(lái)應(yīng)用方向 ? 汽車領(lǐng)域的搜索引擎排名 – 查詢?cè)~樣例：現(xiàn)代、奇瑞汽車、寶馬 MAP s@5 s@10 P@5 P@10 MRR SE1 SE2 SE3 SE4 SE5 SE6 可能的未來(lái)應(yīng)用方向 ? 流行歌手領(lǐng)域的搜索引擎排名 – 查詢?cè)~樣例： 周杰倫、 劉德華、林心如 MAP s@5 s@10 P@5 P@10 MRR SE1 SE2 SE3 SE4 SE5 SE6 部分相關(guān)文獻(xiàn) ? Yiqun Liu, Yupeng Fu, Min Zhang, Liyun Ru, Shaoping Ma. 2020. Automatic search engine performance evaluation with clickthrough data analysis. In Proceedings of the 16th international Conference on World Wide Web, WWW 39。07. 11331134. ? 劉奕群，張敏，金奕江，馬少平，一種搜索引擎性能評(píng)價(jià)的自動(dòng)化處理方法，專利申請(qǐng)?zhí)?。 ? 岑榮偉，劉奕群，張敏，金奕江，馬少平，一種基于用戶行為信息的搜索引擎檢索結(jié)果重排序方法，專利申請(qǐng)?zhí)?。 ? 岑榮偉，劉奕群，張敏，金奕江，馬少平，一種網(wǎng)絡(luò)關(guān)鍵資源頁(yè)面的自動(dòng)定位方法，專利申請(qǐng)?zhí)? ? 劉奕群 ,岑榮偉 ,張敏 ,馬少平 .基于用戶行為分析的搜索引擎自動(dòng)性能評(píng)價(jià) .軟件學(xué)報(bào) 2020年已錄用 . 廣告： NCIRCS2020 ? 歡迎大家向第四屆全國(guó)信息檢索與內(nèi)容學(xué)術(shù)會(huì)議積極投稿 ? 2020年 11月在北京舉行 ? 中文信息學(xué)會(huì)主辦 ? 清華大學(xué)承辦 ? 網(wǎng)址： Thank you! Questions or ments?
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1