cwmt20xx機(jī)器翻譯評(píng)測(cè)總結(jié)報(bào)告-資料下載頁(yè)
2025-07-15 18:17本頁(yè)面
【正文】 T:Noun T:Pron S:Verb S:DicPrep S:AmbiWord 評(píng)測(cè)結(jié)果分析 在 漢英新聞 領(lǐng)域，在源語(yǔ)言的“搭配”、“介詞”兩個(gè)檢測(cè)點(diǎn)上，統(tǒng)計(jì)翻譯系統(tǒng)顯示出一定優(yōu)勢(shì)： 評(píng)測(cè)結(jié)果分析 在 漢英新聞 領(lǐng)域 ，“ 成語(yǔ)” 測(cè)試點(diǎn)上，基于規(guī)則的系統(tǒng)則表現(xiàn)更好： 評(píng)測(cè)結(jié)果分析 在 英漢新聞 領(lǐng)域， “ 介詞” 和 “詞典介詞” 兩個(gè)檢測(cè)點(diǎn)，基于規(guī)則的系統(tǒng)占優(yōu)： 在 英漢新聞 領(lǐng)域，源語(yǔ)言的 “數(shù)詞短語(yǔ) ”測(cè)試點(diǎn)上，基于規(guī)則的翻譯系統(tǒng)結(jié)果較好： 評(píng)測(cè)結(jié)果分析 評(píng)測(cè)結(jié)果分析 各項(xiàng)目 WoodPecker評(píng)測(cè)中總分前五名的結(jié)果顯示：在 英漢新聞 領(lǐng)域，基于規(guī)則的系統(tǒng)在這種基于語(yǔ)言學(xué)分類的檢測(cè)點(diǎn)評(píng)測(cè)中顯示了一定的優(yōu)勢(shì)： 漢英新聞 5 6 4 10 1 英漢新聞 2 1 3 5 7 英漢科技 2 3 4 7 1 漢英新聞系統(tǒng)融合 5 3 2 1 6 總結(jié)和展望 總結(jié) ： 從準(zhǔn)備到結(jié)束歷時(shí)半年，期間細(xì)節(jié)之繁瑣非一個(gè)“累”字了得！ 所幸評(píng)測(cè)中的小 “閃失” 都得到了糾正，更有幸都得到了大家的諒解！ ? 改進(jìn)之處： 更加詳盡的評(píng)測(cè)大綱 增加了科技翻譯評(píng)測(cè) 增加了系統(tǒng)融合評(píng)測(cè) 引入 BLEUSBP，并進(jìn)行了顯著性檢驗(yàn) 引入 WoodPecker！ 展望： 交流、溝通、進(jìn)步！ ? 下次評(píng)測(cè)怎么做？ – 項(xiàng)目設(shè)置 ? 詞語(yǔ)對(duì)齊？ ? 系統(tǒng)融合？ ? 科技翻譯？ ? 其他？ – 訓(xùn)練語(yǔ)料 – 評(píng)測(cè)指標(biāo) – 組織方式 總結(jié)和展望 致謝 ? 感謝為此次評(píng)測(cè)提供訓(xùn)練數(shù)據(jù)的單位，他們是（按拼音順序排列）： – 北京大學(xué)計(jì)算語(yǔ)言學(xué)研究所 – 哈爾濱工業(yè)大學(xué)信息檢索實(shí)驗(yàn)室 （無(wú)償） – 哈爾濱工業(yè)大學(xué)機(jī)器智能與翻譯研究室 – 萬(wàn)方數(shù)據(jù)公司 – 廈門(mén)大學(xué) – 中國(guó)科學(xué)技術(shù)信息研究所 （無(wú)償） – 中國(guó)科學(xué)院計(jì)算技術(shù)研究所 – 中國(guó)科學(xué)院自動(dòng)化研究所 ? 感謝為此次評(píng)測(cè)中提供測(cè)試數(shù)據(jù)的單位，他們是（按拼音順序排列）： – 中國(guó)科學(xué)技術(shù)信息研究所 （無(wú)償）特別感謝！ – 中國(guó)科學(xué)院計(jì)算技術(shù)研究所 ? 本次 WoodPecker評(píng)測(cè)的全過(guò)程中，得到了 微軟亞洲研究院自然語(yǔ)言計(jì)算組的 張冬冬、李沐 的鼎立協(xié)助，在此深表感謝！ ? 感謝本次評(píng)測(cè)組織工作的主要承擔(dān)者付出的艱辛勞動(dòng)： 趙紅梅、謝軍 ！ 參考文獻(xiàn) ? David Chiang, Steve DeNeefe, Yee Seng Chan and Hwee Tou Ng. Deposability of Translation Metrics for Improved Evaluation and Efficient Algorithms. In Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing, pages 610619, Honolulu, October 2022. 169。2022 Association for Computational Linguistics ? Ming Zhou, Bo Wang, Shujie Liu, Mu Li, Dongdong Zhang, Tiejun Zhao. Diagnostic Evaluation of Machine Translation Systems Using Automatically Constructed Linguistic CheckPoints. Coling 2022. ? Natural Language Computing Group, Microsoft Research Asia. Manual for WoodPecker: A Linguistic Evaluation Platform for MT Systems a556d6a7c7919b4a/ ? Michael Collins, Philipp Koehn, and Ivona Kuˇcerov180。. Clause restructuring for statistical machine translation. In Proc. ACL 2022, pages 531–540. 傾聽(tīng)意見(jiàn)和建議 謝謝 !
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1