全信息理論與中文信息處理-在線瀏覽
2024-12-15 11:42本頁(yè)面
【正文】 的訓(xùn)練和學(xué)習(xí)，需要在 大量 “ 記憶 +模仿 ” 實(shí)踐的基礎(chǔ)上才能 逐漸生長(zhǎng) 出“ 自主理解 ”的能力。理解自然 語(yǔ)言的 本質(zhì)是理解它所載荷的信息 ，因此要用信息論。 “全信息理論” 是北京郵電大學(xué)智能研究中心創(chuàng)建的 信息理論 [1, 2, 3]，擁有自主知識(shí)產(chǎn)權(quán)。Y) = H(X) – H(X|Y) H(X) = ? pn log pn X n 為什么 Shannon Information不能解決問(wèn)題？ 15 全信息與“認(rèn)知能力要素” 符號(hào) 客體 主體 語(yǔ)法信息 符號(hào)序列 （形式結(jié)構(gòu)） 序列內(nèi)容 序列價(jià)值 語(yǔ)義信息 語(yǔ)用信息 在給定 語(yǔ)境 （ 包括 主體 、 客體 、 文本 、 環(huán)境 和 常識(shí) ）下， 語(yǔ) 言理解要包含 該語(yǔ)境下的語(yǔ)法、語(yǔ)義、語(yǔ)用三要素 。 人的 認(rèn)知能力 包括：觀察力，理解力，目的性。 16 全信息自然語(yǔ)言理解的“認(rèn)知機(jī)理” 幼兒識(shí)字教學(xué)過(guò)程：如，教學(xué)生認(rèn)識(shí)“ 樹(shù) ”這個(gè)字。 明確了用途或害處 （ 語(yǔ)用 ）， 人們才會(huì)去關(guān)注它。 這就是 由“語(yǔ)法”調(diào)用“全信息詞典” 的過(guò)程。 17 An Example for “Understanding” Sensing Experiencing Thinking Form Value Content Learning the Concept “Tree” The Mechanism of Understanding Form ? Value ? Content 18 全信息與語(yǔ)言理解的層次 對(duì)于自然語(yǔ)言的理解，存在三個(gè)相依的層次： （ 1）了解它的 語(yǔ)法信息 （ 2）了解它的 語(yǔ)義信息 （ 3）了解它的 語(yǔ)用信息 語(yǔ)法、語(yǔ)義、語(yǔ)用“ 三位一體 ”的分析是自然語(yǔ)言理解方法的 基本要求（門檻）；“兩位一體”還不夠 。重要的方法是“ 快速捕獲骨架 ”（剪枝技巧）。 （ 2）“必要的分析”主要是“ 骨架分析 ”：篇章的骨架，段 落的骨架，語(yǔ)句的骨架。 20 全信息自然語(yǔ)言理解的基本模型 預(yù) 處理 后 處理 語(yǔ)用 分析 語(yǔ)義 分析 語(yǔ)法
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1