信息論與編碼理論thetheoryofinformationand-閱讀頁
2024-11-01 11:52本頁面
【正文】 中提取信號，是調(diào)制的逆過程 ?信道譯碼器 ：利用信道編碼時所提供的多余度，檢查或糾正數(shù)字序列中的錯誤。 ?信宿 ：消息傳送的對象 （人或機器 ） 。 消息只是表達(dá)信息的工具 、 載荷信息的客體 。 ? 通信的結(jié)果 是消除或部分消除不確定性從而獲得信息 。有時是否存在這樣一種模型還值得探討。這就與實際情況不完全一致。 ? 信息的測度 ：信息量與不確定性消除的程度有關(guān) 。 ? 某一事物狀態(tài)的不確定性的大小 ， 與該事物可能出現(xiàn)的不同狀態(tài)數(shù)目以及各狀態(tài)出現(xiàn)的概率大小有關(guān) 。 ? 與信息測度相關(guān)的幾個概念： 樣本空間、概率空間 、先驗概率 、自信息 、后驗概率 、互信息 –信息具有以下 特征 ： （ 1） 信息是可以 識別 的 （ 2） 信息的載體是可以 轉(zhuǎn)換 的 （ 3） 信息是可以 存貯 的 （ 4） 信息是可以 傳遞 的 （ 5） 信息是可以 加工 的 （ 6） 信息是可以 共享 的 信息論研究的內(nèi)容 1. 研究對象 –前面介紹的統(tǒng)一的通信系統(tǒng)模型。 2. 研究目的 –找到信息傳輸過程的共同規(guī)律，提高信息傳輸?shù)目煽啃浴⒂行?、保密性和認(rèn)證性，以達(dá)到信息傳輸系統(tǒng)的最優(yōu)化。 –有效性 經(jīng)濟性好，即用盡可能短的時間和盡可能少的設(shè)備來傳送 —定數(shù)量的信息。 –認(rèn)證性 接收者能正確判斷所接收的消息的正確性，驗證消息的完整性，而不是偽造的和被竄改的。 3. 研究內(nèi)容 對信息論的研究內(nèi)容一般有以下三種理解。這部分內(nèi)容是信息論的基礎(chǔ)理論，又稱為 香農(nóng)信息論 。 – 廣義信息論 ：廣義信息論不僅包括上述兩方面的內(nèi)容，而且包括所有與信息有關(guān)的領(lǐng)域，如模式識別、計算機翻譯、心理學(xué)、遺傳學(xué)、語言學(xué)等等。 – 它的 主要目的 是提高信息系統(tǒng)的可靠性 、 有效性 、保密性和認(rèn)證性 ， 以便達(dá)到系統(tǒng)最優(yōu)化； – 它的 主要內(nèi)容 (或分支 )包括香農(nóng)理論 、 編碼理論 、維納理論 、 檢測和估計理論 、 信號設(shè)計和處理理論 、調(diào)制理論 、 隨機噪聲理論和密碼學(xué)理論等 。 一 、 簡史 ? 現(xiàn)代信息論實際上是從 20世紀(jì) 20年代奈奎斯特和哈特萊的工作開始的。
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號-1