【正文】 對(duì)于二元對(duì)稱信道的輸入概率空間為平均互信息：根據(jù)：所以： 請(qǐng)繪制當(dāng)從0到1之間變化時(shí)的平均互信息熵曲線2. 信道容量圖形一個(gè)信道是一個(gè)二進(jìn)制輸入，二進(jìn)制輸出的信道，輸入和輸出字母表，且該信道特性由發(fā)送1碼和0碼的兩個(gè)錯(cuò)誤轉(zhuǎn)移概率和來表征。步長(zhǎng)變大的時(shí)候，可以看出是一段一段的連接的，當(dāng)步長(zhǎng)較大的時(shí)候，非常明顯。title(39。175。plot(x,y)。grid on分析：⑴.意義：信源熵為信源的平均不確定度性，而概率的大小決定了信息量的大小。)。 其中X是輸入隨機(jī)變量，Y是輸出隨機(jī)變量。Xlabel(39。w39。ylabel(39。191。也就是說，對(duì)于每一種信源都存在一種最差的信道，此信道的干擾最大，即輸出端所獲得的信息量最小。=s=2。plot(d1,y1,39。207。ylabel(39。 實(shí)驗(yàn)四、香農(nóng)編碼一、實(shí)驗(yàn)?zāi)康模?）了解香農(nóng)編碼的基本原理及其特點(diǎn)；（2）熟悉掌握香農(nóng)編碼的方法和步驟；（3）掌握Matlab編寫香農(nóng)編碼的程序。y=0。) %disp相當(dāng)于輸出，c語言中的putchar disp(39。這種編碼方法就是香農(nóng)編碼。哈夫曼編碼的程序流程圖：初始化原始消息數(shù)將n個(gè)消息進(jìn)行排序裝入哈夫曼數(shù)據(jù)使左分支編碼為1，右分值編碼為0碼字初始化為0排序列表初始化獲得哈夫曼碼字分別遍歷左右分支節(jié)結(jié)束將最后兩個(gè)出現(xiàn)概率最小的消息合成一個(gè)消息將消息添加到隊(duì)列的最后為n1消息重新進(jìn)行排列做準(zhǔn)備遍歷至原始消息，即葉子節(jié)點(diǎn)，輸出讀碼字開始四、實(shí)驗(yàn)要求1. 輸入：信源符號(hào)個(gè)數(shù)r、信源的概率分布P；2. 輸出：每個(gè)信源符號(hào)對(duì)應(yīng)的Huffman編碼的碼字。214。039。此時(shí)將影響碼字的長(zhǎng)度，一般將合并的概率放在上面，這樣獲得較小的碼方差?？s減信源的最后兩個(gè)碼字總是最后一位不同，從而保證了哈夫曼編碼是即時(shí)碼；特點(diǎn)：（1） 哈夫曼編碼并非是唯一的。 c(n1,2*n)=39。197。從根到葉的路徑就給出了各個(gè)碼字的編碼和碼長(zhǎng)。 %求和結(jié)果，累加概率 p=b2d10(x)。 endend clc。也就是說:存在一個(gè)信道使某一特定信源經(jīng)過此信道傳輸時(shí)，信道的平均互信息達(dá)到極小值.用途：量化，頻帶壓縮，數(shù)據(jù)轉(zhuǎn)換，數(shù)據(jù)壓縮等等開始框圖：輸入二源對(duì)稱信道概率信源熵漢明失真信源H(D)輸出率失真函數(shù)R(D)結(jié)束計(jì)算過程：性質(zhì)：R(D)是非負(fù)的實(shí)數(shù)，定義域?yàn)?到Dmax，其值為0到H(X)；當(dāng)DDmax時(shí)，R(D)=0。39。212。p1=。1,0]的率失真函數(shù)R(D)。Y)之間的關(guān)系，是關(guān)于信道傳遞概率p的下凸函數(shù)。192。)。title(39。plot(p,y)。它的輸入符號(hào)X取值于{0,1}，輸出符號(hào)Y取值于{0,1}，r=s=2， a1=b1=0，a2=b2=1，傳遞概率為, , 其中，表示信道輸入符號(hào)為0而接收到的符號(hào)為1的概率，表示信道輸入符號(hào)為1而接受到的符號(hào)為0的概率，它們都是單個(gè)符號(hào)傳輸發(fā)生錯(cuò)誤的概率，通常用p表示。H(p)39。)。三、實(shí)驗(yàn)內(nèi)容（1）MATLAB的應(yīng)用（請(qǐng)參閱相關(guān)書籍）（2）打開MATLAB，在命令窗口中輸入eidt，彈出編輯窗口，如圖1：圖1 MATLAB的編輯窗口 （3）輸入源程序：clear。)。175。Y))是統(tǒng)計(jì)平均意義下的先驗(yàn)不確定性與后驗(yàn)不確定性之差，是互信息量的統(tǒng)計(jì)平均:離散信道的數(shù)學(xué)模型一般如圖1所示。w=。w=::。meshz(w,p,y)。208。Y)之間的關(guān)系，即I(w。并能找到滿足該最小失真的試驗(yàn)信道，且是一個(gè)無噪無損信道，其信道矩陣為：要達(dá)到最大允許失真，唯一確定 此時(shí)，可計(jì)算得信息傳輸率一般情況下，當(dāng) 時(shí)可以計(jì)算得：二元對(duì)稱信源信息率失真函數(shù)為四、實(shí)驗(yàn)內(nèi)容=s=2。l 實(shí)驗(yàn)結(jié)果：利用你的程序給出不同參數(shù)得到的實(shí)驗(yàn)結(jié)果。162。175。Y)是信道轉(zhuǎn)移概率 x=temp。 b(m)=ceil(log2(a(m)))。)end輸出結(jié)果為：初始概率 求和結(jié)果 0編碼位數(shù) 3最終編碼 0 0 0輸出結(jié)果為：初始概率 求和結(jié)果 編碼位數(shù) 3最終編碼 0 0 1輸出結(jié)果為：初始概率 求和結(jié)果 編碼位數(shù) 3最終編碼 0 1 1輸出結(jié)果為：初始概率 求和結(jié)果