【正文】 系統(tǒng)部分： –闡述一個(gè)或多個(gè)視頻和音頻 ES以及其他數(shù)據(jù)組合成為單路或復(fù)接的碼流，以適合存儲(chǔ)或傳輸。 –包： 130~192字節(jié)，含單個(gè)基本碼流或數(shù)據(jù)類型的數(shù)字信息。 ? 系統(tǒng)層：目的為提供一個(gè)基本數(shù)據(jù)結(jié)構(gòu)（數(shù)據(jù)碼流的語(yǔ)義和語(yǔ)法）可作為存儲(chǔ)、編輯和廣播應(yīng)用時(shí)的公共格式。 聲音源 圖像源 音頻編碼器 視頻編碼器 系統(tǒng)時(shí)鐘 系統(tǒng) 復(fù)接器和 編碼器 MPEG碼流 多媒體通信技術(shù)規(guī)范與標(biāo)準(zhǔn) ?MPEG2標(biāo)準(zhǔn) ? 分為系統(tǒng)、視頻、音頻和一致性測(cè)試四個(gè)部分； ? 系統(tǒng)層語(yǔ)法有擴(kuò)充，含兩類數(shù)據(jù)碼流： –傳輸碼流 TS： PS或 ES的集合，它們可以以非特定關(guān)系復(fù)接，用于傳輸目的。 主要內(nèi)容 ? 模擬與數(shù)字視音頻技術(shù) ? IP電話的關(guān)鍵技術(shù) ? 多媒體通信技術(shù)規(guī)范與標(biāo)準(zhǔn) ? 音頻、圖形、圖像通信終端 ? 視頻通信終端 ? 數(shù)據(jù)通信終端 ? 多媒體通信終端 ?視音頻信息基本概念 ?視音頻信息數(shù)字化 ?視音頻壓縮編碼 ?彩色電視攝像機(jī) ?多媒體計(jì)算機(jī)用攝像頭 ?視頻顯示終端 ?多媒體終端形式 ?多媒體通信終端接口 ?多媒體通信終端軟件系統(tǒng) 多媒體通信技術(shù)規(guī)范與標(biāo)準(zhǔn) ?MPEG1標(biāo)準(zhǔn) ? 規(guī)定了 ~信息的編解碼器和數(shù)據(jù)碼流的表示；由系統(tǒng)、視頻、音頻三部分組成； ? 系統(tǒng)編碼層說(shuō)明了各種基本碼流 ES的復(fù)用語(yǔ)法，如壓縮后音頻、視頻以及其它輔助數(shù)據(jù)。 ?VoIP前向糾錯(cuò)技術(shù) 采用信道編碼以及交織。 IP電話的關(guān)鍵技術(shù) ?話音優(yōu)先技術(shù) 在 IP網(wǎng)絡(luò)路由器中設(shè)置語(yǔ)音包的優(yōu)先級(jí)最高。 ?語(yǔ)音抖動(dòng)處理技術(shù) 網(wǎng)絡(luò)延時(shí)與網(wǎng)絡(luò)抖動(dòng)（ IP包傳輸時(shí)間的長(zhǎng)短變化），導(dǎo)致 IP通話質(zhì)量下降。 當(dāng)回聲返回時(shí)間超過(guò) 10ms，人耳就聽(tīng)得很明顯。 大大節(jié)省網(wǎng)絡(luò)帶寬。 ?靜噪抑制技術(shù) 檢測(cè)到通話過(guò)程中的安靜時(shí)段即停止發(fā)送語(yǔ)音包。 ?采用存儲(chǔ) 轉(zhuǎn)發(fā)的方式傳遞包，不獨(dú)占電路 ?語(yǔ)音高比例壓縮，占用帶寬僅為 8~10kbit/s ?節(jié)省長(zhǎng)途通信費(fèi)用。矢量量化編碼、子帶編碼、小波變換、分層編碼、分形編碼、模型編碼等。在發(fā)端每隔一段時(shí)間丟棄一幀或幾幀圖像，在收端根據(jù)幀間相關(guān)性將丟棄的幀通過(guò)內(nèi)插恢復(fù)出來(lái)。步驟： 將圖像分解成背景和若干運(yùn)動(dòng)物體，各物體可能位移不同但每物體所有像素位移相同，通過(guò)運(yùn)動(dòng)估值得到每個(gè)物體位移矢量； 利用位移矢量計(jì)算經(jīng)運(yùn)動(dòng)補(bǔ)償后的預(yù)測(cè)值； 對(duì)預(yù)測(cè)誤差進(jìn)行量化、編碼、傳輸，將位移矢量和圖像分解方式等信息送到接收端。根據(jù)物體的運(yùn)動(dòng)方向和速度來(lái)作預(yù)測(cè)，比簡(jiǎn)單預(yù)測(cè)要準(zhǔn)確，可以達(dá)到更高的壓縮比。消除序列圖像的時(shí)間相關(guān)性也可以采用預(yù)測(cè)編碼，傳送當(dāng)前幀與其前一幀或后一幀的差值?；顒?dòng)圖像在時(shí)間上比空間上更具相關(guān)性。步驟： 選擇變換類型，如 DCT； 選擇方塊大小，如 8 8或 16 16； 選擇變換系數(shù)，并對(duì)其進(jìn)行高效的量化，以便傳輸或存儲(chǔ)； 對(duì)量化系數(shù)進(jìn)行比特分配，使用 Huffman編碼或游程編碼。非零系數(shù)和零系數(shù)的合理組織，是為了在帶來(lái)最少冗余的同時(shí)保證最大的連零系數(shù)出現(xiàn)概率。 187。變換方案： KL變換、 DCT變換 187。此外，圖像經(jīng)某些變換后，系數(shù)的空間分布和頻率特性可能與人眼的視覺(jué)特性更匹配。變換后采用適當(dāng)?shù)牧炕挽鼐幋a可以有效地壓縮。變換后滿足：所有系數(shù)相互獨(dú)立，能量集中于少數(shù)幾個(gè)系數(shù)，這些系數(shù)集中于一個(gè)最小的區(qū)域。原理：將空間域相關(guān)的像素點(diǎn)通過(guò)正交變換映射到另一個(gè)頻域上，使變換后的系數(shù)之間的相關(guān)性降低。較好刻畫圖像的局部特性，提高預(yù)測(cè)效率。 187。預(yù)測(cè)算法的選取與圖像信號(hào)的概率分布有關(guān)。 缺點(diǎn)：圖像序列不同的區(qū)域預(yù)測(cè)性能不一樣，快運(yùn)動(dòng)區(qū)預(yù)測(cè)效率較差。幀間預(yù)測(cè)： 利用時(shí)間冗余，壓縮比更高，針對(duì)圖像塊。 缺點(diǎn)：對(duì)信道噪聲及誤碼很敏感，會(huì)產(chǎn)生誤碼擴(kuò)散，壓縮比不高，很少獨(dú)立使用。幀內(nèi)預(yù)測(cè)： 采用像素預(yù)測(cè)形式的 DPCM。用同行、前幾行或前幾幀來(lái)作預(yù)測(cè)稱為一維、二維或三維預(yù)測(cè)。原理：基于時(shí)間和空間冗余，用相鄰已知像素或圖像塊來(lái)預(yù)測(cè)當(dāng)前的像素或圖像塊的取值，然后再對(duì)預(yù)測(cè)誤差進(jìn)行量化編碼。方式：幀內(nèi)預(yù)測(cè)和幀間預(yù)測(cè)。人類視覺(jué)對(duì)圖像的注意是非均勻和非線性的，并不是對(duì)圖像任何變化都能感知。 –知識(shí)冗余：圖像中包含的信息與先驗(yàn)基礎(chǔ)知識(shí)有關(guān)。 –信息熵冗余：編碼冗余，對(duì)每像素采用相同比特?cái)?shù)表示，不能按其信息熵大小分配比特?cái)?shù)必然存在冗余。 MPEG數(shù)據(jù)速率： 32448kbit/s，適合于 CDDA光盤。 MPEG第三層次：在上述基礎(chǔ)上再引入輔助子帶、非均勻量化和熵編碼技術(shù)。經(jīng)濾波器分為 32個(gè)子帶，根據(jù)音頻信號(hào)的性質(zhì)計(jì)算各頻率分量的人耳掩蔽門限，選擇各子帶的量化參數(shù)。 187。 ， 16bit量化。 視音頻壓縮編碼 ?音頻壓縮編碼技術(shù) ? 不同質(zhì)量要求時(shí)的音頻編碼技術(shù)選擇 –高保真環(huán)繞立體聲音頻壓縮編碼 187。采用子帶編碼方法，將音頻用濾波器分成高子帶和低子帶，分別進(jìn)行 ADPCM編碼，再混合形成輸出碼流。 187。 視音頻壓縮編碼 ?音頻壓縮編碼技術(shù) ? 不同質(zhì)量要求時(shí)的音頻編碼技術(shù)選擇 –調(diào)幅廣播質(zhì)量的音頻壓縮編碼 187。 187。 187。 CELP：閉環(huán) LPC，由輸入語(yǔ)音信號(hào)確定最佳參數(shù)，根據(jù)某種最小誤差準(zhǔn)則從碼本中找出最佳激勵(lì)碼本矢量。如 LPC、VQ。 視音頻壓縮編碼 ?音頻壓縮編碼技術(shù) ? 不同質(zhì)量要求時(shí)的音頻編碼技術(shù)選擇 –電話質(zhì)量的音頻壓縮編碼 187。 187。頻率范圍： 187。短延時(shí)碼本激勵(lì)線性預(yù)測(cè) LDCELP 187。矢量和激勵(lì)線性預(yù)測(cè) VSELP 187。 187。 視音頻壓縮編碼 ?音頻壓縮編碼技術(shù) ? 音頻信號(hào)壓縮編碼方法 –混合編碼 187。 187。 187。 視音頻壓縮編碼 ?音頻壓縮編碼技術(shù) ? 音頻信號(hào)壓縮編碼方法 –參數(shù)編碼 187。 187。 187。 視音頻壓縮編碼 ?音頻壓縮編碼技術(shù) ? 音頻信號(hào)壓縮編碼方法 –波形編碼 187。 ?在信源概率比較均勻的情況下，其編碼效率高于 Huffman編碼。給每個(gè)符號(hào)所對(duì)應(yīng)的賦值逆向排序即得編碼。最后兩個(gè)概率相加合成一個(gè)，重新按概率排序賦值； 187。 –算法： 187。 ? Huffman編碼 –根據(jù)可變長(zhǎng)最佳編碼定理，應(yīng)用 Huffman算法而得。 視音頻壓縮編碼 ?無(wú)失真壓縮編碼 –變字長(zhǎng)編碼最佳編碼定理： 18