【正文】 下協(xié)議如何協(xié)同工作。RTP/RTCP：實(shí)時(shí)傳輸協(xié)議，用來(lái)傳輸視、音頻流。RAS（注冊(cè),許可,狀態(tài)）是終端和網(wǎng)守之間。在域內(nèi)端點(diǎn)的信令協(xié)議。，主要針對(duì)會(huì)議通信設(shè)計(jì)。確保與會(huì)方就發(fā)送和接收媒體格式和帶寬要求達(dá)成一致。終端、網(wǎng)關(guān)、多點(diǎn)控制單元統(tǒng)稱(chēng)端點(diǎn)：可以發(fā)起呼叫，可以接收呼叫，媒體信息流在端點(diǎn)生成和終結(jié)。 協(xié)議網(wǎng)絡(luò)的組成，終端具有音頻編解碼功能，提供系統(tǒng)控制接口。主要包括：轉(zhuǎn)換協(xié)議如PSTN、ISDN網(wǎng)絡(luò)通信；傳遞信息。同時(shí)它還負(fù)責(zé)帶控制，這是一系列操作的集合，允許終端節(jié)點(diǎn)改變?cè)贗P網(wǎng)絡(luò)上分配的帶寬。這個(gè)組稱(chēng)為一個(gè)區(qū)域，一個(gè)區(qū)域是由這些元素構(gòu)成的邏輯聯(lián)系。接入控制，網(wǎng)絡(luò)資源使用許可，身份驗(yàn)證。區(qū)域管理，下轄設(shè)備的管理。MCU包括一個(gè)命令多點(diǎn)控制器（MC）和可選的多點(diǎn)處理器（MP）。MP在MC的控制下在進(jìn)行多點(diǎn)會(huì)議時(shí)，具備對(duì)語(yǔ)音、視頻或者數(shù)據(jù)業(yè)務(wù)的混合或交換能力。 協(xié)議網(wǎng)絡(luò)的網(wǎng)守第三節(jié) 1990年CCITT正式通過(guò)了針對(duì)通過(guò)電話線的可視電話、。試想如果同時(shí)結(jié)合波形編碼方法和參量編碼方法，則可得到集合了兩者優(yōu)勢(shì)的的編碼。（Common Intermediate Format），有效區(qū)域像素為176144（色差信號(hào)）和352288（亮度信號(hào)）。幀內(nèi)編碼系統(tǒng)單獨(dú)壓縮視頻的每一幀（有時(shí)為每一場(chǎng)），其算法優(yōu)點(diǎn)是提供了精確的幀定位，便于編輯，但它們的數(shù)據(jù)量比幀間算法要大2～10倍。圖像中每個(gè)88的子塊經(jīng)DCT變換后生成DCT系數(shù)，然后對(duì)系數(shù)量化和墑編碼，最后送給復(fù)接器與其他邊信息復(fù)接到一起構(gòu)成一路比特流。幀間編解碼器使用了有效的雙向預(yù)測(cè)、運(yùn)動(dòng)預(yù)測(cè)和DCT的組合，以達(dá)到高壓縮比，從而實(shí)現(xiàn)低碼率，[13]。首先，當(dāng)前幀中的亮度宏塊和前一幀相應(yīng)位置的亮度宏塊進(jìn)行比較，產(chǎn)生活動(dòng)物體的運(yùn)動(dòng)估值；然后，利用此運(yùn)動(dòng)矢量對(duì)前一幀中的運(yùn)動(dòng)物體進(jìn)行運(yùn)動(dòng)補(bǔ)償，得到相應(yīng)的預(yù)測(cè)宏塊。反之，差值進(jìn)行DCT變換、線性量化及熵編碼，然后與運(yùn)動(dòng)矢量等邊信息一起送到復(fù)接器組成一路比特碼流。根據(jù)傳輸緩存器中的數(shù)據(jù)多少，編碼器自適應(yīng)地調(diào)整量化步長(zhǎng)。另一方面，當(dāng)緩存器不滿時(shí)，減少量化步長(zhǎng)，提高圖像質(zhì)量。熵編碼技術(shù)在量化后的DCT系數(shù)的統(tǒng)計(jì)特性基礎(chǔ)上，通過(guò)使它們更加緊湊而實(shí)現(xiàn)無(wú)失真壓縮。常用的熵編碼有霍夫曼編碼和算術(shù)編碼兩種。算術(shù)編碼比霍夫曼編碼可提高10％的壓縮效率，但實(shí)現(xiàn)較為復(fù)雜。對(duì)于DCT系數(shù)有5個(gè)變字長(zhǎng)碼表和各種邊信息。為能夠支持實(shí)時(shí)編碼，采用不對(duì)稱(chēng)的壓縮算法十分必要。在理論上，這可使解碼器成本降低。第四節(jié) ，但壓縮原理基本相同。，是為低碼流通信而設(shè)計(jì)的。但做了一些改善和改變，以提高性能和糾錯(cuò)能力。實(shí)時(shí)的視頻通信在實(shí)時(shí)情形下開(kāi)發(fā)一個(gè)可以有效工作的視頻編碼和編碼器時(shí)，有很多問(wèn)題是要被說(shuō)明的，包括：碼率控制實(shí)際的通信信道對(duì)于每秒鐘它們可以處理的能力有限度。如果運(yùn)動(dòng)估計(jì)/補(bǔ)償過(guò)程工作正常的話，那么就有更少的非0系數(shù)被用來(lái)編碼。這樣編碼的值會(huì)增加。編碼器計(jì)算編碼器輸出的碼率。如果碼率下降的話，編碼器就通過(guò)降低量化器的標(biāo)量化因子來(lái)進(jìn)行壓縮。同步編碼器和解碼器必須是同步的，特別是如果視頻信號(hào)與音頻信號(hào)一起的話。如果解碼器失掉了同步，那么它就向前掃描下一個(gè)標(biāo)記來(lái)重新同步并恢復(fù)解碼。音頻和復(fù)用 。同步，（基于ISDN的視頻會(huì)議），（基于POTS的視頻電信）（LAN或基于IP的視頻會(huì)議）。另外，相關(guān)的標(biāo)準(zhǔn)包含了像復(fù)用（）和信號(hào)機(jī)制（）。分別說(shuō)明了各個(gè)標(biāo)準(zhǔn)的主要內(nèi)容，框架結(jié)構(gòu)以及基于這些協(xié)議的網(wǎng)絡(luò)組成構(gòu)架。第三章 視頻會(huì)議的主要技術(shù)第一節(jié) 壓縮技術(shù)一、視頻編碼技術(shù)從編碼前后信息量變化的角度出發(fā)，信息壓縮方法分為兩類(lèi)：一類(lèi)是不允許有失真的編碼，即所謂信息保持型編碼，或稱(chēng)為熵編碼；另一類(lèi)則是允許有一定量失真的編碼，稱(chēng)為有限失真編碼。一般說(shuō)來(lái)，信息保持型編碼的壓縮比較低，非信息保持型編碼的壓縮比較高。雖然一般說(shuō)來(lái)語(yǔ)音信息比圖像信息要少，但仍然顯得比較龐大。第二階段是對(duì)MPEG1實(shí)施了向后兼容的多聲道擴(kuò)展，將其稱(chēng)為MPEG2BC。并附加“低頻加重”擴(kuò)展聲道，從而達(dá)到五聲道編碼。采樣頻率可以低至8KHZ；而高至96KHZ范圍內(nèi)的148個(gè)通道可選的高音質(zhì)音頻編碼。I幀圖像采用幀內(nèi)編碼方式，即只利用了單幀圖像內(nèi)的空間相關(guān)性，而沒(méi)有利用時(shí)間相關(guān)性。P幀圖像只采用前向時(shí)間預(yù)測(cè)，可以提高壓縮效率和圖像質(zhì)量。B幀圖像采用雙向時(shí)間預(yù)測(cè)，可以大大提高壓縮倍數(shù)。MPEG2所能提供的傳輸率在310Mbits/sec間，其在NTSC制式下的分辨率可達(dá)720486，MPEG2也可提供并能夠提供廣播級(jí)的視像和CD級(jí)的音質(zhì)。由于MPEG2在設(shè)計(jì)時(shí)的巧妙處理，使得大多數(shù)MPEG2解碼器也可播放MPEG1格式的數(shù)據(jù)，如VCD。（MPEG3要求傳輸速率在20Mbits/sec40Mbits/sec間，但這將使畫(huà)面有輕度扭曲）。MPEG2的另一特點(diǎn)是，其可提供一個(gè)較廣的范圍改變壓縮比，以適應(yīng)不同畫(huà)面質(zhì)量，存儲(chǔ)容量，以及帶寬的要求。（二）MPEG4MPEG4是為在國(guó)際互聯(lián)網(wǎng)絡(luò)上或移動(dòng)通信設(shè)備（例如移動(dòng)電話）上實(shí)時(shí)傳輸音視頻訊號(hào)而制定的最新MPEG標(biāo)準(zhǔn)，MPEG4采用Object Based方式解壓縮，壓縮比指標(biāo)遠(yuǎn)遠(yuǎn)優(yōu)于以上幾種，壓縮倍數(shù)為450倍（圖像可達(dá)800倍），分辨率輸入可從320240到12801024，這是同質(zhì)量的MPEG1和MJEPG的十倍多。影像的不同之處，是可根據(jù)圖像內(nèi)容，將其中的對(duì)象（人物、物體、背景）分離出來(lái)分別進(jìn)行壓縮，使圖文件容量大幅縮減，而加速音視頻的傳輸，這不僅僅大大提高了壓縮比，也使圖像探測(cè)的功能和準(zhǔn)確性更充分的體現(xiàn)出來(lái)。也可采用動(dòng)態(tài)幀測(cè)技術(shù)，動(dòng)態(tài)時(shí)快錄，靜態(tài)時(shí)慢錄，從而減少平均數(shù)據(jù)量，節(jié)省存儲(chǔ)空間。MPEG4中算法很多，可根據(jù)需要選用，例如區(qū)域變換有DCT，SADCT和OWT等。VO的構(gòu)成依賴(lài)于具體應(yīng)用和系統(tǒng)實(shí)際所處環(huán)境：在要求超低比特率的情況下，VO可以是矩形幀（），從而與原來(lái)的標(biāo)準(zhǔn)兼容；對(duì)于基于內(nèi)容的表示要求較高的應(yīng)用來(lái)說(shuō)，V0可能是場(chǎng)景中的某一物體或某一層面，如新聞節(jié)目中解說(shuō)員的頭肩像；V0也可能是計(jì)算機(jī)產(chǎn)生的二維、三維圖形等[16]。VO的生存期是一個(gè)鏡頭（SESSION）。其中，在編碼控制和復(fù)合階段可以加入用戶的交互控制或由智能化的算法進(jìn)行控制。它的出現(xiàn)將對(duì)以下各方面產(chǎn)生較大的推動(dòng)作用：數(shù)字電視、動(dòng)態(tài)圖像、萬(wàn)維網(wǎng)（WWW）、實(shí)時(shí)多媒體監(jiān)控、低比特率下的移動(dòng)多媒體通信、于內(nèi)容存儲(chǔ)和檢索多媒系統(tǒng)、Intranet上的視頻流與可視游戲、基于面部表情模擬的虛擬會(huì)議、DVD上的交互多媒體應(yīng)用、基于計(jì)算機(jī)網(wǎng)絡(luò)的可視化合作實(shí)驗(yàn)室場(chǎng)景應(yīng)用、演播電視等。MPEG4不只是具體壓縮算法，它是針對(duì)數(shù)字電視、交互式繪圖應(yīng)用（影音合成內(nèi)容）、交互式多媒體（WWW、資料擷取與分散）等整合及壓縮技術(shù)的需求而制定的國(guó)際標(biāo)準(zhǔn)。數(shù)據(jù)格式。基于對(duì)象的編碼理念，即在編碼時(shí)將一幅景物分成若干在時(shí)間和空間上相互聯(lián)系的視頻音頻對(duì)象，分別編碼后，再經(jīng)過(guò)復(fù)用傳輸?shù)浇邮斩?，然后再?duì)不同的對(duì)象分別解碼，從而組合成所需要的視頻和音頻。例如，我們可以將一個(gè)卡通人物放在真實(shí)的場(chǎng)景中，或者將真人置于一個(gè)虛擬的演播室里，還可以在互聯(lián)網(wǎng)上方便的實(shí)現(xiàn)交互，根據(jù)自己的需要有選擇的組合各種視頻音頻以及圖形MPEG4系統(tǒng)的一般框架是：對(duì)自然或合成的視聽(tīng)內(nèi)容的表示；對(duì)視聽(tīng)內(nèi)容數(shù)據(jù)流的管理，如多點(diǎn)、同步、緩沖管理等；對(duì)靈活性的支持和對(duì)系統(tǒng)不同部分的配置。利用這些工具，用戶可以方便地從多媒體數(shù)據(jù)庫(kù)中有選擇地獲取自己所需的與對(duì)象有關(guān)的內(nèi)容，并提供了內(nèi)容的操作和位流編輯功能，可應(yīng)用于交互式家庭購(gòu)物，淡入淡出的數(shù)字化效果等。它可以把自然場(chǎng)景或?qū)ο蠼M合起來(lái)成為合成的多媒體數(shù)據(jù)?；诓ㄐ尉幋a的壓縮編碼可獲得較高的語(yǔ)音質(zhì)量，但數(shù)據(jù)量壓縮不多，（或A律）壓縮。近年來(lái)出現(xiàn)的混合語(yǔ)音編碼方法，把波形編碼的高質(zhì)量和參數(shù)編碼的低數(shù)碼率結(jié)合在一起，取得了較好的效果，其數(shù)碼率10Kbit/S左右，語(yǔ)音質(zhì)量也較好。與視頻編解碼相似，一個(gè)視頻會(huì)議系統(tǒng)還需要實(shí)現(xiàn)音頻編解碼功能。其中，G系列是基于傳統(tǒng)的電話音質(zhì)的編碼技術(shù)，頻響范圍為300Hz3400Hz，采樣率為8KHz，每路聲音占用帶寬為8K64K。而MP3是用于高保真音樂(lè)的高效聲音壓縮算法，頻響范圍10Hz到20KHz，而且MP3還支持雙聲道編碼技術(shù)，其效果比G系列音質(zhì)要好得多。如果帶寬資源比較豐富，從音頻效果上可采用MP3編碼標(biāo)準(zhǔn)；如果帶寬資源比較緊張，從帶寬資源上考慮建議采用G系列編碼標(biāo)準(zhǔn)。第二節(jié) 多點(diǎn)控制技術(shù)視頻會(huì)議業(yè)務(wù)是一種多點(diǎn)之間雙向通信業(yè)務(wù)。MCU和各終端的連接是呈星形狀態(tài)，通常放置在星形網(wǎng)絡(luò)的中心處，即參加會(huì)議的各個(gè)終端都以雙向通信的方式和MCU相連接[18]。MCU是一個(gè)數(shù)字處理單元，具備對(duì)多個(gè)視頻會(huì)議終端的信號(hào)進(jìn)行切換或混合功能。由于語(yǔ)音信號(hào)可以進(jìn)行疊加處理，因此對(duì)語(yǔ)音信號(hào)的處理除了切換以外可采用多路匯接（混合）的方式；而對(duì)圖像信號(hào)來(lái)說(shuō)，多個(gè)圖像的疊加是不允許發(fā)生的，MCU只是將它們?cè)诟鱾€(gè)會(huì)議點(diǎn)之間進(jìn)行切換，當(dāng)然圖像允許進(jìn)行拼接，可利用MCU實(shí)現(xiàn)多畫(huà)面分割，可在一臺(tái)顯示設(shè)備上顯示多路圖像。使它能模仿我們平時(shí)實(shí)際開(kāi)會(huì)的方式，如主席發(fā)言、與會(huì)者發(fā)言、插話、自由討論等。它包括四個(gè)主要部分：、。本系統(tǒng)由于MCU連接了多個(gè)端口，若各端口Modem的速率不一致，則可能會(huì)造成MCU的數(shù)據(jù)擁塞，故本系統(tǒng)中禁止Modem速率的自動(dòng)調(diào)整。在MCU中。由于幀長(zhǎng)度是不定的，因此，幀起始標(biāo)志的正確傳輸與檢測(cè)直接影響到幀定位。因本會(huì)議系統(tǒng)的可能狀態(tài)較少，所用到的控制命令也少，故只用一個(gè)字節(jié)傳送命令，另一個(gè)字節(jié)作為BAS碼的糾錯(cuò)字節(jié)，以保證命令的正確傳輸。狀態(tài)設(shè)置表的初始設(shè)置是在會(huì)前通過(guò)勤務(wù)電話確定的。當(dāng)某個(gè)站點(diǎn)呼通后，而MCU則將該幀環(huán)回，并將BAS碼替換為就緒確認(rèn)命令。同時(shí)將主席端的數(shù)據(jù)切換到各個(gè)站點(diǎn)，此時(shí)主席便可以發(fā)言，也可以命令其它會(huì)員發(fā)言。MCU接到命令后，即將A站點(diǎn)的數(shù)據(jù)切換到除A外的所有其它站點(diǎn)，同時(shí)將主席的數(shù)據(jù)發(fā)往A站點(diǎn)。 命令交互示意圖在會(huì)議中，MCU接主席命令后，應(yīng)根據(jù)該命令所產(chǎn)生的狀態(tài)轉(zhuǎn)移來(lái)修改狀態(tài)設(shè)置表。由于幀交換又要占用大量的內(nèi)存資源，同時(shí)還要保證系統(tǒng)的實(shí)時(shí)性，因此，MCU伺服軟件的設(shè)計(jì)不僅要求執(zhí)行效率高，還要求程序本身要占用較少的系統(tǒng)資源。首先可建立簡(jiǎn)化的快速原型，然后在此基礎(chǔ)上逐步完善以達(dá)到設(shè)計(jì)要求。具體開(kāi)發(fā)流程如圖7所示。建立遠(yuǎn)地自環(huán)模型，以測(cè)試快速原型的正確性，同時(shí)測(cè)試接口卡的工作特性；編寫(xiě)幀讀入模塊和幀寫(xiě)出模塊程序，以連續(xù)測(cè)試幀環(huán)回及單一測(cè)試幀。然后按照系統(tǒng)的實(shí)時(shí)性要求對(duì)產(chǎn)生時(shí)延較大的模塊進(jìn)行改進(jìn)。攝像機(jī)的視頻信號(hào)和控制信號(hào)能過(guò)短距離的電纜接入到視頻數(shù)據(jù)復(fù)用光端機(jī)，并通過(guò)光纜將信號(hào)傳輸?shù)奖O(jiān)控中心，再通過(guò)另一個(gè)光端機(jī)將信號(hào)還原為模擬的視頻信號(hào)和控制信號(hào)。完成了視頻在監(jiān)控中心的重現(xiàn)。，由信息源、電發(fā)射機(jī)、光發(fā)射機(jī)、光纖線路、光接收機(jī)、電接收機(jī)、信宿組成。光源輸出的光信號(hào)直接耦合到傳輸光纖中，經(jīng)一定長(zhǎng)度的光纖傳輸后送達(dá)接收端。對(duì)于長(zhǎng)距離的光纖通信系統(tǒng)，由于存在光的衰減和波形失真的現(xiàn)象，為了補(bǔ)償這樣的現(xiàn)象，每隔一定距離需要接入光中繼器。與其不同的是，光源只能發(fā)出正的脈沖，而不能發(fā)射負(fù)脈沖，所以要使信號(hào)在光纖中傳輸，就要將其變換為適合于在光纖中傳輸?shù)膯螛O性碼。因此，線路碼的選擇不僅要考慮如光纖線路的帶寬特性影響著對(duì)線路碼型速率變換的選擇的特性，還需考慮光源器件的非線性影響著對(duì)線路碼型的選擇。以CIMT信道編碼為例介紹光纖傳輸。CIMT編碼有三種幀形式：數(shù)據(jù)幀、控制幀和填充幀。其中Dfield組成的數(shù)據(jù)位可以是十六位或二十位，取決于電路結(jié)構(gòu)。填充幀是在發(fā)射端沒(méi)有數(shù)據(jù)信號(hào)時(shí)以及發(fā)射端和接收端建立連接時(shí)產(chǎn)生。對(duì)光纖線路的編解碼的實(shí)現(xiàn)，選用Agllent公司的HDMP1022和HDMP1024作為CMIT碼的編碼與解碼芯片，對(duì)數(shù)字視頻信號(hào)編解碼的同時(shí)，完成對(duì)信號(hào)的二次復(fù)用與對(duì)應(yīng)的解復(fù)用。芯片主要應(yīng)用于點(diǎn)對(duì)點(diǎn)的高速數(shù)字傳輸系統(tǒng)，在配合光收發(fā)模塊使用的情況下，可實(shí)現(xiàn)數(shù)據(jù)遠(yuǎn)距離傳輸。芯片具有自動(dòng)維持線路碼的直流平衡的功能，接收芯片還包括一個(gè)提供初始握手協(xié)議的狀態(tài)機(jī)控制器。將視頻信號(hào)成高速數(shù)字串行碼流后，最終需要在光纖中傳送。FBR5103/5103T為Agilent公司的產(chǎn)品，其集成度高，接口簡(jiǎn)單，抗電磁干擾能力強(qiáng)，使用十分方便。HFBR5103主要由發(fā)射和接收兩部分組成。這些LED封裝在發(fā)射部分的光組件中，由傳統(tǒng)的硅集成電路（IC）驅(qū)動(dòng)，這個(gè)驅(qū)動(dòng)電路包括調(diào)制電路和控制電路。PIN前置放大器耦合到一塊傳統(tǒng)的量化器IC中，量化器IC提供最后的脈沖整形，完成邏輯輸出和信號(hào)檢測(cè)功能。數(shù)據(jù)和信號(hào)檢測(cè)輸出的都是PECL信號(hào)。圖像的顯示功能主要是通過(guò)圖像采集卡和安裝在電腦上的對(duì)應(yīng)軟件來(lái)實(shí)現(xiàn)的。該靜態(tài)的IP地址由網(wǎng)絡(luò)供應(yīng)商提供。傳輸特點(diǎn)：就ADSL公網(wǎng)與有線對(duì)比來(lái)看ADSL要相對(duì)便宜的多，但ADSL的帶寬不能得到很好的保證。前端攝像機(jī)的數(shù)據(jù)和視頻信號(hào)通過(guò)光端機(jī)傳輸?shù)阶庥玫墓潭◣挼耐ǖ栏浇?，通過(guò)編碼器將數(shù)據(jù)和視頻信號(hào)轉(zhuǎn)換為以太網(wǎng)信號(hào)，并由這個(gè)固定的通道發(fā)往指監(jiān)控中心對(duì)應(yīng)的端口，并接入監(jiān)控中心的以太網(wǎng)。傳輸特點(diǎn)：帶寬穩(wěn)定，每年需要支付相應(yīng)的通信費(fèi)用；帶寬比ADSL和穩(wěn)定且靈活。另一種是類(lèi)似于專(zhuān)線的一種方式，專(zhuān)線傳輸最為經(jīng)濟(jì)的是IPStar星的專(zhuān)線，單端站不超過(guò)4M的傳輸帶寬，為雙向數(shù)據(jù)或視頻傳輸。另外，衛(wèi)星傳輸所需要的通信費(fèi)用要比其它的傳輸方式相對(duì)要多一些，每路圖像的傳輸費(fèi)用約為2萬(wàn)元的租賃費(fèi)。傳輸特點(diǎn)：信號(hào)覆蓋范圍廣，但帶寬較小，傳輸帶寬與原理與ADSL極其相似，由于其帶寬遠(yuǎn)低于ADSL，所以不能傳輸太高分辨率的視頻。另外于通信公司線跑總體帶寬的限制，在同一機(jī)站管轄的區(qū)域內(nèi)不能同時(shí)有數(shù)路圖像同時(shí)進(jìn)行傳輸，否則會(huì)造成移動(dòng)電話的通話障礙，所以在實(shí)際應(yīng)用中會(huì)受到通信公司限制。我三種技術(shù)的牌照分別發(fā)給了我國(guó)的三家不同的公司，聯(lián)通、電信和移動(dòng)。從理論上講CDMA的最高傳輸速率為150K，、CDMA2000為3M、TDCDMA為3M，就現(xiàn)在技術(shù)發(fā)展的趨勢(shì)