【文章內(nèi)容簡(jiǎn)介】 多媒體平臺(tái)核心技術(shù) 視頻編解碼? RIVC 介紹互動(dòng)多媒體平臺(tái)采用 RIVC 視頻編解碼技術(shù)。RIVC 基于 MPEG4 視頻編碼標(biāo)準(zhǔn)，包含了 的核心設(shè)計(jì)。RIVC 提供不同的視頻標(biāo)準(zhǔn)源格式、碼率、幀頻下矩形圖像的有效編碼，同時(shí)也支持基于內(nèi)容的圖像編碼。RIVC 采納了基于對(duì)象(ObjectBased) 的編碼、基于模型(Modelbased)的編碼等第二代編碼技術(shù)。網(wǎng)通互動(dòng)多媒體平臺(tái)商業(yè)計(jì)劃書Page 15? RIVC 編解碼器特點(diǎn)? 基于先進(jìn)的 MPEG4/ 的編解碼技術(shù)進(jìn)行優(yōu)化，提供了單重固定碼流壓縮，單重質(zhì)量模式動(dòng)態(tài)碼流壓縮，動(dòng)態(tài)關(guān)鍵幀距等多項(xiàng)關(guān)鍵技術(shù)。幀率具有很大的調(diào)整空間，適應(yīng)各種不同場(chǎng)合的應(yīng)用。? 壓縮率高： RIVC 比 算法具有更高的壓縮率和圖像質(zhì)量。? 對(duì)不同帶寬的適應(yīng)能力：不僅可以應(yīng)用在窄帶上（帶寬小于 64Kbps） ，還可以靈活的擴(kuò)展到高質(zhì)量、高清晰度的寬帶上，滿足不同用戶的需求。? 擁有自主的知識(shí)產(chǎn)權(quán)：RIVC 編碼器屬于自主研發(fā)的，具有自己的知識(shí)產(chǎn)權(quán)，且技術(shù)含量在國(guó)內(nèi)外一直處于領(lǐng)先地位。? 視頻處理技術(shù)? 視頻前處理：采用高效率的 MMX 指令對(duì)采集后的數(shù)據(jù)進(jìn)行濾波處理，降低了編碼后的碼流，使圖像更加清晰。? 視頻后處理：采用高效率的 MMX 指令對(duì)解碼后的視頻進(jìn)行降噪處理，保證解碼后圖像的平滑、流暢、無(wú)馬賽克、無(wú)方塊，具有很高的質(zhì)感。? DIRECTSHOW 采集：使用 DIRECTSHOW 架構(gòu)進(jìn)行視頻采集，提供高效可靠的應(yīng)用環(huán)境。目前市場(chǎng)上大致有兩種捕捉：VFW (Video for Windows)和 WDM (Windows Driver Model)。DirectShow 合理使WDM 與 VFW 兼容性，適用于當(dāng)前所有新硬件設(shè)備，提供好的適用性和穩(wěn)定性。? DIRECTDRAW 顯示：使用 DIRECTDRAW 技術(shù)進(jìn)行視頻顯示，使圖像連續(xù)不跳幀、無(wú)馬賽克，保障高效流暢的視頻效果。? MMX 優(yōu)化處理：使用優(yōu)化的 MMX 指令，提高了系統(tǒng)的效率和可靠性，MMX 快速運(yùn)算，讓整個(gè)系統(tǒng)在處理大量視頻數(shù)據(jù)時(shí)，得到了質(zhì)和量的提高。? 視頻傳輸技術(shù)? 采用了實(shí)時(shí)傳輸協(xié)議（RTP）來(lái)傳輸視頻實(shí)時(shí)數(shù)據(jù)，最大限度的減少了因?yàn)榫W(wǎng)絡(luò)的不穩(wěn)定而產(chǎn)生的延時(shí)。? 消抖動(dòng)算法可以處理數(shù)據(jù)包的抖動(dòng)和錯(cuò)序問題。網(wǎng)通互動(dòng)多媒體平臺(tái)商業(yè)計(jì)劃書Page 16? 通過專門的丟包單次重傳恢復(fù)機(jī)制，可以盡可能的恢復(fù)因?yàn)榫W(wǎng)絡(luò)擁塞造成的圖象質(zhì)量下降的問題。 音頻技術(shù)? 音頻編碼器采用多種音頻編碼器，支持常用的標(biāo)準(zhǔn)音頻編碼器。 其特點(diǎn)如下：? 高采樣頻率：播放上使用 16KHZ 的采樣頻率，比其他視頻會(huì)議商所用的8000HZ，高了一倍，音質(zhì)上有質(zhì)的提升。? 多碼流：支持從 – 64Kpbs 的一系列碼流，針對(duì)不同的帶寬，不同的應(yīng)用，使用相應(yīng)的編碼器。? 高壓縮比：在國(guó)際標(biāo)準(zhǔn)中，使用 MOS（Mean Opinion Score）方法來(lái)評(píng)價(jià)語(yǔ)音壓縮后的質(zhì)量。電話語(yǔ)音質(zhì)量的標(biāo)準(zhǔn)定為 4 分。MOS 值能達(dá)到 4 分，說(shuō)明其語(yǔ)音質(zhì)量和電話質(zhì)量等同。主流的 24K 編碼器， MOS 值是 。不論是在語(yǔ)音，音樂等其編碼后的音質(zhì)都是非常優(yōu)秀的。在 24K 的帶寬上，提供相當(dāng)于 CD 音質(zhì)的音頻。主流的 AMRwb 是基于 3GPP 的標(biāo)準(zhǔn)， MOS 值從 。支持從 的碼流，主要用于低碼流下的語(yǔ)音編碼，在很低的碼流上，提供高質(zhì)量的音質(zhì)。? 音頻前后處理技術(shù)前處理技術(shù)：? 音頻降噪：多達(dá)四級(jí)的音頻降噪技術(shù)，可以應(yīng)付各種的不同的噪聲環(huán)境。在多次于 Skype 的比較中，特別是比較復(fù)雜（如有回音）的環(huán)境中，采用音頻降噪技術(shù)的噪聲明顯的要小于 Skype。? 靜音檢測(cè) ：準(zhǔn)確的分析當(dāng)前的說(shuō)話情況，保持流暢的通話效果，同時(shí)節(jié)省網(wǎng)絡(luò)帶寬。? 回音消除 ：能有效的消除/降低 98%以上環(huán)境中的回音，回音消除的整體效果已經(jīng)達(dá)到國(guó)際領(lǐng)先水平。? 前向糾錯(cuò) ：在 RTP 的基礎(chǔ)上，使用了前向糾錯(cuò)，可以應(yīng)付網(wǎng)絡(luò)的丟包，抖動(dòng)，延時(shí)等各種情況。我們的前向糾錯(cuò)提供了更小的延時(shí)，和更強(qiáng)丟包屏蔽，讓聲音更流暢，溝通更快捷。? 音量自動(dòng)調(diào)節(jié) ：根據(jù)聲音大小，自動(dòng)調(diào)整本地的采集音量，讓對(duì)方聽得更清楚，網(wǎng)通互動(dòng)多媒體平臺(tái)商業(yè)計(jì)劃書Page 17不用費(fèi)心去調(diào)音量的大小，讓溝通更為舒適。? 自動(dòng)增益 ：與音量自動(dòng)調(diào)節(jié)配合使用，當(dāng)采集音量已經(jīng)最大時(shí)，對(duì)方還是聽不清楚，或是說(shuō)話者離麥的位置忽遠(yuǎn)忽近時(shí)能自動(dòng)調(diào)節(jié)音量的大小。 后處理技術(shù)：? 多路混音：采用目前最先進(jìn)的混音技術(shù)，可以同時(shí)傳輸 16 個(gè)發(fā)言的會(huì)議成員的聲音，使會(huì)議更加流暢自然地進(jìn)行。? 舒適噪聲 ：當(dāng)對(duì)方是靜音時(shí)，適當(dāng)?shù)募尤胍恍┰肼?，解決沒有說(shuō)話時(shí)，聽起來(lái)太安靜的不適。 P2P 流媒體技術(shù)? P2P 流媒體技術(shù)介紹目前互聯(lián)網(wǎng)上基于服務(wù)器/客戶機(jī)模型的流媒體服務(wù)還遠(yuǎn)沒有達(dá)到可以與傳統(tǒng)的WWW、FTP 等應(yīng)用相比擬的服務(wù)質(zhì)量，尤其在可擴(kuò)展性（ Scalability）和容錯(cuò)性(Faulttolerance）等方面還遠(yuǎn)遠(yuǎn)不能滿足應(yīng)用的需求。P2P 技術(shù)的迅猛發(fā)展，給網(wǎng)絡(luò)多媒體傳輸提供了新的技術(shù)方向，借助于 P2P 網(wǎng)絡(luò)技術(shù)的多媒體傳輸模式也因此應(yīng)孕而生。Radfort P2P 四點(diǎn)會(huì)議系統(tǒng)，就是應(yīng)用 P2P 媒體傳輸技術(shù)，實(shí)現(xiàn)在沒有中央媒體中轉(zhuǎn)的四點(diǎn)音視頻會(huì)議。Radfort 互動(dòng)直播系統(tǒng)也是基于 P2P 流媒體技術(shù)，完全突破了服務(wù)器帶寬和觀看人數(shù)的限制，讓用戶時(shí)刻享受流暢、清晰穩(wěn)定的視頻服務(wù)，P2P 流媒體播放器的理念是：觀看的人越多，就越流暢。? 系統(tǒng)由 2 大塊構(gòu)成? P2P 網(wǎng)絡(luò)P2P(PeertoPeer)網(wǎng)絡(luò)結(jié)構(gòu)，與目前的 C/S(客戶機(jī)/ 服務(wù)器 )結(jié)構(gòu)有本質(zhì)區(qū)別：整個(gè)網(wǎng)絡(luò)中不存在中央服務(wù)器。每一個(gè)用戶都具有信息消費(fèi)，信息提供，信息通訊的職責(zé)，每個(gè)用戶在使用的同時(shí)都提供自身的通訊能力和積累信息為其他用戶服務(wù)。? P2P 會(huì)議系統(tǒng)P2P 會(huì)議系統(tǒng)是根據(jù) P2P 網(wǎng)絡(luò)的全新構(gòu)架定制的一系列網(wǎng)絡(luò)會(huì)議邏輯，使得會(huì)議系統(tǒng)在新型的 P2P 網(wǎng)絡(luò)結(jié)構(gòu)上能夠良好的運(yùn)行。? 系統(tǒng)的特點(diǎn)? 系統(tǒng)用戶容量大網(wǎng)通互動(dòng)多媒體平臺(tái)商業(yè)計(jì)劃書Page 18基于 P2P 網(wǎng)絡(luò)模型的會(huì)議系統(tǒng)，將改變以前 C/S 模式的用戶越多，系統(tǒng)服務(wù)器負(fù)擔(dān)越大的情況。采用基于 P2P 網(wǎng)絡(luò)模型越多的用戶將能夠提供給我們?cè)蕉嗟木W(wǎng)絡(luò)通信需求，理論上用戶越多，我們的會(huì)議系統(tǒng)運(yùn)行將越流暢，可以使用的資源越多。? 系統(tǒng)可擴(kuò)展性強(qiáng)系統(tǒng)間耦合性低，擴(kuò)展靈活。能夠方便的對(duì)系統(tǒng)各個(gè)部件進(jìn)行更新。? 低成本 運(yùn)營(yíng)成本低我們只需要使用 P2P 網(wǎng)絡(luò)來(lái)進(jìn)行媒體通訊，而不用搭建專門的 MCU 來(lái)進(jìn)行媒體通訊的輔助。拋棄了沉重的媒體服務(wù)器負(fù)擔(dān)，將大大降低系統(tǒng)的運(yùn)營(yíng)成本。? 高健壯性使用加密技術(shù)，提供高安全性。 QoS 技術(shù)? 服務(wù)質(zhì)量 QoS 介紹網(wǎng)絡(luò)服務(wù)質(zhì)量（Quality of Service，簡(jiǎn)稱 QoS）是網(wǎng)絡(luò)與用戶之間以及網(wǎng)絡(luò)上互相通信的用戶之間關(guān)于信息傳輸質(zhì)量的約定。目前基于 Inter 網(wǎng)絡(luò)的互動(dòng)多媒體視頻會(huì)議系統(tǒng)越來(lái)越為廣大的消費(fèi)者所接受，在現(xiàn)有 Inter 網(wǎng)絡(luò)傳送語(yǔ)音、視頻和數(shù)據(jù)，實(shí)現(xiàn)視頻直播、點(diǎn)播、互動(dòng)相互融合。但融合通信會(huì)引發(fā)網(wǎng)絡(luò)性能問題，不但要求互動(dòng)多媒體視頻會(huì)議系統(tǒng)能提供多種服務(wù)，而要保證有良好的音視頻質(zhì)量。Inter 網(wǎng)絡(luò)的互動(dòng)多媒體視頻會(huì)議系統(tǒng)如何提供好的 QoS 支持，已成為業(yè)界關(guān)注的焦點(diǎn)。? 智能檢測(cè)網(wǎng)絡(luò)傳輸層動(dòng)態(tài)實(shí)時(shí)的監(jiān)控網(wǎng)絡(luò)傳輸質(zhì)量,并統(tǒng)計(jì)存儲(chǔ)相關(guān)數(shù)據(jù),供數(shù)據(jù)傳輸層使用。? 智能修包（實(shí)時(shí)丟包補(bǔ)償）在網(wǎng)絡(luò)傳輸質(zhì)量下降的情況下,系統(tǒng)自動(dòng)保護(hù)重要的數(shù)據(jù)包,使其盡可能不被破壞,如果出現(xiàn)錯(cuò)誤,并自動(dòng)進(jìn)行快速修復(fù)。? 智能丟包,音頻優(yōu)先在帶寬不足的情況自動(dòng)丟棄非關(guān)鍵幀,甚至停發(fā)視頻,保證音頻能順利通過。? 智能路徑選擇在 QOS 模塊加入到多服務(wù)器級(jí)聯(lián)傳輸模式,系統(tǒng)會(huì)選擇最佳傳輸路徑傳輸數(shù)據(jù),并在質(zhì)量下降的時(shí)候自動(dòng)切換鏈路。網(wǎng)通互動(dòng)多媒體平臺(tái)商業(yè)計(jì)劃書Page 19 硬件處理技術(shù)NSP（Native Signal Processing）指的是主體信號(hào)處理技術(shù)，不同于傳統(tǒng)的 DSP 技術(shù)，是當(dāng)今最新的多媒體處理技術(shù)。NSP 提供一個(gè)統(tǒng)一的多媒體處理平臺(tái)，利用其強(qiáng)大的并行處理能力和靈活的加卸載平臺(tái)思想，使得以前需要多個(gè) DSP 芯片才能夠?qū)崿F(xiàn)的功能，只需要單一平臺(tái)就可以實(shí)現(xiàn)。這個(gè)平臺(tái)既有 DSP 硬件的處理速度，也有軟件處理的靈活。公司采用 MAPCA 的應(yīng)用、開發(fā)，并成功的完成 +/Mpeg4/ 和 等視音頻編碼的移植和優(yōu)化，完成 VXWORKS 操作系統(tǒng)的片上移植開發(fā)工作，完成 MAPCA 在 SP3000 系列產(chǎn)品的商業(yè)應(yīng)用。公司成功導(dǎo)入視頻降噪的硬件處理技術(shù)、自主掌握了嵌入式 XP、嵌入式 Linux、VxWorks 等多種嵌入式系統(tǒng)的開發(fā)技術(shù)，為后續(xù)產(chǎn)品研發(fā)提供了可靠的技術(shù)保障。 關(guān)鍵配件技術(shù)目前視頻多媒體中關(guān)鍵配件占了成本的一部分，某是國(guó)內(nèi)廠家中唯一自主進(jìn)行關(guān)鍵配件研發(fā)的公司。? 視頻降噪處理芯片視頻前處理過程中，視頻前端濾波處理至關(guān)重要，是提高圖像信噪比、降低輸出碼流的重要手段。已經(jīng)研發(fā)成功前端濾波降噪模塊，模塊使用核心 DSP 芯片職能數(shù)字濾波技術(shù)，可以有效地提高 +編碼器情況下后端輸出的圖像信噪比 2~5dB，并且可以降低15~40%的輸出碼流。? 攝像頭視頻會(huì)議專用的 PTZ 攝像頭，包含了高清晰的 CCD 采集單元、高倍數(shù)的光學(xué)變焦鏡頭、VISCA 控制標(biāo)準(zhǔn)的遙控云臺(tái)和特殊功能處理的 MCU 核心控制芯片。目前國(guó)內(nèi)外市場(chǎng)上主流的 PTZ 攝像頭只有 SONY 和 Canon 兩家可供選擇，基本處于行業(yè)壟斷的狀態(tài)造就了高昂的供貨價(jià)格，是專業(yè)視頻會(huì)議硬件終端價(jià)格高高在上的一個(gè)主要原因。目前某已經(jīng)通過技術(shù)整合、資源共享的方式推動(dòng) PTZ 攝像頭國(guó)產(chǎn)化的進(jìn)程，現(xiàn)已獲得重要進(jìn)展，解決了部分核心技術(shù)問題。? 話筒視頻會(huì)議應(yīng)用中全向話筒是一種重點(diǎn)推薦的外設(shè)，可以很大程度上的提高會(huì)議語(yǔ)音應(yīng)用的效果，但目前所使用的專業(yè)會(huì)議全向話筒基本都是用美國(guó) AudioTech 的產(chǎn)品，價(jià)格也相當(dāng)?shù)母?3000 元)。某已經(jīng)成功自主生產(chǎn)出價(jià)格 400 元左右的全向話筒。網(wǎng)通互動(dòng)多媒體平臺(tái)商業(yè)計(jì)劃書Page 20第四章 互動(dòng)多媒體平臺(tái)主要業(yè)務(wù) SM 企業(yè)視訊 業(yè)務(wù)描述Radfort 互動(dòng)多媒體平臺(tái)為中小型企業(yè)提供企業(yè)視訊功能，實(shí)現(xiàn)了集視頻交互、音頻交互、屏幕廣播、遠(yuǎn)程控制、文字交流、電子白板、圖像處理、文檔共享、文件傳輸?shù)榷囗?xiàng)功能于一體的綜合多媒體遠(yuǎn)程視訊溝通。企業(yè)用戶無(wú)需投入高昂的硬件成本，只要利用普通的 PC 機(jī)、標(biāo)準(zhǔn)的視頻采集設(shè)備、耳機(jī)和麥克風(fēng)，就能夠?qū)崿F(xiàn)高質(zhì)量、高可靠性的遠(yuǎn)程會(huì)議功能，同時(shí)也有效地節(jié)約時(shí)間和經(jīng)費(fèi)，提高企業(yè)的工作效率?？蓮V泛地應(yīng)用于政府、企業(yè)、教育、醫(yī)療、金融等各種行業(yè)和領(lǐng)域。視頻會(huì)議圖像清晰、流暢；語(yǔ)音清晰、連續(xù)；數(shù)據(jù)會(huì)議功能強(qiáng)大。業(yè)務(wù)功能：? 遠(yuǎn)程會(huì)議功能：互聯(lián)網(wǎng)用戶只需要通過硬件終端或者采用具備 USB 攝像頭與麥克風(fēng)的 PC 機(jī)，使用視頻會(huì)議客戶端軟件，就可與遠(yuǎn)程用戶召開音視頻遠(yuǎn)程會(huì)議。? 音視頻功能：實(shí)時(shí)語(yǔ)音與視頻傳送，實(shí)現(xiàn)遠(yuǎn)程用戶之間面對(duì)面的音視頻交流。? 數(shù)據(jù)功能：包括文字交流、發(fā)言/控制權(quán)限的申請(qǐng)和釋放、文檔共享、電子白板、網(wǎng)通互動(dòng)多媒體平臺(tái)商業(yè)計(jì)劃書Page 21協(xié)同瀏覽、文件發(fā)送/接受。? 會(huì)議管理功能：包括企業(yè)視訊會(huì)議控制模式、用戶發(fā)言、主持人授權(quán)、顯示模式、 廣播音視頻、屏幕廣播、會(huì)議錄制、會(huì)議室鎖定/解鎖、請(qǐng)出會(huì)議、遠(yuǎn)程控制調(diào)節(jié)、攝像頭遙控。產(chǎn)品特點(diǎn)：? 低帶寬，高清晰：采用行業(yè)領(lǐng)先的 MPEGH264 標(biāo)準(zhǔn)的視頻壓縮技術(shù)和、 音頻編解碼技術(shù)，圖像清晰、流暢；語(yǔ)音清晰、連續(xù)，延時(shí)小。根據(jù)不同網(wǎng)絡(luò)環(huán)境需求，適應(yīng)從 56K—512K 寬帶的各種網(wǎng)絡(luò)環(huán)境，提供 QCIF、CIF、D1 等不同圖形編碼格式。? 多接入方式：能夠適應(yīng) ATM、ADSL、ISDN、VPN 等多種網(wǎng)絡(luò)環(huán)境。 市場(chǎng)價(jià)值互動(dòng)多媒體視訊市場(chǎng)主要有四類：各級(jí)政府機(jī)關(guān)；大中型企業(yè)視訊；中小型企業(yè)；家庭、個(gè)人視訊市場(chǎng)。CTI 數(shù)據(jù)表明，中國(guó)有分支機(jī)構(gòu)的大型企業(yè) 4 萬(wàn)家（含香港 1 萬(wàn)家） ，有分支機(jī)構(gòu)較多（10 個(gè)分支機(jī)構(gòu)以上）的中小型企業(yè) 50 萬(wàn)家，以及有遠(yuǎn)程會(huì)議、溝通需求的微型企業(yè)3000 萬(wàn)家，他們普遍面對(duì)眾多會(huì)議困擾、差旅費(fèi)用高昂、協(xié)同困難等問題，對(duì)多方通訊的需求旺盛，整個(gè)市場(chǎng)處于待激活狀態(tài)。家庭、個(gè)人通訊運(yùn)營(yíng)市場(chǎng)方面，中國(guó)所有的寬帶用戶均可能成為我們的潛在用戶，4 點(diǎn)以內(nèi)的免費(fèi)通訊服務(wù)和由此聚集而來(lái)的用戶將通過VoIP、互動(dòng)娛樂等其他業(yè)務(wù)產(chǎn)生受益。 競(jìng)爭(zhēng)分析目前市場(chǎng)上絕大多數(shù)企業(yè)視訊產(chǎn)品均是基于專線網(wǎng)絡(luò)環(huán)境，基于 Inter 網(wǎng)絡(luò)環(huán)境企業(yè)視訊產(chǎn)品很少。中國(guó) 99％的企業(yè)都無(wú)專線網(wǎng)絡(luò)，但他們擁有 ADSL 等普通寬帶網(wǎng)絡(luò)。少數(shù)號(hào)稱適合企業(yè)通訊運(yùn)營(yíng)的產(chǎn)品互聯(lián)網(wǎng)視頻、音頻效果差，通訊效果不好，用戶感覺難以滿足其基本通訊需求。沒有任何產(chǎn)品是針對(duì)兩點(diǎn)視頻/音頻、多方通訊的視音頻一攬子整合解決方案，企業(yè)不得不使用多套獨(dú)立產(chǎn)品來(lái)解決問題，絕大多數(shù)企業(yè)因?yàn)槭褂谜系K和使用習(xí)慣以至于干脆就不用。某創(chuàng)造的互動(dòng)多媒體平臺(tái)，應(yīng)用于 Inter 網(wǎng)絡(luò)環(huán)境，滿足用戶端 ADSL、LAN 普通寬帶網(wǎng)絡(luò)，視頻、音頻、通訊效果好，能滿足兩點(diǎn)視頻/音頻、多方通訊的視音頻一攬子整合解決方