第5章數(shù)字視頻4-資料下載頁
【導(dǎo)讀】MPEG-2是與數(shù)字電視有關(guān)的高質(zhì)量圖象/聲音的通用編碼標(biāo)。的通用編碼方法的日益增長的需求；MPEG-2以一種計(jì)算機(jī)數(shù)據(jù)的形式，使視頻信息：。能在現(xiàn)存的和未來的網(wǎng)絡(luò)上傳輸，能在現(xiàn)存的和未來廣播信道上分發(fā)。MPEG-2是MPEG-1的超集，基本算法相同,但增加了許多。編碼，提供了scalability功能。第4部分：一致性測(cè)試(ISO/IECDIS13818-4:. 第5部分：軟件模擬(ISO/IECDTR13818-5:Software. 第6部分：數(shù)字存儲(chǔ)媒體命令和控制擴(kuò)展協(xié)議DSM－CC擴(kuò)展。第9部分:系統(tǒng)解碼器實(shí)時(shí)接口擴(kuò)展(ISO/IECIS13818-9:. 第10部分：一致性擴(kuò)展測(cè)試(ISO/IECIS13818-10:. 支持多種不同的碼率。支持低延遲編碼/解碼。支持隨機(jī)存取/頻道切換。隔行掃描電視信號(hào)的數(shù)。各種分辨率，最大可達(dá)16000x16000. 精細(xì),實(shí)現(xiàn)也越復(fù)雜;類與類之間向下兼容，任何一種高。碼的視頻圖像進(jìn)行解碼。Main沒有可分級(jí)性，支持隨機(jī)存取,使用B畫面，色度信號(hào)格式為。High1440High1440HDTV窄屏格式,最大輸出碼率為80Mbps. Simple和Main不具有可分級(jí)性;SNRScalable,SpatialScalable和High這3類都具有可
【正文】 對(duì)象的時(shí)空關(guān)系進(jìn)行描述。 ? 通過場(chǎng)景描述，內(nèi)容的創(chuàng)作者可以構(gòu)造出復(fù)雜的視頻場(chǎng)景 , 用戶則可選擇其中感興趣的對(duì)象進(jìn)行操縱處理 . 2020/11/4 32 例： MPEG4的音視場(chǎng)景 假想的 觀察者位置 視頻復(fù)合投影平面 場(chǎng)景坐標(biāo)系 用戶輸入 下載的數(shù)據(jù) /控制復(fù)合流 上載的數(shù)據(jù) /控制復(fù)合流 場(chǎng)景 人 2D背景 家具 演示 地球儀 講臺(tái) 聲音 教師 2020/11/4 33 MPEG4 基于對(duì)象的場(chǎng)景描述 場(chǎng)景由許多對(duì)象組 成 ,對(duì)象之間有一定 的時(shí)間和空間關(guān)系 2020/11/4 34 MPEG4 基于對(duì)象的場(chǎng)景描述 場(chǎng)景由許多對(duì)象組成 ,有些對(duì)象是 已編碼的，有些對(duì)象是現(xiàn)場(chǎng)采集 的，對(duì)象之間按規(guī)定的時(shí)間和空 間關(guān)系進(jìn)行集成。 2020/11/4 35 MPEG4 場(chǎng)景描述的優(yōu)點(diǎn) ? 可以集成各種對(duì)象 ，無縫地集成自然媒體 (源于麥克風(fēng)、攝象機(jī)等 )與人造媒體 (計(jì)算機(jī)生成 ) 、實(shí)時(shí)信息與存儲(chǔ)信息， AV0可以是單／雙／多聲道音頻信息、單／雙／多鏡頭 2D／3D視頻信息。 ? 提供更強(qiáng)的交互能力 ，場(chǎng)景中的對(duì)象（人、桌子、地球儀、白扳、人的聲音）以及多媒體演示聲音均作為單個(gè)對(duì)象而獨(dú)立編碼，用戶可以有選擇地與其中某 (幾 )個(gè)對(duì)象交互。 ? 具有良好的重用性 ，可重新組合音視對(duì)象 AVO (Audio Visual Object)構(gòu)造新場(chǎng)景。 2020/11/4 36 MPEG4的編碼 2020/11/4 37 MPEG4 視頻流的組成 ? Each Video Object in a Scene is Coded and Transmitted Separately VOP1編碼 MUX VOP 定義 VOP2編碼 VOP3編碼 …… 視頻輸入 MPEG4 視頻流 背景 編碼 2020/11/4 38 分割出來的前景圖 像作為一個(gè)任意形狀 的 VO進(jìn)行編碼 只在視頻序列的第 1幀 畫面時(shí)傳輸 1次 ,保存在 背景緩沖器中 , 此后僅 僅傳輸描述鏡頭運(yùn)動(dòng) 的 8個(gè)參數(shù) 任意形狀視頻對(duì)象編碼的應(yīng)用 在編碼前從一系列的 視頻畫面中把背景圖 像抽出并拼合而成 使用 8個(gè)參數(shù)，對(duì)背景 進(jìn)行仿 射變換 ，重建出 每一幀畫面的背景 2020/11/4 39 合成視頻對(duì)象的編碼 ? 人臉動(dòng)畫 ? MPEG4定義了人臉定義參數(shù)（ FDP）和人臉動(dòng)畫參數(shù)（ FAP） ,也定義了身體的模型參數(shù)和動(dòng)畫參數(shù)。在解碼器中的人臉模型能通過傳來的動(dòng)畫參數(shù)產(chǎn)生各種運(yùn)動(dòng) ,如表情、說話等。也可以通過下載人臉的模型參數(shù)由一個(gè)通用的人臉模型生成一個(gè)特定的人臉。 2020/11/4 40 2020/11/4 41 2020/11/4 42 2020/11/4 43 MPEG4的解碼 2020/11/4 44 MPEG4 視頻流的解碼 2020/11/4 45 MPEG4的場(chǎng)景解碼與交互操作 組合和展示 客戶機(jī) 服務(wù)器交互 本地交互 2020/11/4 46 用戶與媒體對(duì)象的交互 ? 在場(chǎng)景作者所允許的自由度之內(nèi) ， 用戶可以與場(chǎng)景進(jìn)行交互 。 包括： ? 改變觀察 /聆聽場(chǎng)景的位置 ， 例如在場(chǎng)景中進(jìn)行巡航（ navigation through a scene） 。 ? 把場(chǎng)景中的對(duì)象拖拉到不同的位置 。 ? 通過點(diǎn)擊指定的對(duì)象而觸發(fā)一串事件 ， 例如啟動(dòng)或者停止一個(gè)視頻流 。 ? 若多語種音軌可用 ， 可選擇所希望的語言； ? 還可以觸發(fā)更加復(fù)雜的一些行為 ， 例如場(chǎng)景中一臺(tái)虛擬電話鈴響了 ， 用戶可以拿起電話與對(duì)方進(jìn)行通話 。
鄂ICP備17016276號(hào)-1