分布式媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理一-文庫吧
2025-04-24 18:53 本頁面
【正文】 念 多媒體同步問題的范疇 分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 15 ?時(shí)間關(guān)系 不僅指基本的反映媒體對(duì)象之間簡單的出現(xiàn)順序的“ 時(shí)序關(guān)系 ”，還應(yīng)包括由活動(dòng)的媒體對(duì)象間通過消息傳遞或狀態(tài)訪問產(chǎn)生進(jìn)一步動(dòng)作的“ 制約關(guān)系 ”，并考慮在多媒體演示過程中，“ 用戶交互 ”對(duì)媒體對(duì)象活動(dòng)的影響 。 多媒體同步的基本概念 多媒體同步問題的范疇 分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 16 多媒體同步的基本概念 對(duì)象內(nèi)和對(duì)象間同步： 對(duì)象內(nèi)同步 40ms一個(gè)跳動(dòng)的小球視頻序列中幀之間的對(duì)象內(nèi)同步 分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 17 多媒體同步的基本概念 對(duì)象內(nèi)和對(duì)象間同步： 對(duì)象內(nèi)同步 AVS文件結(jié)構(gòu)示意圖 Sy s t e m H e a d e r [ V D V I ] 文件標(biāo)志Su b Sy s t e m H e a d e r [ A V SS ] 子系統(tǒng)標(biāo)志f r a m e 0 o f f s e tf r a m e 1 o f f s e tf r a m e 2 o f f s e tf r a m e 3 o f f s e tf r a m e n 1 o f f s e t流描述n 為文件中幀的個(gè)數(shù)s t r e a m 0 h d rs t r e a m 1 h d rs t r e a m k 1 h d rk 為流的個(gè)數(shù)幀目錄 記錄個(gè)文件幀的個(gè)數(shù)s u b s t r e a m 0 h d rs u b s t r e a m 1 h d rs u b s t r e a m m 1 h d rf r a m e 0f r a m e 1f r a m e 2f r a m e 3f r a m e n 1n 為文件中幀的個(gè)數(shù)文件幀其他描述信息f r a m e h e a d e rs t r e a m 0 f r a m es t r e a m k 1 f r a m em 為子流個(gè)數(shù)k 為流的個(gè)數(shù)b i t m a p h e a d e rc o m p r e s s e d /u n c o m p r e s s e dd a t a若為視頻流幀描述v i d e o 信息[ 文件結(jié)構(gòu)，A V 信息主要參數(shù)]分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 18 多媒體同步的基本概念 ? 對(duì)象間同步 指媒體對(duì)象之間的同步 ?同步定義方法 對(duì)象內(nèi)和對(duì)象間同步 Au d i o 1Vi d e oP1 P2 P3An i m a t i o nAu d i o 2t分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 19 多媒體同步的基本概念 ? 在 現(xiàn)場同步 （ live synchronization） 中，同步的目的是準(zhǔn)確再現(xiàn)一個(gè)演示中在采集過程就存在的時(shí)間關(guān)系。例如，在兩個(gè)人進(jìn)行討論的一個(gè)計(jì)算機(jī)會(huì)議中，現(xiàn)場同步包括音頻 /視頻的唇同步，以及屏幕顯示中鼠標(biāo)指針的移動(dòng)與講話的同步。在目的端要同樣再現(xiàn)源端的信號(hào)關(guān)系。 ? 其根本要求是根據(jù)在媒體對(duì)象的采集階段就存在的時(shí)間關(guān)系顯示數(shù)據(jù)。 現(xiàn)場同步和合成同步 分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 20 多媒體同步的基本概念 ? 在 合成同步 （ synthetic synchronization） 中，每個(gè)對(duì)象數(shù)據(jù)都是獨(dú)立生成的，時(shí)間關(guān)系是人工定義的 。 ? 合成同步通常用在演示和用來生成新的復(fù)合多媒體對(duì)象的系統(tǒng)中，它強(qiáng)調(diào)的是支持媒體對(duì)象間靈活的同步關(guān)系。 ? 合成同步有兩個(gè)階段：定義階段要有合適的方法充分定義對(duì)象間的時(shí)間關(guān)系，演示階段是在運(yùn)行時(shí)保證以同步的模式顯示數(shù)據(jù)。 現(xiàn)場同步和合成同步 分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 21 多媒體同步的基本概念 同步的服務(wù)質(zhì)量 一個(gè)媒體對(duì)象內(nèi)同步的一些 QoS參數(shù) 媒體 圖象 視頻 音頻 QoS 顏色深度 顏色深度 線性或邏輯采樣 分辯率 分辯率 采樣大小 幀率 采樣率 抖動(dòng) 抖動(dòng) 錯(cuò)誤率 錯(cuò)誤率 分布式多媒體應(yīng)用系統(tǒng)設(shè)計(jì)原理 22 多媒體同步的基本概念 同步的服務(wù)質(zhì)量 媒體 模式，應(yīng)用 QoS 視頻 動(dòng)畫 內(nèi)容相關(guān) +/120ms 音頻 唇同步；特指人講話的場景中音頻視頻的同步， QoS參數(shù)與講話人顯示的身體部位相關(guān)，頭部像要比全身像的參數(shù)要求高。 +/80ms 圖象 相覆蓋；該模式下圖象是視頻內(nèi)容的附加描述，兩者的同步顯示對(duì)于觀眾正確理解演示內(nèi)容很是重要。 +/240ms 不覆蓋；該模式下兩類媒體在不同的窗口顯示，觀眾的視線在兩個(gè)窗口間切換，一般在圖象上的停留時(shí)間為 1秒，因此保持 +/500ms的偏差余量對(duì)此類應(yīng)用是足夠的。 +/500ms 文本 相覆蓋；（應(yīng)用模式同圖象） +/240ms 不覆蓋；（應(yīng)用模式同圖象） +/500ms 音頻 動(dòng)畫 事件相關(guān)；例如，演示舞蹈中舞步的動(dòng)畫
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1