09-多媒體同步技術(shù)-在線瀏覽
2025-03-17 22:14本頁面
【正文】 置 兩種 。 每個(gè)對象位置 Pi指定一個(gè)時(shí)間間隔 , 一個(gè)時(shí)間間隔與其對應(yīng)的 SIU的時(shí)間間隔相等 , 由映射函數(shù) Z(Pi )保持的 SIU的地址可以是一個(gè)緩沖器指針 。 Playout: 在媒體輸出設(shè)備上播放相關(guān)的同步單元 。 Transmit: 向指定的虛電路通道發(fā)送相關(guān)的同步單元。Action. Resource Setup: 建立虛電路信道 、 按用戶設(shè)置的QoS參數(shù)的協(xié)商信道屬性 、 分配接收端緩沖器 、 預(yù)備輸出設(shè)備等 。 39 (1) 中斷同步 (2) 受限中斷同步 流內(nèi)同步機(jī)制 (a) 中斷同步； (b) 受限中斷同步 1） 流內(nèi)同步 40 對于流間同步 , XOCPN模型也支持兩種同步機(jī)制 : 中斷和非中斷 。 （ ２ ） 將在 Nxocpn中的每一個(gè) IPP點(diǎn)收集有關(guān)流間的同步狀態(tài)信息 , 然后根據(jù)所收集的同步狀態(tài)信息進(jìn)行某些校正動(dòng)作 , 這些校正動(dòng)作分成兩種 : 2） 41 流間同步機(jī)制 42 一個(gè)電視新聞廣播時(shí)間線的例子 節(jié)目片頭 引導(dǎo)音樂 音樂漸隱 播音員念第一條新聞 播音員全景 播音員上部照片 圖形 A B C D E F 視頻 音樂 語音 43 電視新聞廣播的 XOCPN 44 3. 基于同步標(biāo)記的描述法 ? 在數(shù)據(jù)生成過程中在數(shù)據(jù)流中加入同步標(biāo)記的方法。 ? 邏輯標(biāo)記：如相對數(shù)據(jù)量和相對時(shí)間。 ? 將各個(gè)媒體流映射到一個(gè)邏輯時(shí)間軸上 , 賦予每個(gè)媒體單元一個(gè)時(shí)戳 (Timestamp), 以此來標(biāo)識(shí)媒體單元相對于邏輯時(shí)間軸起始點(diǎn)的時(shí)域位置。 ? 在媒體表現(xiàn)過程中 , 具有相同時(shí)戳的媒體單元同步播放。V : RTP協(xié)議的版本號 , 占 2位 。 如果 P=1, 則在該報(bào)文的尾部將填充一個(gè)或多個(gè)額外的八位組 。X : 擴(kuò)展標(biāo)志 ， 占 1位 。 對于視頻 , 標(biāo)記一幀的結(jié)束 。 例如 , GSM音頻 、 JPEM視頻等 。序列號 : 占 16位 , 用于標(biāo)識(shí)發(fā)送者所發(fā)送的 RTP報(bào)文的序列號 。 接收者通過序列號來檢測報(bào)文丟失情況 , 重新排序報(bào)文 , 恢復(fù)數(shù)據(jù) 。時(shí)戳 (Timestamp): 占 32位 , 時(shí)戳反映了該 RTP報(bào)文的第一個(gè)八位組的采樣時(shí)刻 。 該標(biāo)識(shí)符是隨機(jī)選擇的 , 參加同一視頻會(huì)議的兩個(gè)同步信源不能有相同的 SSRC。特約信源 (CSRC)標(biāo)識(shí)符 : 每個(gè) CSRC標(biāo)識(shí)符占 32位 , 可以有0～ 15個(gè) 。 49 ? 設(shè)備驅(qū)動(dòng)法： ? 連接驅(qū)動(dòng)法： 典型的時(shí)戳遞進(jìn)策略 50 (1) 設(shè)備驅(qū)動(dòng)法 ? 源于主設(shè)備的媒體單元的時(shí)戳在主設(shè)備時(shí)鐘控制下遞進(jìn)； ? 源于從設(shè)備的媒體單元的時(shí)戳的遞進(jìn)要經(jīng)過調(diào)節(jié)過程的處理 , 使從設(shè)備媒體單元與同時(shí)生成的主設(shè)備媒體單元具有相同的時(shí)戳。例如 , 聲音媒體和圖像媒體中 , 通常選擇聲音頻媒體源作為主設(shè)備 , 因?yàn)槁曇裘襟w的時(shí)間誤差易被人們的聽覺感受 。 51 (2) 連接驅(qū)動(dòng)法 ? 在分布式網(wǎng)絡(luò)環(huán)境中 , 媒體單元時(shí)戳遞進(jìn)率取決于某一網(wǎng)絡(luò)連接的數(shù)據(jù)傳輸率。 2．同步的類型： ? 用戶級同步、媒體間同步、媒體內(nèi)同步 3．多媒體數(shù)據(jù)的組成： ? 成分?jǐn)?shù)據(jù)、同步數(shù)據(jù)（同步描述數(shù)據(jù)、同步容限）、邏輯數(shù)據(jù)單元（ LDU）。()。 ? 內(nèi)容： ? 分布式多媒體系統(tǒng)中的同步 ? 連續(xù)媒體內(nèi)部的同步 ? 媒體流之間的同步 多媒體同步控制機(jī)制 55 多路復(fù)用同步技術(shù) ? 將多個(gè)媒體流的數(shù)據(jù)復(fù)用到一個(gè)數(shù)據(jù)流中，從而使他們在傳輸中自然保持媒體間的同步關(guān)系。 ② 輔助通道傳送法 ? 使用附加邏輯通道專門傳送同步規(guī)范文件 ③ 插入同步標(biāo)記法 ? 將同步規(guī)范與成分?jǐn)?shù)據(jù)復(fù)接在一起使用一個(gè)通道傳送 59 3. 影響媒體同步的因素 1. 延時(shí)偏移 ? 媒體間信道不同產(chǎn)生不同延時(shí) 2. 延時(shí)抖動(dòng) ? 傳輸過程中的延時(shí)偏差 ? 最大延時(shí)與最小延時(shí)之差 3. 時(shí)鐘漂移 ? 端系統(tǒng)之間的時(shí)鐘頻率變化 ? 一段時(shí)間間隔內(nèi)的平均抖動(dòng) 4. 數(shù)據(jù)丟失 60 傳輸延時(shí) 抖動(dòng)對多媒體同步的破壞 服務(wù)器 用戶 音頻數(shù)據(jù) 視頻數(shù)據(jù) 網(wǎng)絡(luò) 61 時(shí)鐘偏差對同步的影響 ? 信源和信宿之間時(shí)鐘存在偏差，經(jīng)過一段時(shí)間后，接收端數(shù)據(jù)不足，破壞連續(xù)媒體播放的連續(xù)性 ? 例： ? 時(shí)鐘偏差 103秒， 90分鐘后，偏差 ，播放質(zhì)量無法保證。 62 ? 網(wǎng)絡(luò)時(shí)鐘同步協(xié)議 ? Inter的網(wǎng)絡(luò)時(shí)鐘協(xié)議 NTP（ Network Time Protocol），中央時(shí)間服務(wù)器維護(hù)一個(gè)高精度和高穩(wěn)定度的時(shí)鐘，時(shí)間服務(wù)器向各站點(diǎn)周期性廣播定時(shí)信號，各站點(diǎn)以此為基準(zhǔn)調(diào)整本地時(shí)鐘 ? 各站點(diǎn)同步時(shí)鐘的精度保持在毫秒級 63 多級同步機(jī)制 ? 在分布式多媒體系統(tǒng)中，同步通常是分多步完成的，涉及到系統(tǒng)的各個(gè)部分。 服務(wù)器 用戶 LDU 網(wǎng)絡(luò) 65 ? 處理方法： ? 接收端設(shè)置緩存，延時(shí)抖動(dòng)進(jìn)行過濾 ? 技術(shù)： ? ? 基于緩存數(shù)據(jù)量控制的同步方法 信源 緩存器 播放器 (解碼器 ) 傳輸線路 66 1. ? 限定播放延遲時(shí)間 ? 主要問題？ —— 播放延遲時(shí)間 —— 緩存器如何設(shè)計(jì) 信源 緩存器 播放器 (解碼器 ) 傳輸線路 r 67 ? 設(shè)任意 LDU： ? 發(fā)送時(shí)刻為 t(i) ? 到達(dá)時(shí)刻為 a(i) ? 播放時(shí)刻為 p(i) ? 傳輸時(shí)延為 d(i) ? 最大延時(shí) dmax，最小延時(shí) dmin ? 播放速度 為 r ? 每秒傳送的 LDU個(gè)數(shù) 68 1 2 i 1 2 i dmin dmax 1 2 i T 實(shí)時(shí)數(shù)據(jù)的發(fā)送、接收和播放時(shí)間關(guān)系 t(i) a(i) p(i) T=? 69 播放延遲時(shí)間 )()( )( )()()( m a xm in iaipdiddiditia ????? )1()()1()( )
環(huán)評公示相關(guān)推薦
鄂ICP備17016276號-1