多媒體系統(tǒng)的數(shù)據(jù)模型(編輯修改稿)
2025-04-24 12:47 本頁(yè)面
【文章內(nèi)容簡(jiǎn)介】 間關(guān)系來(lái)安排多種媒體的合成表現(xiàn) , 即是 多媒體同步 問(wèn)題。 ? 空間合成 確定各種媒體在畫面空間上位置變換和安排 ,時(shí)間合成 確定媒體對(duì)象在時(shí)間上的順序 時(shí)空合成的概念描述 ? 定義 1 角色是多媒體表現(xiàn)環(huán)境中的資源 , 它分為視角色和聽(tīng)角色。視角色對(duì)應(yīng)一塊顯示區(qū)域 (窗口 ), 聽(tīng)角色對(duì)應(yīng)揚(yáng)聲器或聲卡 (聲音通道 )。 ? 定義 2 場(chǎng)景是各種媒體對(duì)象占用角色活動(dòng)的多媒體空間表現(xiàn)環(huán)境。 ? 定義 3 場(chǎng)景運(yùn)算是對(duì)角色施加的操作 , 它分為一元運(yùn)算和二元運(yùn)算。 場(chǎng)景運(yùn)算 場(chǎng)景運(yùn)算 一元運(yùn)算 二元運(yùn)算 視角色 定位 (Loc), 變比 (Scale), 剪裁 (Cut), 旋轉(zhuǎn) (Rotate) 鄰接 (Abut), 覆蓋 (Overlay), 鑲嵌 (Mosaic), 交疊 (Overlap) 聽(tīng)角色 增益 (Gain) 混聲 (Mix) ? 定義 4 場(chǎng)景表達(dá)式 由角色經(jīng)場(chǎng)景運(yùn)算而產(chǎn)生的結(jié)果。它可遞歸定義為 : (1) 角色本身是場(chǎng)景表達(dá)式； (2) 若 Q為場(chǎng)景表達(dá)式 ,則 Q一元運(yùn)算結(jié)果為場(chǎng)景表達(dá)式； (3) 若 Q1和 Q2為場(chǎng)景表達(dá)式 ,則 Q1和 Q2二元運(yùn)算結(jié)果為場(chǎng)景表達(dá)式； (4) 若 Q為場(chǎng)景表達(dá)式 , 則 (Q)也是場(chǎng)景表達(dá)式； (5) 場(chǎng)景運(yùn)算優(yōu)先級(jí)由高到低為： (),一元運(yùn)算 ,二元運(yùn)算； (6) 場(chǎng)景表達(dá)式經(jīng) (1)(5)確定的規(guī)則復(fù)合而成。 ? 定義 5 情節(jié) 表示多媒體表現(xiàn)環(huán)境中所發(fā)生的事件 ,即媒體對(duì)象的活動(dòng)。 ? 情節(jié)可分為原子情節(jié)和復(fù)合情節(jié) ,原子情節(jié)是由一個(gè)媒體對(duì)象連續(xù)完成的活動(dòng) ,復(fù)合情節(jié)是由原子情節(jié)或復(fù)合情節(jié)經(jīng)情節(jié)運(yùn)算構(gòu)造而成。 ? 定義 6 設(shè) X X2為多媒體表現(xiàn)中的 2個(gè)情節(jié) ,情節(jié)運(yùn)算定義為： (1) 并發(fā)運(yùn)算 X1∧ X2, X1∨ X2 X1,X2同時(shí)開(kāi)始執(zhí)行 , 都完成時(shí) X1∧ X2完成 (稱最后并行 )；X1或 X2有一個(gè)完成時(shí) X1∨ X2完成 (稱首先并行 )。 (2) 順序運(yùn)算 X1。X2 先執(zhí)行情節(jié) X1,再執(zhí)行情節(jié) X2,X2完成時(shí) X1。X2完成。 (3) 循環(huán)運(yùn)算 X*m 循環(huán) m(m1)次執(zhí)行情節(jié) X, X每次執(zhí)行有不同對(duì)象參與。 (4) 重復(fù)運(yùn)算 X+m 重復(fù) m(m1)次執(zhí)行情節(jié) X, X每次執(zhí)行都同一對(duì)象參與。 ? 定義 7 情節(jié)表達(dá)式定義為： (1) 情節(jié)本身是情節(jié)表達(dá)式； (2) 若 X為情節(jié)表達(dá)式 , 則 X*m,X+m也是情節(jié)表達(dá)式； (3) 若 X1和 X2為情節(jié)表達(dá)式 , 則 X1∧ X2, X1∨ X2和 X1。X2運(yùn)算結(jié)果也為情節(jié)表達(dá)式； (4) 若 X為情節(jié)表達(dá)式 , 則 (X)也是情節(jié)表達(dá)式； (5) 情節(jié)運(yùn)算優(yōu)先級(jí)為 : ()優(yōu)先級(jí)高 , 其余運(yùn)算優(yōu)先級(jí)相同； (6) 情節(jié)表達(dá)式所有形式可經(jīng) (1)(5)確定的規(guī)則復(fù)合而成。 ? 定義 8 多媒體節(jié)目腳本是一個(gè)情節(jié)表達(dá)式。 時(shí)間合成 ? 時(shí)間關(guān)系一般可用 before、 meets、 overlap、during、 starts、 finishes和 equals及其逆關(guān)系來(lái)表示 , 共有 13種 。 ? 多媒體對(duì)象在時(shí)間上的并行 、 順序 、 獨(dú)立關(guān)系 ,在對(duì)象時(shí)間表現(xiàn)控制上分別對(duì)應(yīng)于并發(fā) 、 串行 、異步 (任意 )執(zhí)行 。 同步的層次與類型 ? 用戶級(jí)同步與腳本模型 最上層同步 ,又稱表現(xiàn)級(jí)同步或交互同步 ? 合成同步 中層同步 ? 系統(tǒng)同步 底層同步 ,是媒體內(nèi)部同步 時(shí)間同步模型的功能需求 ? 表達(dá)能力 對(duì)象間的同步 ， 對(duì)象內(nèi)的同步 ? 用戶交互 /不確定性 不確定性管理 ， 高級(jí)交互功能 （ 倒帶 、 快進(jìn) 、 … ） ? 規(guī)約生成支持 規(guī)約可維護(hù)性 ， 規(guī)約重用性 ， 不一致性檢測(cè) 其中有些特點(diǎn)是模型必須支持的 ， 如對(duì)象間同步； 有些特點(diǎn) ， 模型盡量予以支持 ， 如不一致性檢測(cè) 。 目前所提出的同步模型主要有 4大類： 圖模型 , 基于 Petri網(wǎng)的模型 , 面向?qū)ο蟮哪Ｐ?, 基于語(yǔ)言的模型 。 圖模型 ? 圖模型把時(shí)序場(chǎng)景表示為一個(gè)圖 G=(V,E), 其中 結(jié)點(diǎn) n?V表示合成場(chǎng)景的對(duì)象 /事件 。 邊 e?E表示時(shí)序場(chǎng)景構(gòu)件之間的相互關(guān)系。 ? 以 Firefly模型為例介紹圖模型 , 使用記號(hào)如下： 方結(jié)點(diǎn) 表示多媒體對(duì)象的開(kāi)始和結(jié)束時(shí)間； 圓結(jié)點(diǎn) 表示對(duì)象內(nèi)的同步點(diǎn) ,它們被放置于對(duì)應(yīng)對(duì)象的開(kāi)始和結(jié)束事件之間； 邊 表示事件之間的時(shí)間關(guān)系 。 ? 每個(gè)邊標(biāo)記上它所連接的事件之間關(guān)系 。 例如標(biāo)記為：同時(shí) ()或先于 10秒 (before 10s)。 ? Firefly模型支持兩種約束： 時(shí)間等式 ， 它要求兩個(gè)事件同時(shí)發(fā)生 (如 )或一個(gè)事件超前于另一事件確定時(shí)間量 t(如 before t)； 時(shí)間不等式 ,它支持不確定性的表達(dá) 。 例如一個(gè)事件超
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1