多媒體系統(tǒng)的數據模型(編輯修改稿)
2025-04-24 12:47 本頁面
【文章內容簡介】 間關系來安排多種媒體的合成表現 , 即是 多媒體同步 問題。 ? 空間合成 確定各種媒體在畫面空間上位置變換和安排 ,時間合成 確定媒體對象在時間上的順序 時空合成的概念描述 ? 定義 1 角色是多媒體表現環(huán)境中的資源 , 它分為視角色和聽角色。視角色對應一塊顯示區(qū)域 (窗口 ), 聽角色對應揚聲器或聲卡 (聲音通道 )。 ? 定義 2 場景是各種媒體對象占用角色活動的多媒體空間表現環(huán)境。 ? 定義 3 場景運算是對角色施加的操作 , 它分為一元運算和二元運算。 場景運算 場景運算 一元運算 二元運算 視角色 定位 (Loc), 變比 (Scale), 剪裁 (Cut), 旋轉 (Rotate) 鄰接 (Abut), 覆蓋 (Overlay), 鑲嵌 (Mosaic), 交疊 (Overlap) 聽角色 增益 (Gain) 混聲 (Mix) ? 定義 4 場景表達式 由角色經場景運算而產生的結果。它可遞歸定義為 : (1) 角色本身是場景表達式； (2) 若 Q為場景表達式 ,則 Q一元運算結果為場景表達式； (3) 若 Q1和 Q2為場景表達式 ,則 Q1和 Q2二元運算結果為場景表達式； (4) 若 Q為場景表達式 , 則 (Q)也是場景表達式； (5) 場景運算優(yōu)先級由高到低為： (),一元運算 ,二元運算； (6) 場景表達式經 (1)(5)確定的規(guī)則復合而成。 ? 定義 5 情節(jié) 表示多媒體表現環(huán)境中所發(fā)生的事件 ,即媒體對象的活動。 ? 情節(jié)可分為原子情節(jié)和復合情節(jié) ,原子情節(jié)是由一個媒體對象連續(xù)完成的活動 ,復合情節(jié)是由原子情節(jié)或復合情節(jié)經情節(jié)運算構造而成。 ? 定義 6 設 X X2為多媒體表現中的 2個情節(jié) ,情節(jié)運算定義為： (1) 并發(fā)運算 X1∧ X2, X1∨ X2 X1,X2同時開始執(zhí)行 , 都完成時 X1∧ X2完成 (稱最后并行 )；X1或 X2有一個完成時 X1∨ X2完成 (稱首先并行 )。 (2) 順序運算 X1。X2 先執(zhí)行情節(jié) X1,再執(zhí)行情節(jié) X2,X2完成時 X1。X2完成。 (3) 循環(huán)運算 X*m 循環(huán) m(m1)次執(zhí)行情節(jié) X, X每次執(zhí)行有不同對象參與。 (4) 重復運算 X+m 重復 m(m1)次執(zhí)行情節(jié) X, X每次執(zhí)行都同一對象參與。 ? 定義 7 情節(jié)表達式定義為： (1) 情節(jié)本身是情節(jié)表達式； (2) 若 X為情節(jié)表達式 , 則 X*m,X+m也是情節(jié)表達式； (3) 若 X1和 X2為情節(jié)表達式 , 則 X1∧ X2, X1∨ X2和 X1。X2運算結果也為情節(jié)表達式； (4) 若 X為情節(jié)表達式 , 則 (X)也是情節(jié)表達式； (5) 情節(jié)運算優(yōu)先級為 : ()優(yōu)先級高 , 其余運算優(yōu)先級相同； (6) 情節(jié)表達式所有形式可經 (1)(5)確定的規(guī)則復合而成。 ? 定義 8 多媒體節(jié)目腳本是一個情節(jié)表達式。 時間合成 ? 時間關系一般可用 before、 meets、 overlap、during、 starts、 finishes和 equals及其逆關系來表示 , 共有 13種 。 ? 多媒體對象在時間上的并行 、 順序 、 獨立關系 ,在對象時間表現控制上分別對應于并發(fā) 、 串行 、異步 (任意 )執(zhí)行 。 同步的層次與類型 ? 用戶級同步與腳本模型 最上層同步 ,又稱表現級同步或交互同步 ? 合成同步 中層同步 ? 系統(tǒng)同步 底層同步 ,是媒體內部同步 時間同步模型的功能需求 ? 表達能力 對象間的同步 ， 對象內的同步 ? 用戶交互 /不確定性 不確定性管理 ， 高級交互功能 （ 倒帶 、 快進 、 … ） ? 規(guī)約生成支持 規(guī)約可維護性 ， 規(guī)約重用性 ， 不一致性檢測 其中有些特點是模型必須支持的 ， 如對象間同步； 有些特點 ， 模型盡量予以支持 ， 如不一致性檢測 。 目前所提出的同步模型主要有 4大類： 圖模型 , 基于 Petri網的模型 , 面向對象的模型 , 基于語言的模型 。 圖模型 ? 圖模型把時序場景表示為一個圖 G=(V,E), 其中 結點 n?V表示合成場景的對象 /事件 。 邊 e?E表示時序場景構件之間的相互關系。 ? 以 Firefly模型為例介紹圖模型 , 使用記號如下： 方結點 表示多媒體對象的開始和結束時間； 圓結點 表示對象內的同步點 ,它們被放置于對應對象的開始和結束事件之間； 邊 表示事件之間的時間關系 。 ? 每個邊標記上它所連接的事件之間關系 。 例如標記為：同時 ()或先于 10秒 (before 10s)。 ? Firefly模型支持兩種約束： 時間等式 ， 它要求兩個事件同時發(fā)生 (如 )或一個事件超前于另一事件確定時間量 t(如 before t)； 時間不等式 ,它支持不確定性的表達 。 例如一個事件超
教學課件相關推薦
鄂ICP備17016276號-1