【正文】 共同研制的 DVI系統(tǒng)的一種動(dòng)態(tài)圖像文件格式，AVS文件只能在 DVI系統(tǒng)硬件下才能夠讀寫(xiě) AVI Intel和 IBM公司共同研制的 DVI系統(tǒng)的一種動(dòng)態(tài)圖像文件格式 視覺(jué)媒體數(shù)字化 2．圖形 圖形 ()：一種抽象化的圖像，是對(duì)圖像依據(jù)某個(gè)標(biāo)準(zhǔn)進(jìn)行分析而產(chǎn)生的結(jié)果。 當(dāng)進(jìn)行再現(xiàn)時(shí) ， 被表示稱(chēng)數(shù)字形式的數(shù)據(jù)按格式和時(shí)間送上顯示器 ， 就又恢復(fù)了原先的形態(tài) 。 按照標(biāo)準(zhǔn)間隔在時(shí)間軸上采樣的圖像組組成視頻序列 。 視覺(jué)媒體數(shù)字化 在一幅圖像的 X軸上是一行的點(diǎn)數(shù) ， 在 Y軸上是行數(shù) 。它同樣與頻率和量化的比特?cái)?shù)有關(guān)。數(shù)字化的結(jié)果放在顯示緩存區(qū)中，與顯示器上的點(diǎn)一一對(duì)應(yīng)，這就是位圖圖像。 視覺(jué)媒體數(shù)字化 1．位圖圖像與數(shù)字視頻 對(duì)計(jì)算機(jī)來(lái)說(shuō)，無(wú)論是文字或圖形，還是圖像或視頻，在計(jì)算機(jī)上進(jìn)行處理首先要數(shù)字化。而消費(fèi)級(jí)是家用設(shè)備，一般操作簡(jiǎn)單、性能可靠，一般價(jià)格是第一位的。 模擬視頻原理 ?視頻設(shè)備 ? 按照用途不同，視頻設(shè)備可以分為廣播、專(zhuān)業(yè)和消費(fèi)三個(gè)級(jí)別。 、 可以與互換 。 的亮度信號(hào)稱(chēng)為 Y， 色度信號(hào)為 I和 Q， 即方式 。 將亮度和色度交錯(cuò)排列分別放到電纜上 ， 就組成了復(fù)合信號(hào) 。 根據(jù)亮度/色度原理 ， 任何彩色信號(hào)都可以分為亮度和色度 。在系統(tǒng)中需要三根視頻電纜互連，但是三個(gè)信號(hào)在同步關(guān)系方面相當(dāng)復(fù)雜，所以大部分彩色電視不處理，而是將信號(hào)組合起來(lái)在一條電纜中傳輸，這就是復(fù)合信號(hào)。 模擬視頻原理 ?彩色視頻 ? 加基系統(tǒng)是彩色視頻系統(tǒng)的基礎(chǔ)。 掃描行的長(zhǎng)度與在圖像垂直方向上的所有掃描行所跨過(guò)的距離之比 ， 就成為寬高比 。 因此 ， 人眼就不容易看到閃爍 。 模擬視頻原理 每一秒鐘所掃描的幀數(shù)稱(chēng)為幀頻 ， 一般為 25幀 （ ） 或者 30幀 （ ） 。 垂直分辨率和每幀中的掃描線(xiàn)有關(guān) ， 掃描線(xiàn)越多 ， 分辨率就越高 。 一個(gè)系統(tǒng)的水平分辨率為 400線(xiàn) ， 指在對(duì)應(yīng)于圖像高度的水平距離內(nèi)能交替顯示 200條白線(xiàn)和 200條黑線(xiàn) 。 水平掃描線(xiàn)所能分辨出的點(diǎn)數(shù)稱(chēng)為水平分辨率 。連續(xù)不斷的圖像序列就形成了動(dòng)態(tài)視頻圖像?？焖俚膾呙杈€(xiàn)從頂部開(kāi)始，一行一行地向下掃描，直至顯示器的最底部，然后再返回頂部的起點(diǎn)，重新開(kāi)始掃描。但是需要注意，只有大的視野才有可能制造出臨場(chǎng)感。但視力好的部位僅限于 2到 3度，用于觀察視覺(jué)媒體的細(xì)節(jié)。注視點(diǎn)容易集中在時(shí)隱時(shí)現(xiàn)運(yùn)動(dòng)變化的部分或者圖像中特別不規(guī)則的地方。 視覺(jué)心理學(xué) ? 注視點(diǎn)和視野范圍 ? 人在觀察視覺(jué)類(lèi)媒體時(shí)，注視點(diǎn)喜歡集中在什么地方？研究表明，視覺(jué)注視點(diǎn)主要集中在圖像中黑白交界的部分，尤其是拐角處。 在黑色背景下 ， 一般使用紅綠藍(lán)作為基色來(lái)混合其它顏色 ， 這就是加基色合成彩色系統(tǒng) 。研究表明，人眼對(duì)亮度信息敏感，而對(duì)顏色的敏感程度相對(duì)較弱。 在輻射功率相同的條件下，不同波長(zhǎng)的光不僅給人不同的顏色感覺(jué)，而且也給人不同的亮度感覺(jué)。不同波長(zhǎng)呈現(xiàn)出不同顏色，可見(jiàn)光波長(zhǎng)從長(zhǎng)到短依次為紅橙黃綠青藍(lán)紫。 視覺(jué)心理學(xué) 顏色是由三種原色光混合而成的。對(duì)同一色調(diào)的彩色光，飽和度越深顏色越鮮艷。亮度是光作用于人眼所引起的明亮程度的感覺(jué)，與光強(qiáng)有關(guān)。 視覺(jué)心理學(xué) ?彩色 ? 表示顏色需要考慮三種心理屬性：色調(diào)、亮度和飽和度。這是因?yàn)榘压廪D(zhuǎn)變?yōu)樯窠?jīng)電需要時(shí)間。 視覺(jué)也有掩蔽現(xiàn)象 ， 在很亮的高光周?chē)鷷r(shí)難以看清的 ， 道理和聲音是類(lèi)似的 。 視覺(jué)心理學(xué) 與聲音相似 ， 視覺(jué)上也有等亮曲線(xiàn) ， 反映了視覺(jué)在亮度上與波長(zhǎng)的關(guān)系 。這些都取決于中心和周?chē)g的相對(duì)強(qiáng)度，也就是對(duì)比度。假定整個(gè)照明增大了，目標(biāo)和環(huán)境的光強(qiáng)就按照比例增大了，兩者之間的物理對(duì)比就維持不變。 視覺(jué)心理學(xué) 視覺(jué)心理變量 主要的物理變量 亮度 光強(qiáng) 色調(diào)（彩色） 波長(zhǎng) 濃度（彩色的濃度） 光譜成分 對(duì)比 光強(qiáng)、波長(zhǎng)、周?chē)? 視覺(jué)心理學(xué) 2. 視覺(jué)特性 亮度 亮度是人眼對(duì)光強(qiáng)度的感受。雖然光的物理特性與心理知覺(jué)有關(guān)，但它們的關(guān)系并不是線(xiàn)性的。 音頻媒體的三維化處理 場(chǎng)景模型（幾何、屬性、聲源、聲宿） 聲 學(xué) 模 擬 脈 沖 響 應(yīng) 曲 線(xiàn) 卷 積 運(yùn) 算 雙 耳 脈 沖 響 應(yīng) 卷 積 運(yùn) 算 真 實(shí) 感 空 間 聲 H RTF 雙耳相關(guān)函數(shù) 無(wú) 回 響 聲 音 輸 出 威海北洋職業(yè)技術(shù)學(xué)校 《 多媒體技術(shù)教程 》 視覺(jué)媒體技術(shù) 視覺(jué)心理學(xué) 1．視覺(jué)的心理特征 視覺(jué)是人類(lèi)最重要的感知能力，通過(guò)視覺(jué)可以感知到外部世界的形狀、大小、色彩、明暗、機(jī)理和運(yùn)動(dòng)等多方面的信息。 音頻媒體的三維化處理 3．方法 實(shí)現(xiàn)空間真實(shí)感的關(guān)鍵是建立起耳廓模型，這種方法被稱(chēng)為“雙耳相關(guān)函數(shù)法”，也即（ ，與頭部有關(guān)的轉(zhuǎn)移函數(shù)）。另外，當(dāng)聲音從聲源傳到人的內(nèi)耳并形成聽(tīng)覺(jué)時(shí)，聲音信號(hào)已經(jīng)攜帶了兩個(gè)很重要的信息，從而形成了空間真實(shí)感和環(huán)境真實(shí)感。當(dāng)聲波從聲源傳到聽(tīng)者的耳部時(shí)，聲波會(huì)在耳廓發(fā)生不斷的反射和折射，然后由內(nèi)耳道傳到耳鼓，使人產(chǎn)生音感。 音頻媒體的三維化處理 3理論較形象地說(shuō)明：人耳對(duì)聲音定位的特性，通過(guò)大腦的綜合作用后，對(duì)有差別的聲音信號(hào)進(jìn)行了相對(duì)于空間位臵的定位。 時(shí)間差是由于距離的原因造成的，當(dāng)聲音從正面?zhèn)鱽?lái)時(shí)，距離相等，所以沒(méi)有時(shí)間差；但若偏右 3o，則到達(dá)右耳的時(shí)間就要比左耳約早 30，而正是這 30，使得我們辨別出了聲源的位臵。一般說(shuō)來(lái)，三維虛擬聲空間要達(dá)到以下的一些目標(biāo)： ① 在可聽(tīng)的范圍內(nèi)重現(xiàn)頻率分辨度和動(dòng)態(tài)范圍； ② 在三維空間中精確地呈現(xiàn)聲音的位臵信息； ③ 能表達(dá)多個(gè)靜止和移動(dòng)的聲源； ④ 能和頭部的動(dòng)作具有一定的關(guān)聯(lián)； ⑤ 能夠支持一定程度的交互。 音頻媒體的三維化處理 1．三維虛擬聲空間 所謂三維虛擬聲空間（ ， 3），是指用一定的聲音設(shè)備人為地產(chǎn)生出來(lái)的具有空間位臵信息的聲音空間。在采集和存儲(chǔ)上可以與波形聲音一樣，但由于語(yǔ)音是由一連串的音素組成。對(duì)語(yǔ)音的符號(hào)化實(shí)際上就是對(duì)語(yǔ)音的識(shí)別，將語(yǔ)音轉(zhuǎn)變?yōu)樽址粗部梢詫⑽淖趾铣烧Z(yǔ)音。 無(wú)法模擬自然界中其它非樂(lè)曲類(lèi)聲音 音頻的數(shù)字化和符號(hào)化 （ 2）語(yǔ)音的符號(hào)化 語(yǔ)音與文字是對(duì)應(yīng)的。 30分鐘的音樂(lè) ， 用文件記錄只需200， 用 16位品質(zhì)的未壓縮文件記錄需 317 可以與其他波形聲音配合使用 ， 形成伴樂(lè)的效果 。它給出了一種得到音樂(lè)聲音的方法。當(dāng)一組消息通過(guò)音樂(lè)合成芯片處理時(shí)，合成器能解釋這些符號(hào)并且產(chǎn)生音樂(lè)。 消息，是指樂(lè)譜的數(shù)字描述。 對(duì)于聲音的符號(hào)化 （ 也可以稱(chēng)為抽象化） 表示包括兩種類(lèi)型：一種是音樂(lè) ， 一種是語(yǔ)音 。 音頻的數(shù)字化和符號(hào)化 ?聲道數(shù) ? 有單聲道、雙聲道和多聲道。 采樣位數(shù) 存放一個(gè)采樣點(diǎn)所需的比特?cái)?shù)。采樣頻率越高，聲音質(zhì)量越接近原始聲音，所需的存儲(chǔ)量便越多。 一般來(lái)說(shuō) ， 聲音恢復(fù)和采樣頻率 、 信道帶寬都有關(guān) 。 因?yàn)槿硕苈?tīng)到的頻率范圍為 20到 20， 所以實(shí)際的采樣過(guò)程中 ， 為了達(dá)到好的效果 ， 就采用 。 音頻的數(shù)字化和符號(hào)化 對(duì)聲音進(jìn)行采樣用奈奎斯特采樣定理來(lái)決定采樣的頻率 。 數(shù)字聲音是一個(gè)數(shù)據(jù)序列 。 聲音信號(hào)也是由一系列的數(shù)字來(lái)表示的， 稱(chēng)為數(shù)字音頻 。 人通過(guò)網(wǎng)絡(luò)與異地的人進(jìn)行語(yǔ)音通信 ， 相關(guān)的音頻處理有語(yǔ)音采集 、 音頻的編碼和解碼 、 音頻的存儲(chǔ) 、 音頻的傳輸 、 基于內(nèi)容的檢索等 。 包括音樂(lè)合成 、 語(yǔ)音合成 、 聲音的定位以及音頻視頻的同步。 包括音頻獲