【正文】 25/60）： 1953，美國(guó) ? PAL(Phase Alternation Line)（ 625/50）： 1962，西德 ? SECAM（ 625/50）：法國(guó) ? 光柵掃描原理 ? 視頻攝像機(jī)將圖像轉(zhuǎn)換為電信號(hào)，電信號(hào)是一維的，但圖像是二維的，將二維圖像轉(zhuǎn)成為一維電信號(hào)是由光柵掃描的方法實(shí)現(xiàn)的。研究表明，人眼對(duì)亮度信息敏感，而對(duì)顏色的敏感程度相對(duì)較弱。對(duì)同一色調(diào)的彩色光，飽和度越深顏色越鮮艷。在同一亮度感覺下，不同波長(zhǎng)的光具有不同的光強(qiáng)。 ?與視覺相對(duì)應(yīng)的光學(xué)物理性質(zhì)和心理知覺也是截然不同的。 多媒體技術(shù) 169。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 音頻媒體的三維化處理 ? 3DVA的基本理論 ?人類感知聲源位臵的最基本的理論是雙工理論，該理論基于兩種因素： ? 兩耳間聲音的到達(dá)時(shí)間差 ITD（ Interaural Time Differences） ? 兩耳間聲音的強(qiáng)度差 IID（ Interaural Intensity Differences）。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 音頻媒體的三維化處理 ? 三維虛擬聲空間（ Three Dimensional Virtual Acoustic， 3DVA） ?指用一定的聲音設(shè)備人為地產(chǎn)生出來的具有空間位臵信息的聲音空間。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 音頻的數(shù)字化和符號(hào)化 ? 語(yǔ)音的符號(hào)化 ?對(duì)語(yǔ)音的符號(hào)化實(shí)際上就是對(duì)語(yǔ)音的識(shí)別，將語(yǔ)音轉(zhuǎn)變?yōu)樽址?，反之也可以將文字合成語(yǔ)音。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 音頻的數(shù)字化和符號(hào)化 ? 音樂的符號(hào)化－ MIDI ? MIDI不是聲音數(shù)據(jù)而是指令，所以數(shù)據(jù)量要少得多。 ?數(shù)據(jù)量 ? (采樣頻率每點(diǎn)采樣位數(shù)聲道數(shù) )/8 (字節(jié) /秒 ) 多媒體技術(shù) 169。標(biāo)準(zhǔn)的采樣頻率有三個(gè)： ，和 。 ?對(duì)聲音進(jìn)行采樣用奈奎斯特采樣定理來決定采樣的頻率。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 音頻的數(shù)字化和符號(hào)化 ? 音頻的數(shù)字化與再現(xiàn) ?聲音信號(hào)也是由一系列的數(shù)字來表示的，稱為數(shù)字音頻。 多媒體技術(shù) 169?；l改變，人耳是很敏感的。 多媒體技術(shù) 169。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聲音心理學(xué) ? 聽覺空間 ?人耳可聽到來自各個(gè)方向的聲音，并用不同的因素來判定聲源的位臵。因此自然聲音的起始部分是非常難識(shí)別的。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聲音心理學(xué) ? 自然聲音的時(shí)變現(xiàn)象 ?聲音的音調(diào)分成三個(gè)區(qū)域：起始區(qū)、穩(wěn)定狀態(tài)區(qū)、延遲區(qū)。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聲音心理學(xué) ? 相位 ?從聲音的波形來看，聲音的起點(diǎn)和方向也要反映聲音的特性，這就是聲音的相位。如果超出臨界區(qū)，聲音的響度不再相互作用，聲音的響度隨頻率的改變而改變。所以在生產(chǎn)勞動(dòng)與無(wú)線電通訊中，應(yīng)當(dāng)著重考慮排除低頻音的干擾作用。 ? （ 2）掩蔽音對(duì)于頻率相近聲音的影響最大。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聲音心理學(xué) 純音對(duì)純音的掩蔽效果 ? 說明： A、 B為掩蔽音。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 等響曲線圖 多媒體技術(shù) 169。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聲音心理學(xué) ? 等響曲線 ?由于響度與頻率和強(qiáng)度相關(guān)，所以不同頻率上的強(qiáng)度是不一樣的。 ? 每個(gè)基音都有固有的頻率和不同音強(qiáng)的泛音，從而使每個(gè)聲音具有特殊的音色效果。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 心理變量 首要的物理變量 次要的物理變量 響度 聲強(qiáng) 聲波頻率 音調(diào) 聲波頻率 聲強(qiáng) 音色 聲波復(fù)合 － 音量 頻率和強(qiáng)度 － 密度 頻率和強(qiáng)度 － 諧和（流暢或粗糙） 諧波結(jié)構(gòu) 音樂技巧 噪聲 強(qiáng)度 頻率組合，各種時(shí)間參量 騷擾聲 強(qiáng)度 頻率組合，無(wú)意義 多媒體技術(shù) 169。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聲音心理學(xué) ? 聲音的量綱分為聲音的物理量綱和心理量綱。 ? 80 響亮的音樂聲，一般交通噪音及交響樂片斷。 ? 130 ? 120 大型噴氣式飛機(jī)附近。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聽覺媒體技術(shù) 多媒體技術(shù) 169。是目前絕大多數(shù)系統(tǒng)采用的方法。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 媒體的性質(zhì)和特點(diǎn) ? 各種媒體具有不同特點(diǎn)和性質(zhì) ?媒體是有格式的 ?不同媒體表達(dá)信息的特點(diǎn)和程度各不相同 ?媒體之間可以相互轉(zhuǎn)換 ?媒體之間的關(guān)系也具有豐富的信息 ? 媒體具有空間性質(zhì) ?表現(xiàn)空間 ?媒體按相互的空間關(guān)系進(jìn)行組織 ?視覺空間、聽覺空間和觸覺空間這 3者既相互獨(dú)立又需要相互結(jié)合 多媒體技術(shù) 169。動(dòng)畫的連續(xù)播放既指時(shí)間上的連續(xù)，也指圖像內(nèi)容上的連續(xù)，即播放的相鄰兩幅圖像之間內(nèi)容相差不大 。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 常見的媒體元素 ? 音頻 ?波形聲音 ? 包含了所有的聲音形式，它可以把任何聲音都進(jìn)行采樣量化。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 常見的媒體元素 ? 圖像 ?圖像是指由輸入設(shè)備捕捉的實(shí)際場(chǎng)景畫面，或以數(shù)字化形式存儲(chǔ)的任意畫面。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 媒體的種類和特點(diǎn) 多媒體技術(shù) 169。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 第 2章 媒體及媒體技術(shù) ? 媒體的種類和特點(diǎn) ? 聽覺媒體技術(shù) ? 視覺媒體技術(shù) ? 觸覺媒體技術(shù) 多媒體技術(shù) 169。 ? line（ x1,y1,x2,y2,color） ? circle（ x,y,r,color） 多媒體技術(shù) 169。這些畫面以一定的速率連續(xù)地投射在屏幕上，使觀察者具有圖像連續(xù)運(yùn)動(dòng)的感覺 多媒體技術(shù) 169。 ? 動(dòng)畫 ?運(yùn)動(dòng)的圖畫，實(shí)質(zhì)是一幅幅靜態(tài)圖像的連續(xù)播放。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 媒體的種類 ? 聽覺 ? 觸覺 ? 其他感覺 抽象化 聽覺 聲音 聲響（自然界） 語(yǔ)音（人類語(yǔ)言） 音樂 觸覺 振動(dòng) 運(yùn)動(dòng) 傳感 /發(fā)生器 其它（嗅覺、味覺等） 多媒體技術(shù) 169。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 媒體的性質(zhì)和特點(diǎn) ? 多媒體數(shù)據(jù)的特點(diǎn) ?數(shù)據(jù)量大 ? 640x480x256的照片占 ? 1024 768 24位的圖片占 ?數(shù)據(jù)類型繁多（黑白、彩色等） ?數(shù)據(jù)類型之間的差別大 ?多媒體數(shù)據(jù)的輸入、輸出復(fù)雜： ? 多通道異步輸入法：在通道、時(shí)間不同的情況下輸入各種媒體數(shù)據(jù)并存儲(chǔ)，最后按合成效果在不同的設(shè)備上表現(xiàn)出來。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 媒體的性質(zhì)和特點(diǎn) ? 多通道同步輸入輸出 聲音 圖像 觸覺信息 文字 表現(xiàn) 顯示 放音 觸覺 合成 存儲(chǔ) 圖 多通道同步輸入與輸出 多通道輸入 ... 多媒體技術(shù) 169。 2023 西安交通大學(xué) 新型計(jì)算機(jī)研究所 聲音心理學(xué) ? 140 痛閾。 ? 90 繁華街道的交通噪音。 ? 10 消聲室 ? 0 聽閾 多媒體技術(shù) 169。 多媒體技術(shù) 16