【正文】 人機(jī)多媒體交互的雙向性：多種多媒體信息提供服務(wù)同時(shí)我們又在像其輸入信息。 多媒體數(shù)據(jù)保存和獲取示例 圖片文件的保存圖片是以二進(jìn)制的形式保存在數(shù)據(jù)庫(kù)中，保存步驟有：1）將圖片轉(zhuǎn)換為二進(jìn)制數(shù)組；2）把轉(zhuǎn)換后的二進(jìn)制作為參數(shù)傳遞給要執(zhí)行的Command；3)執(zhí)行Commad。BLOB的設(shè)計(jì)原則是：使用BLOB數(shù)據(jù)類型還是使用varchar、存儲(chǔ)BLOB在數(shù)據(jù)庫(kù)中或者在文件系統(tǒng)中。 SQL的5種數(shù)據(jù)類型：字符型、文本型、數(shù)值型、邏輯性和日期型。 分布式多媒體數(shù)據(jù)庫(kù)系統(tǒng) 分布式多媒體數(shù)據(jù)庫(kù)系統(tǒng)的特點(diǎn)：實(shí)時(shí)性、同步特性、服務(wù)質(zhì)量、體系結(jié)構(gòu)、客戶—服務(wù)器結(jié)構(gòu)。2）音頻檢索：聲音訓(xùn)練和分類、聽(tīng)覺(jué)檢索、音頻分割。一個(gè)典型的視頻檢索CBVR系統(tǒng)至少包括媒體庫(kù)、特征庫(kù)、方法庫(kù)和檢索界面四部分。故事單元式相同的場(chǎng)景經(jīng)過(guò)聚類后形成故事單元。 鏡頭是視頻序列經(jīng)過(guò)時(shí)序分割后的結(jié)果，是基于內(nèi)容的視頻檢索中的最小語(yǔ)義單元關(guān)鍵幀是為了減少數(shù)據(jù)量，提高檢索效率，從鏡頭中提取的一幀或多幀圖像來(lái)表示鏡頭的特殊的視頻幀。 2]. 基于內(nèi)容的視頻檢索 視頻可用故事單元、場(chǎng)景、鏡頭、幀等描述。 1]. 基于內(nèi)容的圖像檢索圖像檢索（CBIR）技術(shù)特點(diǎn)如下：，她需要處理前所未有的數(shù)據(jù)，因此在處理速度、準(zhǔn)確度、算法的魯棒性方面都提出更高的要求，多種表達(dá)方式并存是可能的，表達(dá)方法的選擇要依賴于特定的用戶和特定的應(yīng)用領(lǐng)域3在傳統(tǒng)的圖像數(shù)據(jù)庫(kù)中，符號(hào)數(shù)據(jù)可以用基本的數(shù)據(jù)類型精準(zhǔn)地表示，檢索匹配是精確的匹配，在符號(hào)數(shù)據(jù)命名的過(guò)程中舉賦予特定的信息，因?yàn)闄z索得到的結(jié)果可能包含一些不相關(guān)的圖像，這種情況對(duì)于基于內(nèi)容的檢索式允許的重要的一點(diǎn)就是在檢索中不要將相關(guān)的圖像漏掉CBIR的檢索內(nèi)容主要包括：顏色、紋理、形狀、對(duì)象。按內(nèi)容檢索. 萬(wàn)維網(wǎng)文檔的全文檢索技術(shù)分布式、數(shù)據(jù)量巨大、動(dòng)態(tài)性、復(fù)雜的標(biāo)識(shí)符處理。按條件語(yǔ)句檢索。、豐富的檢索操作手段。多媒體數(shù)據(jù)模型可以分為3類：關(guān)系數(shù)據(jù)模型、面向?qū)ο髷?shù)據(jù)模型和超文本數(shù)據(jù)模型：，結(jié)構(gòu)簡(jiǎn)單，實(shí)際上就是一張二維表增加對(duì)非格式化數(shù)據(jù)處理的能力技術(shù)策略:，實(shí)現(xiàn)對(duì)非格式化數(shù)據(jù)的管理；，形成一個(gè)完整的元組，存放在數(shù)據(jù)頁(yè)面或數(shù)據(jù)也組中；，一部分是非格式化數(shù)據(jù)本身，一部分是對(duì)非格式化數(shù)據(jù)的引用。 對(duì)象分為兩類：一類是與數(shù)據(jù)類型、內(nèi)容、性質(zhì)有關(guān)的對(duì)象；另一類是與數(shù)據(jù)之間關(guān)聯(lián)有關(guān)的對(duì)象。；：因?yàn)槠浔旧泶嬖谌狈νㄓ脭?shù)據(jù)模型、理論基礎(chǔ)、有好的用戶界面和工具環(huán)境、有利的查詢優(yōu)化。 多媒體數(shù)據(jù)庫(kù)的發(fā)展 實(shí)現(xiàn)多媒體數(shù)據(jù)庫(kù)系統(tǒng)的途徑可以分3類：擴(kuò)充關(guān)系數(shù)據(jù)庫(kù)方法面向?qū)ο蟮姆椒ā⒊谋痉椒?。第八? 多媒體數(shù)據(jù)庫(kù)概述 多媒體數(shù)據(jù)的特點(diǎn)多媒體數(shù)據(jù)的特點(diǎn)：、。超鏈接分為：文本鏈接和文檔內(nèi)部之間的鏈接。 超鏈接：即超文本鏈接的簡(jiǎn)稱，或簡(jiǎn)稱鏈接。HEAD：HEAD.../HEAD之間包含的是HTML文檔名；TITLE:之間包含具體的HTML文檔名稱。一個(gè)mtml文檔通常由文檔頭head、文檔名title、表格table、段落paragraph和列表list組成。HTML及其的作用：HTML實(shí)一種組織文檔的語(yǔ)言，可以用來(lái)編排文檔、創(chuàng)建列表、建立連接、插入聲音和影視片斷等。 超文本系統(tǒng)的用戶接口解決迷失和認(rèn)識(shí)開(kāi)銷的方法：圖像瀏覽器、Web視圖、地圖和概貌圖、路徑和形跡。 超文本的發(fā)展歷史和典型的超文本系統(tǒng) 超文本的發(fā)展歷史現(xiàn)在超文本與傳統(tǒng)字典形式的超文本的區(qū)別：訪問(wèn)速度快，文獻(xiàn)容納信息量大，以及結(jié)點(diǎn)和鏈可以動(dòng)態(tài)的改變。宏結(jié)點(diǎn)：通過(guò)鏈連接在一起的結(jié)點(diǎn)群。：用于在推理中事實(shí)的鏈，通常等價(jià)于規(guī)則。：用于組織結(jié)點(diǎn)。：依賴于用戶使用的目的，常常被用來(lái)實(shí)現(xiàn)可靠性和安全性。：可以擴(kuò)大當(dāng)前結(jié)點(diǎn)。鏈按用于導(dǎo)航和信息檢索分的種類：：用來(lái)建立結(jié)點(diǎn)之間的基本順序。結(jié)點(diǎn)的類型有：文本結(jié)點(diǎn)、圖形和圖像結(jié)點(diǎn)、動(dòng)畫和視頻結(jié)點(diǎn)、音樂(lè)和數(shù)字化語(yǔ)音結(jié)點(diǎn)、混合媒體結(jié)點(diǎn)、動(dòng)作與操作結(jié)點(diǎn)、組織型結(jié)點(diǎn)、推理型結(jié)點(diǎn)。 系統(tǒng)的組成：由結(jié)點(diǎn)和鏈組成。，使用戶在每一時(shí)刻都可以得到當(dāng)前結(jié)點(diǎn)的鄰接環(huán)境。其基本特征有以下幾個(gè)方面：。其目的是為了生產(chǎn)巨大、復(fù)雜、豐富鏈接和交叉引用的信息體。其目的是提供一個(gè)復(fù)雜的、具有豐富鏈接和交叉引用的信息系統(tǒng)。超文本系統(tǒng)：是由結(jié)點(diǎn)和鏈組成的，其提供非線性信息的訪問(wèn)方式，是一種新的訪問(wèn)信息手段的數(shù)據(jù)庫(kù)系統(tǒng)。其是作為一種復(fù)雜的信息管理系統(tǒng)而出現(xiàn)的。 DirectShow應(yīng)用示例要利用Media Detector和Sample Grabber Filter實(shí)時(shí)在線獲取視圖像幀，主要包括以下4個(gè)步驟：；；；。參與數(shù)據(jù)處理的各個(gè)功能模塊叫做過(guò)濾器（Filter）：Filter大致分為三類：Source Filter(源過(guò)濾器)、Transform Filter(轉(zhuǎn)換過(guò)濾器)和Reading Filter(表現(xiàn)過(guò)濾器)。：DirectSound通過(guò)音頻設(shè)備驅(qū)動(dòng)提供硬件抽象出HAL，其功能有：獲得和釋放音頻硬件的控制權(quán)、描述音頻硬件的能力：當(dāng)音頻硬件可用時(shí)完成指定操作；當(dāng)音頻硬件不可用時(shí)，向操作申請(qǐng)者返回錯(cuò)誤。：DirectSound中的音頻緩沖區(qū)對(duì)象代表了一個(gè)含有音頻數(shù)據(jù)的緩沖區(qū)。2..DirectSound的體系結(jié)構(gòu)：DirectSound的音效 回放部分建立在IDirectSound和IDirectSoundBuffer COM接口之上，后者用于控制音頻緩沖區(qū)。 Microsoft DirectSound簡(jiǎn)介Microsoft DirectSound是DirectX API的音頻組件之一，它為程序和音頻適配器的混音、聲音加速和聲音捕獲功能之間提供鏈接。DirectX使程序能夠輕松確定計(jì)算機(jī)的硬件性能，然后設(shè)置與之匹配的程序參數(shù)。 Microsoft DirectX DirectX 是由Microsoft公司開(kāi)發(fā)的用途廣泛的API,由C++編程語(yǔ)言實(shí)現(xiàn)，遵循COM.。 多媒體播放器多媒體播放器是指那些能夠回放不同編碼格式音視頻文件的軟件。根據(jù)應(yīng)用程序的特點(diǎn)和編程個(gè)人的風(fēng)格，可以選擇程序設(shè)計(jì)語(yǔ)言、多媒體編輯軟件或多媒體數(shù)據(jù)庫(kù)系統(tǒng)作為基本的編程工具。 多媒體計(jì)算機(jī)軟件工程師就成為整個(gè)工作的主導(dǎo)者，他們的主要任務(wù)是用多媒體工具軟件按照劇情構(gòu)思編制程序和組織多媒體數(shù)據(jù)，以形成完整的多媒體應(yīng)用程序。 多媒體應(yīng)用軟件常見(jiàn)的應(yīng)用軟件有以下幾種：；；；；。按其編輯成的應(yīng)用軟件的運(yùn)行方式來(lái)分，可以分成：；，運(yùn)行時(shí)只需一個(gè)解釋程序來(lái)解釋的半編譯型多媒體編輯軟件；。與傳統(tǒng)的計(jì)算機(jī)動(dòng)畫不同，多媒體計(jì)算機(jī)動(dòng)畫不僅要求有圖形的動(dòng)態(tài)變化，而且要求至少有與動(dòng)作相一致的聲音，為增強(qiáng)表現(xiàn)效果，常常還需要有相關(guān)的背景音樂(lè)。通常以“wav”為擴(kuò)展名，稱為WAV格式文件。 多媒體創(chuàng)作工具的分類從系統(tǒng)工具的功能角度劃分，多媒體創(chuàng)作工具大致可以分為4類：媒體創(chuàng)作軟件工具、多媒體節(jié)目寫作工具、媒體播放工具以及其他各類媒體處理工具。捕獲窗具有以下功能：1..將一視頻流和音頻流捕獲到一個(gè)AVI文件中、視頻格式、視頻壓縮的對(duì)話框、保存或載入調(diào)色板AVICap在顯示視頻是提供的兩種模式：，視頻幀先從捕獲硬件傳到系統(tǒng)內(nèi)存，接著采用GDI函數(shù)在捕獲窗中顯示，疊加視頻的顯示不經(jīng)過(guò)VGA卡，疊加視頻的硬件將VGA的輸出信號(hào)與其自身的輸出信號(hào)合并，形成組合信號(hào)顯示在計(jì)算機(jī)的監(jiān)視器上 3）視頻數(shù)據(jù)采集過(guò)程：（1）創(chuàng)建視捕獲窗口，調(diào)用函數(shù)capCreatCaptureWindows()； (2) 設(shè)置視頻捕獲的相關(guān)回調(diào)函數(shù)：capSetCallbackOnError()設(shè)置錯(cuò)誤回調(diào)函數(shù)capSetCallbackOnStatus()設(shè)置狀態(tài)回調(diào)函數(shù)capSetCallbackOnFrame()設(shè)置幀預(yù)覽回調(diào)函數(shù)capSetCallbackOnVideoStream()設(shè)置返回視頻幀相關(guān)信息的回調(diào)函數(shù)（3）搜尋視頻設(shè)備并連接相關(guān)設(shè)備capGetDriverDescription()獲取設(shè)備版本信息capDriverConnect()連接設(shè)備驅(qū)動(dòng)程序（4）獲取連接設(shè)備當(dāng)前的參數(shù)設(shè)置并根據(jù)需要進(jìn)行修改capCaptureGetSetup()獲取當(dāng)前設(shè)置capCaptureSetSetup()修改當(dāng)前設(shè)置capDlgVideoForeat()彈出Video Format對(duì)話框capDlgVideoSource()彈出VideoSource對(duì)話框 （5）設(shè)置預(yù)覽幀率capPreviewRate()設(shè)置Preview模式的顯示速度capPreview（）啟動(dòng)Preview模式（6）開(kāi)始捕獲數(shù)據(jù)capCaptureSequenceNoFlie()開(kāi)始捕獲視頻序列到另一緩存中，回調(diào)函數(shù)capSetCallbackOnVideoStream()負(fù)責(zé)處理緩存中的視頻數(shù)據(jù)capCaptureSequence（）開(kāi)始捕獲視頻序列到指定文件中 ：多媒體數(shù)據(jù)庫(kù)和創(chuàng)作工具為多媒體應(yīng)用提供資源和信息加工，如聲音錄制、編輯、視頻采集、剪接、動(dòng)畫生成和網(wǎng)頁(yè)制作等。它適用于波形音頻2）AVICap編程簡(jiǎn)介 AVICap支持實(shí)時(shí)的視頻流捕獲和單幀捕獲并提供對(duì)視頻源的控制。1）VFW簡(jiǎn)介：VFW是Microsoft公司1992年推出的關(guān)于數(shù)字視頻的一個(gè)軟件包，它能使應(yīng)用程序從傳統(tǒng)模擬視頻源得到視頻剪輯，采用ACI標(biāo)準(zhǔn)。 Windows環(huán)境下視頻數(shù)據(jù)的采集數(shù)字視頻數(shù)據(jù)時(shí)通過(guò)對(duì)模擬視頻信號(hào)的音頻、視頻信號(hào)同步捕獲并數(shù)字化而得到的。 多媒體數(shù)據(jù)準(zhǔn)備軟件：是指用于采集多種多媒體數(shù)據(jù)的軟件，如聲音錄制、編輯軟件等 環(huán)境下聲音數(shù)據(jù)的采集Windows 環(huán)境中可以通過(guò)它提供的MCI命令來(lái)控制聲卡。Windows 多媒體服務(wù)提供了自動(dòng)編程的能力。WindowsXP 還提供了快速圖片瀏覽功能，可以快速瀏覽絕大部分的圖片格式。WINMM為了完成它的工作，依賴于以下3種驅(qū)動(dòng)程序：； ； WindowsXP 對(duì)多媒體的支持 Windows XP的數(shù)字媒體處理功能是通過(guò)媒體播放器、個(gè)人屏保和快速圖片瀏覽等應(yīng)用程序來(lái)實(shí)現(xiàn)的。 Windows NT多多媒體的支持 Windows NT 支持多種多媒體設(shè)備，包括：；；；；、視盤播放器和游戲棒等相關(guān)設(shè)備?！狣VD播放器：自帶的DVD播放器。：集成了簡(jiǎn)單快速的圖片瀏覽器。Windows 98比 Windows 95的優(yōu)點(diǎn)體現(xiàn)在以下幾個(gè)方面：、頻道欄、新聞組、聯(lián)機(jī)會(huì)議和個(gè)人Web服務(wù)器使得網(wǎng)絡(luò)應(yīng)用更加出色。 目前的操作系統(tǒng)在支持連續(xù)媒體應(yīng)用中還面臨著許多的問(wèn)題來(lái)自兩方面：，只能提供更好的計(jì)算能力；，以及系統(tǒng)能夠保證現(xiàn)有應(yīng)用的服務(wù)質(zhì)量。提供多媒體信息的各種基本操作管理。 多媒體操作系統(tǒng)多媒體操作系統(tǒng)在驅(qū)動(dòng)軟件之上，是多媒體軟件的核心，其主要任務(wù)和特征如下：負(fù)責(zé)多媒體環(huán)境下多任務(wù)的調(diào)度。虛擬設(shè)備驅(qū)動(dòng)程序用于VMM的設(shè)備獨(dú)立性，它管理計(jì)算機(jī)的硬件設(shè)備和驅(qū)動(dòng)程序，確保應(yīng)用程序之間不會(huì)相互干擾。在Windows環(huán)境下，驅(qū)動(dòng)程序的裝載時(shí)通過(guò)Windows的初始化配置文件來(lái)完成的。 多媒體驅(qū)動(dòng)程序驅(qū)動(dòng)程序及其作用： 多媒體系統(tǒng)中直接和硬件打交道的軟件稱為設(shè)備驅(qū)動(dòng)程序，它完成設(shè)備的初始化、設(shè)備各種操作以及基于硬件的壓縮和解壓縮、圖像快速變換等基本硬件功能調(diào)用。 光驅(qū)應(yīng)用技術(shù): X技術(shù)；；；；第六章 多媒體計(jì)算機(jī)軟件多媒體軟件的主要任務(wù):是使用戶能夠方便、有效地組織和調(diào)整多媒體數(shù)據(jù)，讓多媒體硬件去處理相應(yīng)的媒體數(shù)據(jù)，實(shí)現(xiàn)音頻、視頻同步，真正實(shí)現(xiàn)多媒體的信息表達(dá)方式 。 下一代光存儲(chǔ)技術(shù) ： DVD EVD、FVD和NVDEVD的主要?jiǎng)?chuàng)新在于：、編碼解碼優(yōu)化方法，改善音響畫面素質(zhì)及增加數(shù)據(jù)壓縮比特率；“數(shù)字視頻上動(dòng)態(tài)疊加字幕”方法，可令字幕以256色顯示。：接口有IDE、SCSI、并行接口和USB四種。：主要有整盤刻錄、軌道刻錄寫和多段刻寫。 DVD區(qū)碼：六個(gè)區(qū)，兩種區(qū)碼控制系統(tǒng)，一是RPC 1類型，二是RPC2 CDRM驅(qū)動(dòng)器 CDR盤分為CDMO可擦寫磁光盤和CDWO一次寫入CDR盤兩種盤 CDRW是CDR的補(bǔ)充，具有兼容CDR刻錄和數(shù)據(jù)存儲(chǔ)兩大功能。DVD/CD信號(hào)拾取系統(tǒng)主要的4種方案：；；；。 DVD盤片的生產(chǎn)過(guò)程：；；；,分熱黏合和紫外線黏合。DVD與CD的物理特性區(qū)別CD ：直徑120mm，波長(zhǎng)780nm目標(biāo)鏡頭的NA*,DVD：直徑120mm，波長(zhǎng)650nm目標(biāo)鏡頭的NA*,DVD的不同參數(shù)：DVD5，；；；DVD18雙面雙層17GB DVD視頻編碼技術(shù)：采用MPEG2壓縮技術(shù)。 DVD的物理特性DVD提高容量的兩種方法：一種是減少光道距離和凹坑尺寸；一種是增加數(shù)據(jù)記錄層的層數(shù)。光驅(qū)三種數(shù)據(jù)接口：一是早期的AT bus接口，二是主流的IDE接口，三是SCSI接口。：光驅(qū)常見(jiàn)部件有光盤托盤、托盤開(kāi)關(guān)、耳機(jī)孔、和音量控制按鈕。紅皮書與黃皮書相比紅皮書對(duì)2352字節(jié)的用戶數(shù)據(jù)進(jìn)行了重新定義，解決了CDROM作為計(jì)算機(jī)存儲(chǔ)器的兩個(gè)問(wèn)題，一是計(jì)算機(jī)的尋址問(wèn)題，二是誤碼率的問(wèn)題。原版盤的玻璃盤上面涂有感光膠，曝光的地方經(jīng)過(guò)化學(xué)處理后就形成凹坑，沒(méi)有曝光的地方保持原樣，再經(jīng)過(guò)化學(xué)處理后的玻璃盤表面上鍍層金屬，制作成母盤，然后用母盤壓制DVD光盤。CD盤采用螺旋型光道，長(zhǎng)約5km，其轉(zhuǎn)動(dòng)線速度恒定，盤片可充分利用，但隨機(jī)存儲(chǔ)特性變差。技術(shù)皮書說(shuō)明標(biāo)準(zhǔn) 盤名 應(yīng)用目的 播放時(shí)間 顯示圖像紅皮書 CDDA 存儲(chǔ)音樂(lè)節(jié)目 74分