人機(jī)交互的進(jìn)展及面臨的挑戰(zhàn)-文庫(kù)吧資料
2024-10-13 15:52本頁(yè)面
【正文】 GOMS(Goal, Operator, Methods, Selection rule)模型 這個(gè)模型的理論基礎(chǔ)是認(rèn)知心理學(xué)家創(chuàng)立的問(wèn)題解決理論 。其典型例子是按照用戶(hù)對(duì)系統(tǒng)、領(lǐng)域的知識(shí)、經(jīng)驗(yàn)、技能的不同，將用戶(hù)分為偶然、生疏、熟練、專(zhuān)家型等四類(lèi)用戶(hù)。 另一類(lèi)是從系統(tǒng)設(shè)計(jì)的角度來(lái)了解用戶(hù)的 “ 用戶(hù)特性模型 ” 。 一類(lèi)是從系統(tǒng)的結(jié)構(gòu)出發(fā)，討論界面在系統(tǒng)中的地位和分解，我們稱(chēng)它為 “ 界面結(jié)構(gòu)模型 ” 。 ? 多通道交互框架（ Multimodal Interaction Framework） ? 多通道交互需求（ Multimodal Interaction Requirements） ? 多通道交互用例（ Multimodal Interaction Use Cases） ? 可擴(kuò)展多通道注釋語(yǔ)言需求（ EMMAExtensible MultiModal Annotation language Requirements） ? 數(shù)字墨水需求（ Ink Requirements） 人機(jī)交互與多媒體研究室 － 42－ 42 人機(jī)交互與多媒體研究室 2。 人機(jī)交互與多媒體研究室 － 41－ 41 人機(jī)交互與多媒體研究室 多通道交互的標(biāo)準(zhǔn)工作 2022年 2月 W3C國(guó)際組織成立了 “ 多通道交互 ”工作小組（ Multimodal Interaction Working Group），它開(kāi)發(fā) W3C新的一類(lèi)支持移動(dòng)設(shè)備多通道交互的協(xié)議標(biāo)準(zhǔn)。 人機(jī)交互與多媒體研究室 － 40－ 40 人機(jī)交互與多媒體研究室 多通道的整合問(wèn)題 多通道的整合問(wèn)題是多通道交互的一個(gè)核心研究?jī)?nèi)容。 人臉表情識(shí)別的模型和方法也在不斷改進(jìn)。 人機(jī)交互與多媒體研究室 － 38－ 38 人機(jī)交互與多媒體研究室 唇讀、人臉表情識(shí)別 唇讀、人臉表情識(shí)別是又一個(gè)人機(jī)交互技術(shù)的熱點(diǎn)。 隨著反恐斗爭(zhēng)的日顯重要，各國(guó)正在對(duì)其他人體特征進(jìn)行廣泛研究，希望盡快找到快速、準(zhǔn)確、方便、廉價(jià)的身份識(shí)別方法。 人機(jī)交互與多媒體研究室 － 36－ 36 人機(jī)交互與多媒體研究室 觸覺(jué)通道的力反饋裝置 人機(jī)交互與多媒體研究室 － 37－ 37 人機(jī)交互與多媒體研究室 生物特征識(shí)別技術(shù) 生物特征識(shí)別技術(shù) (Biometrics)是受到廣泛關(guān)注的一類(lèi)新興識(shí)別技術(shù)。 用在非游戲的高精度觸覺(jué)反饋裝置中，最著名的是由 MIT人工智能實(shí)驗(yàn)室 Massie and Salisbury開(kāi)發(fā)、美國(guó) SensAble Technologies 公司生產(chǎn)的Phantom觸覺(jué)反饋（ 6自由度）設(shè)備和 Ghost軟件開(kāi)發(fā)包。 人機(jī)交互與多媒體研究室 － 34－ 34 人機(jī)交互與多媒體研究室 “ 注視用戶(hù)界面 (Attentive User Interfaces, AUI) ” 人機(jī)交互與多媒體研究室 － 35－ 35 人機(jī)交互與多媒體研究室 觸覺(jué)通道的力反饋裝置 新一代力反饋感應(yīng)技術(shù)主要有 TouchSense觸覺(jué)感應(yīng)技術(shù) 和 GForce Tilte動(dòng)作感應(yīng)技術(shù) 兩種。其采樣率、精度高，可靠。 眼動(dòng)跟蹤設(shè)備的精度和對(duì)用戶(hù)的限制和干擾是一對(duì)尖銳的矛盾。 視線(xiàn)跟蹤技術(shù)，一是研究高質(zhì)量的眼動(dòng)跟蹤設(shè)備，二是如何構(gòu)造易于操作的用戶(hù)界面。 它可輸出大詞匯量的手語(yǔ)詞，為中國(guó)聾啞人的教育、生活提供了有用的輔助工具，使他們用手語(yǔ)與正常人的交流成為可能。對(duì)于給定文本句子 (可由正常人話(huà)語(yǔ)轉(zhuǎn)換而成 )，自動(dòng)合成相應(yīng)的人體運(yùn)動(dòng)數(shù)據(jù)。 人機(jī)交互與多媒體研究室 － 31－ 31 人機(jī)交互與多媒體研究室 手語(yǔ)識(shí)別和合成 中國(guó)科學(xué)院計(jì)算所研制成功了基于多功能感知的中國(guó)手語(yǔ)識(shí)別與合成系統(tǒng)，它采用數(shù)據(jù)手套可識(shí)別大詞匯量（ 5177個(gè)）的手語(yǔ)詞。 人機(jī)交互與多媒體研究室 － 30－ 30 人機(jī)交互與多媒體研究室 語(yǔ)音 和 筆 上述成果表明，作為人類(lèi)最重要的自然通道 ——語(yǔ)音和筆的交互技術(shù)，包括手寫(xiě)識(shí)別、數(shù)字墨水、筆交互、語(yǔ)音識(shí)別、語(yǔ)音合成等通道技術(shù)，近年來(lái)已有顯著的進(jìn)步，我國(guó)的不少成果已具有國(guó)際先進(jìn)水平，并達(dá)到了一定的產(chǎn)業(yè)規(guī)模。 在國(guó)家支持下，漢語(yǔ)語(yǔ)音合成取得了顯著進(jìn)展，多家國(guó)內(nèi)研究單位都成功開(kāi)發(fā)了自己的語(yǔ)音合成系統(tǒng)。 人機(jī)交互與多媒體研究室 － 26－ 26 人機(jī)交互與多媒體研究室 基于筆的字處理 EasyEditor 人機(jī)交互與多媒體研究室 － 27－ 27 人機(jī)交互與多媒體研究室 手寫(xiě)數(shù)學(xué)公式 人機(jī)交互與多媒體研究室 － 28－ 28 人機(jī)交互與多媒體研究室 中文語(yǔ)音識(shí)別 IBM/Via Voice連續(xù)中文語(yǔ)音識(shí)別系統(tǒng)經(jīng)過(guò)不斷改進(jìn)，已廣泛應(yīng)用于 Office/XP的中文版等辦公軟件和應(yīng)用軟件中，在中文語(yǔ)音識(shí)別領(lǐng)域有重要影響。它還將繼續(xù)發(fā)展，有可能成為新一代優(yōu)秀的自然交互設(shè)備 。 人機(jī)交互與多媒體研究室 － 24－ 24 人機(jī)交互與多媒體研究室 數(shù)字墨水技術(shù) 微軟亞洲研究院多通道用戶(hù)界面組發(fā)明的數(shù)字墨水技術(shù) ， 采用全新易操縱的筆交互設(shè)備、高質(zhì)量的墨水繪制技術(shù)、智慧的墨跡分析技術(shù)等，使它不僅可用作為文字識(shí)別、圖形繪制的輸入，而且作為一種全新的 “ Ink” 數(shù)據(jù)模型，使手寫(xiě)筆記更易閱讀、獲取、組織和使用。 人機(jī)交互與多媒體研究室 － 23－ 23 人機(jī)交互與多媒體研究室 手寫(xiě)漢字識(shí)別 中科院自動(dòng)化所開(kāi)發(fā)的 “ 漢王筆 ” 手寫(xiě)漢字識(shí)別系統(tǒng)，經(jīng)過(guò)近 20年的研究和開(kāi)發(fā)，已能識(shí)別27000漢字，當(dāng)用非草寫(xiě)漢字、以每分鐘 12個(gè)漢字的速度書(shū)寫(xiě)時(shí)，識(shí)別率可達(dá) %。 多通道交互的各類(lèi)通道（界面）技術(shù)中，有不少已經(jīng)實(shí)用化、產(chǎn)品化、商品化。 通道 (Modality)：源于心理學(xué)的概念，涵蓋了用戶(hù)表達(dá)意圖、執(zhí)行動(dòng)作或感知反饋信息的各種通信方法，如言語(yǔ)、眼神、臉部表情、唇動(dòng)、手動(dòng)、手勢(shì)、頭動(dòng)、肢體姿勢(shì)、觸覺(jué)、嗅覺(jué)或味覺(jué)等。自然、高效的多通道交互 人機(jī)交互與多媒體研究室 － 21－ 21 人機(jī)交互與多媒體研究室 通道與多通道交互 多通道交互 (MultiModal Interaction)：一種使用多種通道與計(jì)算機(jī)通信的人機(jī)交互方式。 90年代美國(guó) Xerox公司PARC的首席科學(xué)家 Mark Weiser首先提出 “ 無(wú)所不在計(jì)算（ Ubiquitous Computing） ” 思想 。 1989年 Tim BernersLee在日內(nèi)瓦的 CERN用 HTML及HTTP開(kāi)發(fā)了 WWW網(wǎng)，隨后出現(xiàn)了各種瀏覽器（網(wǎng)絡(luò)用戶(hù)界面），使互聯(lián)網(wǎng)飛速發(fā)展起來(lái)。 10年后鼠標(biāo)器經(jīng)不斷改進(jìn)，成為影響當(dāng)代計(jì)算機(jī)使用的最重要成果。他還在 1968年開(kāi)發(fā)了頭盔式立體顯示器，成為現(xiàn)代虛擬現(xiàn)實(shí)技術(shù)的重要基礎(chǔ)。 Em
職業(yè)教育相關(guān)推薦
鄂ICP備17016276號(hào)-1