多通道用戶界面互動技術

多通道用戶界面互動技術為適應目前和未來的計算機系統要求,人機界面應能支持時變媒體,實現三維、非精確及隱含的人機互動,而多通道人機界面是達到這一目的的重要途徑。

80年代後期以來,多通道用戶界面成為人機互動技術研究的嶄新領域,在國內外受到高度重視。
綜合採用視線、語音、手勢等新的互動通道、設備和互動技術,使用戶利用多個通道以自然、並行、協作的方式進行人機對話,通過整合來自多個通道的、精確的和不精確的輸入來捕捉用戶的互動意圖,提高人機互動的自然性和高效性。
多通道用戶界面互動技術
多通道用戶界面主要關注人機界面中用戶向計算機輸入信息以及計算機對用戶意圖的理解,所要達到的目標可歸納為如下方面:
1)互動的自然性
使用戶儘可能多地利用已有的日常技能與計算機互動,降低認識負荷。
2)互動的高效性
使人機通訊信息交換吞吐量更大、形式更豐富,發揮人機彼此不同的認知潛力。
3)與傳統的用戶界面特別是廣泛流行的WIMP/GUI兼容。
(1) 多通道用戶界面的基本特點
1) 使用多個感覺和效應通道
2) 允許非精確的互動
3) 三維和直接操縱
4) 互動的雙向性
5) 互動的隱含性
(2)涉及的主要技術
1)多媒體
使用多種表示媒體,如文本、圖形、圖像和聲音,使人機互動技術最終要向著更接近於人的自然方式發展,使計算機具有聽覺和視覺,以更自然的方式與人互動。多媒體技術引入了動畫、音頻、視頻等動態媒體,大大豐富了計算機表現信息的形式,拓寬了計算機輸出的頻寬,提高了用戶接受信息的效率,使人們可以得到更直觀的信息,從而簡化了用戶的操作,擴展了套用範圍。
2)虛擬現實
又稱虛擬環境,虛擬現實系統向用戶提供沉浸和多感覺通道體驗。在虛擬現實中,人是主動參與者,複雜系統中可能有許多參與者共同在以計算機網路系統為基礎的虛擬環境中協同工作。 虛擬現實系統具有三個重要特點:沉浸感、互動性、構想性。
3)眼動跟蹤
與視覺有關的人機互動自始至終都離不開視線的控制。如果能通過用戶的視線盯著感興趣的目標,計算機便“自動”將游標置於其上,人機互動將更為直接,也省去了上述互動過程中的大部分步驟。
一個簡單的手勢蘊涵著豐富的信息,人與人可以通過手勢傳達大量的信息,實現高速的通信。將手勢運用於計算機能夠很好地改善人機互動的效率。在多數情況下我們籠統地認為手勢是人的上肢(包括手臂、手和手指)的運動狀態。
5)三維輸入
許多套用(如虛擬現實系統)需要三維空間定位技術,三維空間控制器的共同特點是具有六個自由度,分別描述三維對象的寬度、深度、高度、俯仰角、轉動角、偏轉角。通過控制這六個參數,用戶可以在螢幕上平移三維對象或游標,也可沿三個坐標軸轉動三維對象。在三維用戶互動中必須便於用戶在三維空間中觀察、比較、操作、改變三維空間的狀態。
語音識別是計算機通過識別和理解過程把語音信號轉變為相應的文本檔案或命令的技術。 語音識別又是一門交叉學科,它與聲學、語音學、語言學、數位訊號處理理論、資訊理論、計算機科學等眾多學科緊密相連。
7)表情識別
面部表情是人體語言的一部分。人的面部表情不是孤立的,它與情緒之間存在著千絲萬縷的聯繫。人的各種情緒變化以及對冷熱的感覺都是非常複雜的高級神經活動,如何感知、記錄、識別這些變化過程是表情識別的關鍵。
8)手寫識別
發展手寫識別技術並嵌入到各種設備中,將是手寫識別技術未來發展的重要方向之一。在線上手寫識別技術的優點是不需專門學習與訓練、不必記憶編碼規則、安裝後即可手寫輸入漢字,是最簡單方便的輸入方式。同時符合人的書寫習慣,可以一面思考、一面書寫,不會打斷思維的連續性,是最自然的輸入方式。
數字墨水是一種新的人機界面技術,它借鑑手寫識別技術的同時,克服了它的許多局限性。 數字墨水在數學上是通過三階貝塞爾曲線來描述筆輸入的筆跡,它的記錄格式與圖像和文本格式都不同。這種存儲方式使得數字墨水檔案的大小很小,從而可以更有效地進行存儲。

相關詞條

熱門詞條

聯絡我們