運用低成本互動裝置於多模式人機介面之研發與探討

Research and Development of Multimodal Human-Machine Interface Using Low Cost Interactive Devices

陳坤立(Kun-Li Chen)

指導教授 ： 李其瑋 博士

元智大學/資訊學院/資訊傳播學系/碩士(2003年)

摘要

資訊科技發展下的人機互動介面，在操控上逐漸走向人本多模式互動方式，傳統電腦操控介面如鍵盤、滑鼠等單模式的使用，由於操控不夠直覺自然，未來將被多模式介面所取代，如感測人體肢體動作操控與感官回饋等表現模式。
本研究探索直覺動作操控之器材，用以研發多模式互動裝置系統，透過相關文獻理論的分析與整合建立系統模式，並利用視覺與聽覺元素構成呈現訊息。互動裝置的設計上符合直覺自然、具有使用彈性、高效率操作介面與回饋表現具體強烈等要求，因此可使互動系統更加實體化、真實化與自由化三項訴求，藉由互動裝置建立而能解決感測系統設計時面臨的問題與挑戰。
本研究主要以四個研究貢獻為發展方向，分別為：1. 探索直覺性操控器材設備建立互動裝置。2. 延伸輸入裝置介面操控能力。3.使用廉價的器材設備建立互動裝置。4.實作多模式互動系統與提供實際應用。
互動裝置系統利用紅外線人體感應器，可感測人體進入或離開而自動啟動或關閉系統，並運用手搖鈴與跳舞墊的介面功能，提供使用者手與腳直覺動作操控系統，操控過程同時產生視覺圖形與聽覺音效的具體訊息回饋。使用者可透過互動裝置的操控使用，具體感受到由人的角度出發所設計的系統，達到人與電腦之間良好的互動方式。

關鍵字

多模式 ； 人機介面 ； 互動裝置 ； 低成本 ； 人本互動

並列摘要

As the modern computer technology evolves, the trend has moved the human-computer interface toward to multi-modal technology gradually. Due to its non-intuitiveness for human to use, the traditional human-computer interface like keyboard and mouse should be phased out in the future by the multi-modal interface which can be achieved by measurement of body movement, for example.
This research explores a mechanism of intuitive manipulation of equipment or device and also develops an interactive multi-modal system that is capable of vision and hearing feedback. The design of interactive device requires intuitiveness to use, flexibility, efficient user interface and strong realization of sensor feedback, achieving the three goals of interactive system —“getting physical, getting real and getting real out”. Moreover, this research attempts to answer the challenge of interactive device installation as well as the problems of designing sensor system.
This research emphasizes on the study of the human-computer interaction using multimodal devices that are capable of visual and audio feedback. A feasible application of this research can be developed in future.

並列關鍵字

Multimode ； Human-Machine Interface ； Interactive Devices ； Low Cost ； Human-centered Interaction

參考文獻

牟華琪（民88）。科技與人文的對話。台北：雄獅。

意崍高科技股份有限公司 http://www.1come.com.tw

瑋特擬真科技股份有限公司 http://www.vimtek.com.tw

徐業良、葉欲君（民89）。三維虛擬顯示螢幕的建構。中國機械工程學會，17。

Benoit, C., Martin, J. C., Pelachaud, C., Schomaker, L., & Suhm, B. (2000). Audio-visual and multimodal speech-based systems. Handbook of Multimodal and Spoken Dialogue Systems: Resources, Terminology and Product Evaluation. 102-110.