多模态用户界面从信号到交互作用

摘要

人类与环境以及人类与人类的连接毫无疑问是多模态的。所有人类的感官参与了，甚至在某种程序上支配了日常人类的感知、行动及交互作用的运转。几十年来与计算机交互作用或者以计算机为媒介与其他事物的交互作用已经成为数量有限的多模态及用户化器件的基础。