Предлагается краткий обзор основных типов и архитектур многомодальных интерфейсов, использующих речь в качестве одного из компонентов ввода информации. Приводятся основные отличия одномодальных и многомодальных интерфейсов. Среди многих возможных комбинаций модальностей особое внимание уделяется таким, в которых главенствующую роль играет речевая модальность, а именно: речь и жесты; речь и артикуляция губ; речь и направление взгляда; речь, направление взгляда и жесты. Описываются области применения многомодальных интерфейсов как в современных, так и в перспективных автоматизированных системах управления.
展开▼
