一种基于实验场景态势感知的智能烧杯

摘要

本发明提出了一种基于实验场景态势感知的智能烧杯，包括多模态输入感知模块、意图理解模块和意图融合模块；多模块输入感知模块用于接收语音传感器和视觉信息。意图理解模块用于根据语音关键字与语音意图库中意图的相关度得到语音意图；通过姿态传感器和测距设备交互获取烧杯的三维信息得到操作行为意图；基于图获取的图像，采用slam技术感知烧杯运动轨迹和采用区域生成网络感知场景态势得到场景感知意图。意图融合模块用于将用户意图利用模糊逻辑算子进行模糊推理，结合场景感知意图得到意图融合最终结果。本发明通过智能烧杯通过多模态融合与意图理解算法解决了用户行为的过程监控、实验场景理解和真实感量化交互方法的问题。