智能体主动构建环境场景图谱的方法、设备和探索方法

摘要

提供了智能体基于视觉信息主动构建环境场景图谱方法、环境探索方法和智能设备，方法包括：采集训练模型所需环境场景图像及对应的环境场景图谱数据集；采集训练模型所需智能体探索环境路径；采用环境场景图像及对应的环境场景图谱数据集和采集的智能体探索环境路径训练主动探索模型；基于训练好的主动探索模型生成动作，智能体采用所生成的动作探索环境，探索过程中，获得3D语义点云数据，然后利用3D语义点云数据构建环境场景图谱。本发明可以克服以往传统计算机视觉任务只能对环境进行被动感知的局限性，利用智能体的主动探索特性，将感知能力与运动能力结合起来以实现主动感知，主动探索环境，主动构建环境的场景图谱，应用于多种视觉任务。