使用驾驶员注意力信息的语义分割

摘要

一种用于创建经训练的语义分割网络模型并且使用该模型来操作车辆的方法。一种示例方法包括：被配置成捕获表示驾驶员视图的人工表示的图像的外视相机、被配置成捕获驾驶员眼部运动的面向驾驶员的相机、以及电子控制器。电子控制器被配置成：从相机接收图像；利用人工驾驶员视图来校准驾驶员眼部运动的图像；创建校准图像的像素加权热图；使用像素加权热图和人工驾驶员视图来创建经训练的语义分割神经网络模型和经训练的注意力神经网络模型；以及使用经训练的语义分割神经网络模型和经训练的注意力神经网络模型来操作车辆。