一种基于视频的无线信号增强与跨目标手势识别方法

摘要

本发明公开了一种基于视频图像的无线信号增强与人体手势识别方法，首先收集Wi‑Fi链路上手势动作信道状态信息及相应手势视频信息，分别对数据进行预处理。使用MoCoGAN视频生成模型，生成虚拟数据，扩充视频数据集。使用轮廓检测与目标提取算法去除帧集合背景噪声，并利用HMR算法将2D图像转化为3D点云数据，通过参数调整可对人体身高体型进行设置，再次扩充数据集。利用HPR对点云中发射端不可见点进行消除，并通过模拟获得相应部署条件下的Wi‑Fi信号。对收集到的Wi‑Fi信道状态信息数据及相应部署条件下的Wi‑Fi信号，分别提取时频域特征，并建立Wi‑Fi信道状态信息数据手势特征系统分析模型，实现高精度跨目标手势识别。