买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：江苏科技大学

摘要：本发明公开了一种用于音乐播放器的无接触式手势控制方法，包括：设计手势类型；利用毫米波雷达采集手势信息，提取到接收天线数据；对雷达原始回波进行信号处理，得到速度‑时间谱图；建立双通道卷积神经网络，通过双通道卷积神经网络对两个速度‑时间谱图进行特征提取；将提取的特征进行融合得到新的特征；通过训练好的手势分类模型预测手势信息并输出手势类别对应的Data值；音乐播放器根据Data值来控制执行对应的功能。本发明采用毫米波雷达传感器进行手势信息的采集并输出手势信息，具有全天时全天候的工作能力且抗干扰能力强，能够在黑暗条件下捕获微小动作，克服了光线弱无法准确识别手势及所需高清摄像头成本高的问题，具有很好的市场前景。

主权项：1.一种用于音乐播放器的无接触式手势控制方法，其特征在于，包括如下步骤：S1：设计手势类型；S2：利用毫米波雷达采集手势信息，得到ADC采样数据，提取到接收天线数据；S3：对雷达原始回波进行信号处理，得到接收天线1和接收天线2的速度-时间谱图；S4：建立双通道卷积神经网络，并将接收天线RX1和接收天线RX2得到的速度-时间谱图分别输入卷积神经网络的两个通道，通过双通道卷积神经网络对两个速度-时间谱图进行特征提取；S5：将步骤S4中提取的特征进行融合得到新的特征；S6：根据步骤S5得到的新的特征，通过训练好的手势分类模型预测手势信息并输出手势类别对应的Data值；S7：音乐播放器根据Data值来控制执行对应的功能；所述步骤S3具体包括如下步骤：A1：解析雷达原始回波得到行为天线数，列为采样点数×chirp总数的矩阵；A2：提取接收天线RX1的数据，并进行重新排列得到采样点数×chirp数×帧数的新的数据矩阵；A3：对新的数据矩阵的快时间维进行快速傅里叶变换得到距离谱图；A4：利用K近邻平滑滤波对距离谱图进行噪声抑制处理，滤除背景噪声；A5：对经过步骤A4处理后的距离谱图，沿慢时间轴做快速傅里叶变换得到距离多普勒谱图；A6：将距离多普勒谱图进行相干累加得到速度-时间谱图；A7：提取接收天线RX2的数据，并进行重新排列得到采样点数×chirp数×帧数的新的数据矩阵；A8：重复步骤A3～A6得到接收天线RX2的速度-时间谱图；所述步骤S4中双通道卷积神经网络的建立方法为：利用Pytorch深度学习框架搭建含有两个二维卷积通道的卷积层用于提取速度-时间特征，在卷积通道后将卷积层提取的特征信息进行拼接融合到两个卷积通道的融合特征，搭建用于提取融合特征的时序信息的长短期记忆网络层，在长短期记忆神经网络层之后添加全连接层和Softmax层用于进行手势分类；所述双通道卷积神经网络的运作方法为：将接收天线RX1和接收天线RX2的速度-时间谱图分别输入第一个卷积通道和第二个卷积通道，提取其速度-时间特征，然后将其特征融合并输入长短期记忆网络层提取时序信息，最后经全连接层和Softmax层输出分类手势；所述步骤S6中神经网络模型的训练方法为：利用获取的速度-时间谱图构建数据集，将数据集按比例划分训练集、验证集、测试集，训练并保存最好的模型；所述步骤S6和S7具体为：通过Matlab将毫米波雷达板与音乐播放器相连，对着毫米波雷达板做出相关手势，毫米波雷达板采集手势信息并上传至Matlab，Matlab调用训练好的手势分类模型并预测出对应的手势类别，每个手势类别对应着一个Data值，Matlab将Data值传递给MusicPlayer模块，MusicPlayer模块根据Data值控制音乐播放器执行对应功能。

全文数据：

权利要求：

百度查询： 江苏科技大学 一种用于音乐播放器的无接触式手势控制方法