买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：广东保伦电子股份有限公司

摘要：本申请公开了一种基于注意力机制的动态手势识别方法及装置。本申请通过视频采集设备，按照时间顺序采集预设数量的包含手部关键点的第一视频帧，获取第一视频帧序列；遍历所述第一视频帧序列，计算各所述第一视频帧中的各所述手部关键点间的欧式距离，获取二维距离矩阵；将所述二维距离矩阵输入至预设手势识别模型，获取手势识别结果；所述手势识别模型，通过注意力机制模块连接轻量化卷积神经网络以及双向长短时记忆网络搭建而成。通过本申请，可以在动态手势识别过程中，考虑手势的时空特征信息，提高手势识别的准确性，此外通过轻量卷积提升动态手势识别的实时性。

主权项：1.一种基于注意力机制的动态手势识别方法，其特征在于，包括：通过视频采集设备，按照时间顺序采集预设数量的包含手部关键点的第一视频帧，获取第一视频帧序列；遍历所述第一视频帧序列，计算各所述第一视频帧中的各所述手部关键点间的欧式距离，获取二维距离矩阵；将所述二维距离矩阵输入至预设手势识别模型，获取手势识别结果；所述手势识别模型，通过注意力机制模块连接轻量化卷积神经网络以及双向长短时记忆网络搭建而成；所述将所述二维距离矩阵输入至预设手势识别模型，获取手势识别结果，包括：通过所述轻量化卷积神经网络，对所述二维距离矩阵进行特征提取，获取第一特征信息；通过所述注意力机制模块，对第一特征信息进行特征增强，获取第二特征信息；通过双向长短期记忆网络模型，对所述第二特征信息进行特征提取，获取第三特征信息；通过全连接层，映射所述第三特征信息至所述手势识别结果；所述通过所述轻量化卷积神经网络，对所述二维距离矩阵进行特征提取，获取第一特征信息，包括：所述轻量化卷积神经网络包括：若干个不同尺度的卷积核；通过不同尺度的卷积核，提取所述二维距离矩阵在不同尺度卷积操作下的空间信息特征；融合所有所述空间信息特征，获取所述第一特征信息；所述遍历所述第一视频帧序列，计算各所述第一视频帧中的各所述手部关键点间的欧式距离，获取二维距离矩阵，包括：按照所述手部关键点的空间顺序，对各所述第一视频帧中的所有所述手部关键点排序；计算各所述第一视频帧中任意两个所述手部关键点的之间的第一欧式距离，以及各所述第一视频帧中各所述手部关键点与预设原点之间的第二欧式距离；根据各第一视频帧对应的所有所述第一欧式距离以及所有所述第二欧式距离，获取各所述第一视频帧对应的第一二维距离矩阵；将所有所述第一二维距离矩阵扁平化后，并按照获取所述第一视频帧的时间顺序拼接各所述第一二维距离矩阵获取所述二维距离矩阵。

全文数据：

权利要求：

百度查询： 广东保伦电子股份有限公司 一种基于注意力机制的动态手势识别方法及装置