龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：开望(杭州)科技有限公司
摘要：本发明公开了一种基于视频‑音频多模态深度学习的多人跳绳分析方法，包括：获取跳绳过程的音像文件，并分离视频和音频，针对视频图像信号进行人像检测和提取，并对目标人像进行跟踪，提取目标人像的骨骼特征点坐标并进行预处理，获取单通道音频信号，将单通道音频信号进行切片和截取，并进行时频变换获得频谱信号和预处理，对预处理后的视频信号和音频信号融合得视频‑音频融合信号，将视频‑音频融合信号通过双向长短时记忆循环卷积神经网络和级联的全连接网络后，获得输出信号流并转化成方波信号，滤波后，对上升沿或下降沿进行统计分析。本发明能有效过滤非跳绳测试人员的干扰，做到更精确的跳绳统计分析。
主权项：1.一种基于视频-音频多模态深度学习的多人跳绳分析方法，其特征在于，包括以下步骤：S1.获取跳绳过程的音像文件，并对音像文件中的视频和音频进行分离，得到视频图像信号和立体声音频信号；S2.针对视频图像信号进行人像检测和提取，并对目标人像进行跟踪，提取目标人像的骨骼特征点坐标并进行预处理，获取预处理后的视频信号；S3.获取立体声音频信号中的单通道音频信号，将单通道音频信号进行切片和截取，并进行时频变换获得频谱信号和预处理，获取预处理后的音频信号；S4.对预处理后的视频信号和音频信号进行融合，获得视频-音频融合信号，将视频-音频融合信号通过双向长短时记忆循环卷积神经网络和级联的全连接层后，获得输出信号流，将输出的信号流转化成方波信号；S5.将方波信号进行滤波后，对上升沿或下降沿进行统计分析，其中一个上升沿或下降沿即为一次真实的跳绳动作，从而得到跳绳统计分析。
全文数据：
权利要求：
百度查询： 开望(杭州)科技有限公司 一种基于视频-音频多模态深度学习的多人跳绳分析方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号