买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:江苏源驶科技有限公司
摘要:本发明提供了一种结合动作内部位置的时序动作提名生成方法及系统,涉及计算机视觉技术领域。该方法首先采用固定的时间间隔提取未裁剪的视频帧序列,得到视频帧段;接着将视频帧段送入双流网络得到对应的双流特征;随后将双流特征输入至主干网络,由偏移窗口Transformer模块预测出视频帧段中动作的开始与结束概率序列;由提名评估模块均匀采样提名级特征并得到提名置信度图;由多尺度空洞卷积注意力模块预测出视频帧段中动作的多个内部位置,生成多个动作的内部位置概率序列;最后生成候选提名并执行分数融合,输出最终的时序动作提名集。本方法充分利用动作内部位置的特征信息,提高了时序动作提名的准确度。
主权项:1.一种结合动作内部位置的时序动作提名生成方法,其特征在于,包括如下步骤:获取未裁剪的视频帧序列;采用固定的时间间隔提取未裁剪的视频帧序列,得到视频帧段;将所述视频帧段送入由空间流网络和时间流网络构成的双流网络,分别得到视频帧段对应的双流特征;将所述双流特征输入至由偏移窗口Transformer模块、提名评估模块、多尺度空洞卷积注意力模块构成的主干网络;由偏移窗口Transformer模块预测出视频帧段中动作的开始与结束概率序列;由提名评估模块均匀采样提名级特征并得到提名置信度图;由多尺度空洞卷积注意力模块预测出视频帧段中动作的多个内部位置,生成多个动作的内部位置概率序列;基于所述开始与结束概率序列、提名置信度图、内部位置概率序列生成候选提名并执行分数融合,输出最终的时序动作提名集。
全文数据:
权利要求:
百度查询: 江苏源驶科技有限公司 一种结合动作内部位置的时序动作提名生成方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。