买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:三星电子(中国)研发中心;三星电子株式会社
摘要:本申请公开了一种视频摘要生成方法和装置,其中方法包括:基于用户的行为数据,采用自注意力计算方式,生成所述用户的注意力编码参数;基于所述用户的注意力编码参数,确定目标视频的每个片段是否为所述用户的兴趣片段,并从所述兴趣片段中提取出兴趣帧;采用注意力计算方式,对所述兴趣帧进行融合处理,得到所述目标视频的视频摘要。采用本申请,可以提高视频摘要的生成效率,降低应用成本,并且有利于提高视频观看率。
主权项:1.一种视频摘要生成方法,其特征在于,包括:针对每个用户,基于用户的行为数据,采用自注意力计算方式,生成所述用户的注意力编码参数;所述生成所述用户的注意力编码参数包括:对所述用户的行为数据进行编码,得到所述行为数据的向量表示;将所述向量表示输入至预设的第一自注意力计算模型进行处理,得到所述用户的注意力编码参数;基于所述用户的注意力编码参数,确定目标视频的每个片段是否为所述用户的兴趣片段,并从所述兴趣片段中提取出兴趣帧;所述确定目标视频的每个片段是否为所述用户的兴趣片段,并从所述兴趣片段中提取出兴趣帧包括:对于每个所述片段,对该片段中的每个视频帧进行编码,并将编码得到的所有视频帧向量表示,输入至预设的第二自注意力计算模型进行自注意力处理,得到该片段中每个视频帧的注意力;将该片段对应的所有所述注意力与所述用户的注意力编码参数进行匹配,得到该片段与所述用户之间的匹配值,基于所述匹配值,判断该片段是否为兴趣片段,如果是,则基于所述自注意力处理过程中获得的每个所述注意力对应的帧间权重,从该片段中选择所述帧间权重大于预设兴趣阈值的帧,作为兴趣帧;采用注意力计算方式,对所述兴趣帧进行融合处理,得到所述目标视频的视频摘要。
全文数据:
权利要求:
百度查询: 三星电子(中国)研发中心 三星电子株式会社 一种视频摘要生成方法和装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。