Document
拖动滑块完成拼图
个人中心

预订订单
服务订单
发布专利 发布成果 人才入驻 发布商标 发布需求

在线咨询

联系我们

龙图腾公众号
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 恭喜西北大学肖云获国家专利权

恭喜西北大学肖云获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网恭喜西北大学申请的专利一种文本视频多模态融合的视频时刻检索方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119537644B

龙图腾网通过国家知识产权局官网在2025-04-11发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510095596.6,技术领域涉及:G06F16/732;该发明授权一种文本视频多模态融合的视频时刻检索方法是由肖云;王宁;舒键;吕昊;程梦习;段佳顺;房鼎益;陈晓江设计研发完成,并于2025-01-22向国家知识产权局提交的专利申请。

一种文本视频多模态融合的视频时刻检索方法在说明书摘要公布了:本申请涉及一种文本视频多模态融合的视频时刻检索方法,将文本特征和多尺度视频特征进行全局融合,得到全局偏移量;将文本特征和多尺度视频特征进行局部融合,得到局部偏移量;累加全局偏移量和局部偏移量,得到总的偏移量;根据总的偏移量确定每个候选时刻对应的时间片段;对所有的时间片段采用非极大值抑制方法进行处理,得到最终的时间片段,即为确定的文本查询信息在原始视频中对应的时间片段。本申请解决了现有技术忽略了全局特征融合与局部特征融合的问题,既能捕捉到文本与视频之间的全局语义一致性,同时能够在更细粒度的层次上进行融合,有效的提升了视频时刻检索的准确性。

本发明授权一种文本视频多模态融合的视频时刻检索方法在权利要求书中公布了:1.一种文本视频多模态融合的视频时刻检索方法,其特征在于,包括:对文本查询信息采用文本编码器进行特征提取,得到文本特征;对原始视频采用视频特征提取骨干网络进行特征提取,得到视频特征;并采用视觉编码器将所述视频特征转换为多尺度视频特征;将所述文本特征和所述多尺度视频特征进行全局融合,得到全局偏移量;将所述文本特征和所述多尺度视频特征进行局部融合,得到局部偏移量;累加所述全局偏移量和所述局部偏移量,得到总的偏移量;将所述文本特征和所述多尺度视频特征输入查询依赖的卷积分类器,得到所述原始视频中每个时刻对应的语义得分;选取大于设定阈值的语义得分对应的时刻作为候选时刻;根据所述总的偏移量确定每个候选时刻对应的时间片段;对所有的时间片段采用非极大值抑制方法进行处理,得到最终的时间片段,即为确定的所述文本查询信息在所述原始视频中对应的时间片段;其中,将所述文本特征和所述多尺度视频特征进行全局融合,得到全局偏移量,包括:所述文本特征经过多层感知机处理以及张量变换操作后,得到卷积核权重;将所述文本特征与所述多尺度视频特征进行通道维度上的拼接,得到拼接后的特征;对所述拼接后的特征进行卷积操作,得到混合特征;对所述混合特征进行傅里叶卷积,得到傅里叶卷积后的特征;对所述傅里叶卷积后的特征进行动态掩码生成,得到掩码张量;所述掩码张量和所述傅里叶卷积后的特征相乘,得到相乘结果;对所述相乘结果进行逆傅里叶变换,得到逆操作后的特征;所述逆操作后的特征与所述卷积核权重进行卷积,得到全局偏移量;其中,将所述文本特征和所述多尺度视频特征进行局部融合,得到局部偏移量,包括:所述文本特征经过多层感知机处理以及张量变换操作后,得到卷积核权重;所述多尺度视频特征与所述卷积核权重进行卷积操作,得到局部偏移量。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人西北大学,其通讯地址为:710069 陕西省西安市太白北路229号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。