买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:传播大脑科技(浙江)股份有限公司
摘要:本申请实施例提供了一种基于语义对齐的媒体信息跨模态检索方法、系统及介质,该方法包括:获取查询请求,基于查询请求生成用户查询数据,对用户查询数据进行预处理,得到不同模态下的语义对齐的请求数据;从不同模态的用户请求数据中提取不同模态的特征信息;将多模态特征进行特征融合,得到融合信息,基于融合信息生成统一的特征表示;基于特征表示建立不同模态数据之间的语义关联,得到关联信息;基于自然语言处理技术对关联信息分析,生成查询意图,得到跨模态检索和语义理解的结果,将跨模态检索和语义理解的结果进行展示;通过结合文本、图像、音频和视频等多种模态信息,能够更全面地理解和表达媒体内容,从而提供准确的搜索结果。
主权项:1.一种基于语义对齐的媒体信息跨模态检索方法,其特征在于,包括:获取查询请求,基于查询请求生成用户查询数据;对用户查询数据进行预处理,得到不同模态下的语义对齐的请求数据;从不同模态的用户请求数据中提取不同模态的特征信息;将多模态特征进行特征融合,得到融合信息,基于融合信息生成统一的特征表示;基于特征表示建立不同模态数据之间的语义关联,得到关联信息;基于自然语言处理技术对关联信息分析,生成查询意图,得到跨模态检索和语义理解的结果,将跨模态检索和语义理解的结果进行展示。
全文数据:
权利要求:
百度查询: 传播大脑科技(浙江)股份有限公司 基于语义对齐的媒体信息跨模态检索方法、系统及介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。