龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：杭州华橙软件技术有限公司
摘要：本申请公开了一种多模态目标检索方法、设备及存储介质，该多模态目标检索方法包括：对待检索图像进行图像编码得到待检索图像特征，并对提示文本进行文本编码得到文本特征；基于待检索图像特征识别得到候选目标的候选目标区域，获取候选目标区域对应的初始区域特征；利用交叉注意力机制计算文本特征与初始区域特征之间的注意力，得到图文注意力参数；基于图文注意力参数对候选目标区域进行区域图像编码，得到区域视觉特征；计算文本特征与区域视觉特征之间的匹配度，筛选匹配度满足预设条件的区域视觉特征对应的候选目标，得到目标检索结果。使用提示文本信息驱动区域视觉特征的提取，优化区域特征提取能力，提高了目标检索的精度。
主权项：1.一种多模态目标检索方法，其特征在于，包括：获取待检索图像和提示文本，对所述待检索图像进行图像编码得到待检索图像特征，并对所述提示文本进行文本编码得到文本特征；其中，所述待检索图像中含有候选目标，所述提示文本用于描述待检索目标的视觉属性信息；基于所述待检索图像特征识别所述待检索图像中含有的候选目标的候选目标区域，获取所述候选目标区域对应的图像特征，得到初始区域特征；利用交叉注意力机制计算所述文本特征与所述初始区域特征之间的注意力，得到图文注意力参数；基于所述图文注意力参数对所述候选目标区域进行区域图像编码，得到所述候选目标区域对应的区域视觉特征；计算所述文本特征与所述区域视觉特征之间的匹配度，筛选匹配度满足预设条件的区域视觉特征对应的候选目标，得到目标检索结果。
全文数据：
权利要求：
百度查询： 杭州华橙软件技术有限公司 多模态目标检索方法、设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号