买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜湖南工商大学申请的专利多模态信息提取方法、装置、计算机设备及存储介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119089395B 。

龙图腾网通过国家知识产权局官网在2025-03-25发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411573724.5，技术领域涉及：G06F18/25；该发明授权多模态信息提取方法、装置、计算机设备及存储介质是由胡春华;聂伊朵;张雪荣;袁一豪设计研发完成，并于2024-11-06向国家知识产权局提交的专利申请。

本多模态信息提取方法、装置、计算机设备及存储介质在说明书摘要公布了：本发明公开了一种多模态信息提取方法、装置、计算机设备及存储介质，包括：对多模态信息进行类型匹配，得到至少两个目标类型；针对每个目标类型，采用目标类型对应的特征提取方式进行特征提取，得到目标类型对应的目标特征；对所有目标特征进行特征融合，得到融合特征，实现了对多模态信息中的数据特征进行全面提取和融合，提高多模态信息识别的准确性。

本发明授权多模态信息提取方法、装置、计算机设备及存储介质在权利要求书中公布了：1.一种多模态信息提取方法，其特征在于，包括：对多模态信息进行类型匹配，得到至少两个目标类型，其中一个目标类型为文本类型，所述目标类型另一个为图像类型、知识类型、音频类型中的至少一种；针对每个所述目标类型，采用目标类型对应的特征提取方式进行特征提取，得到目标类型对应的目标特征，其中，目标类型为文本类型时，基于文本内容构建知识图谱，并从所述知识图谱中提取知识特征；对每个所述目标特征和所述知识特征进行特征融合，得到融合特征；其中，所述目标类型另一个为图像类型时，所述采用目标类型对应的特征提取方式进行特征提取，得到目标类型对应的目标特征包括：使用FasterR-CNN对象检测模型对给所述多模态信息中的初始图像进行处理，将所述初始图像转换为对象序列；为所述对象序列中的每个对象生成一个边界框，所述边界框用于表示对象的位置信息；在所述对象序列中，随机选择预设比例的对象进行屏蔽；对屏蔽后的对象序列进行嵌入操作，每个对象通过提取对象的特征向量，作为对象嵌入；针对位置和维度添加位置嵌入，得到位置嵌入向量，用于编码对象在图像中的位置信息，作为第一位置信息；将对象嵌入和所述第一位置信息相加，得到每个对象的综合表示，作为所述图像类型对应的目标特征。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人湖南工商大学，其通讯地址为：410012 湖南省长沙市岳麓区岳麓大道569号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。