首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于对抗性多模态自动编码器的危机信息检测方法及系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:齐鲁工业大学

摘要:本发明属于信息处理技术领域,提供了基于对抗性多模态自动编码器的危机信息检测方法及系统,提出了一种端到端的AMAE模型,用于社交媒体上危机相关信息的检测与分析,由四个模块组成:特征提取模块、自动编码器模块、对抗性模块、检测模块。特征提取模块与自动编码器模块用于提取多模态表示,检测模块用于得出检测与分析的决策,对抗性模块通过缩小异构模态异质性差异与减少单峰信息的丢失来优化多模态表示,在大型真实数据集上验证了该模型的有效性。

主权项:1.基于对抗性多模态自动编码器的危机信息检测方法,其特征在于,包括如下步骤:获取待检测的多模态数据;基于待检测的多模态数据,采用对抗性多模态自动编码器学习图像模态数据与文本模态数据得到多模态联合表示;其中,所述对抗性多模态自动编码器的构建过程包括:基于文本特征表示和视觉特征表示和自动编码器模块得到初始多模态联合表示;基于初始多模态联合表示和对抗性模块,采用最小最大博弈法进行直接优化以及间接优化得到直接多模态联合表示和间接多模态联合表示,基于直接多模态联合表示和间接多模态联合表示得到多模态联合表示;基于多模态联合表示和检测模型检测得到危机信息;其中,所述采用最小最大博弈法进行直接优化以及间接优化得到直接多模态联合表示和间接多模态联合表示包括:对原始文本特征表示和视觉特征表示进行编码,基于编码后的文本特征表示和视觉特征表示进行直接优化得到直接多模态联合表示;基于直接多模态联合表示进行重构得到重构文本特征表示和视觉特征表示;基于原始文本特征表示和视觉特征表示和重构文本特征表示和视觉特征表示进行间接优化得到间接多模态联合表示。

全文数据:

权利要求:

百度查询: 齐鲁工业大学 基于对抗性多模态自动编码器的危机信息检测方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。