买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明提供了基于情感感知表征解耦与偏移的多模态情感分析方法及产品,涉及人工智能与情感计算技术领域。本发明实施例中,在得到每个非文本模态特征对应的情感表示的过程中,考虑了不同模态的信息,具体而言,通过交互式情感感知的表征解耦模块,在多种模态的信息的交互和相互影响下提取了每个非文本模态特征对应的情感表示,并且去除了每个非文本模态特征中与情感无关的冗余特征,使用解耦的每个非文本模态特征对应的情感表示来偏移原始的文本模态特征,使得大量冗余和不相关的信息不会偏移到文本模态特征中;偏移操作不会破坏原始的文本模态特征,降低了下游预训练语言模型微调的难度。
主权项:1.一种基于情感感知表征解耦与偏移的多模态情感分析方法,其特征在于,应用于情感感知表征解耦与偏移系统,所述方法包括:获取多模态特征,所述多模态特征包括:文本模态特征和多个非文本模态特征;通过交互式情感感知的表征解耦模块,分别以每个非文本模态特征为输入,以文本模态特征和其他非文本模态特征为引导,进行情感极性分析,得到每个非文本模态特征对应的情感极性表示,以每个非文本模态特征为输入,以文本模态特征、其他非文本模态特征以及每个非文本模态特征对应的情感极性表示为引导,进行情感分析,得到每个非文本模态特征对应的情感表示;通过注意力跨模态表示偏移解耦模块,将多个非文本模态特征对应的情感表示均投影到文本表示空间,根据多个非文本模态特征各自对应的偏移缩放因子、投影后的非文本模态特征对应的情感表示和文本模态特征,得到情感偏移文本向量;将情感偏移文本向量输入微调后的预训练语言模型,得到情感分类结果。
全文数据:
权利要求:
百度查询: 清华大学 基于情感感知表征解耦与偏移的多模态情感分析方法及产品
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。