买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

摘要：本发明公开了一种深度图文分析的语义整合分析方法及系统，涉及数据处理技术领域。所述方法包括：对目标图文进行语义分割处理，分割提取获得主体图像、背景图像和文字图像；对文字图像进行识别，获取多个文字语义概率；进行情境类型分析，获得多个背景语义概率；获得主体情境类型；对主体图像进行动作预测，获得主体动作图像序列，并进行主体动作情境分析，获得多个主体语义概率；融合处理获得多个融合语义概率，筛选融合语义概率最大的文字语义，作为语义整合结果进行展示。解决了传统图文分析缺乏对图像和文字之间语义关联的整合，导致分析结果不够准确的技术问题，通过对文字语义进行多维度修正和融合，达到了提高图文分析准确性的技术效果。

主权项：1.一种深度图文分析的语义整合分析方法，其特征在于，所述方法包括：对待进行分析的目标图文进行语义分割处理，分割提取获得主体图像、背景图像和文字图像；对所述文字图像进行识别，获得多个文字语义，并获取所述多个文字语义的多个文字语义概率；根据所述背景图像进行情境类型分析，获得背景情境类型，分析与所述多个文字语义的关联系数，对所述多个文字语义概率进行背景修正，获得多个背景语义概率，其中，所述背景修正包括将所述多个文字语义概率与对应的所述多个文字语义的关联系数相乘，并进行归一化处理以确保概率之和为1，获得多个背景语义概率；对所述主体图像进行情境类型分析，获得主体情境类型；对所述主体图像进行动作预测，获得主体动作图像序列，并进行主体动作情境分析，获得主体动作情境类型，结合所述主体情境类型，对所述多个文字语义概率进行主体修正，获得多个主体语义概率，其中，所述主体修正包括对主体语义关联系数和动作语义关联系数进行加权计算获得多个语义关联系数，将所述多个文字语义概率与对应的所述多个语义关联系数相乘，并进行归一化处理以确保概率之和为1，获得多个主体语义概率；根据所述多个背景语义概率和多个主体语义概率，融合处理获得多个融合语义概率，筛选融合语义概率最大的文字语义，作为语义整合结果进行展示，其中，所述融合处理包括获取所述主体图像和背景图像的图像面积占比，按照所述图像面积占比配置主体权重和背景权重，采用所述主体权重和所述背景权重，对所述多个主体语义概率和所述多个背景语义概率进行加权计算，获得多个融合语义概率。

全文数据：

权利要求：

百度查询： 成都云览科技有限公司 一种深度图文分析的语义整合分析方法及系统