恭喜西北工业大学宋凌云获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜西北工业大学申请的专利基于多视图信息融合的教育领域图像场景图生成方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115761036B 。
龙图腾网通过国家知识产权局官网在2025-05-30发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202211156523.6,技术领域涉及:G06T11/20;该发明授权基于多视图信息融合的教育领域图像场景图生成方法是由宋凌云;伍智广;张炀;尚学群;张弛;李战怀设计研发完成,并于2022-09-22向国家知识产权局提交的专利申请。
本基于多视图信息融合的教育领域图像场景图生成方法在说明书摘要公布了:本发明提出了一种基于多视图信息融合的教育领域图像场景图生成方法,从图中对象的视觉信息以及对象间的多种交互信息等多个方面捕捉图像的语义。本发明的贡献在于:提出了一种面向教育领域图像的多视图信息融合的场景图SceneGraph生成方法,该方法可以利用图像的多个不同视图view,挖掘出图像中对象的语义、以及对象间不同类型的关联关系,从而生成一个包含多种类型节点和边的异构场景图。该场景图从视觉对象的语义,以及对象间不同的关联表征教育领域图像抽取、复杂的语义信息。
本发明授权基于多视图信息融合的教育领域图像场景图生成方法在权利要求书中公布了:1.一种基于多视图信息融合的教育领域图像场景图生成方法,其特征在于步骤如下:步骤1:多视图的构建步骤1.1:对象视图的构建:利用FasterR-CNN对象检测器,识别图中对象的类别和位置坐标,并利用卷积神经网络构建被识别对象的视觉信息编码,与图中对象进行结合,作为视觉图的一个节点构建一个全连接的对象视图;步骤1.2:语义视图的构建:首先基于OCR技术和无监督语义分割技术,细粒度地识别图中文本信息,然后对不同类别的上下文信息进行加权融合,增加网络的推理能力,最后构成一个全连接的语义视图;步骤2:多视图信息融合模块的构建步骤2.1:语义视图和对象视图的融合:利用语义视图中的节点信息,使用图卷积网络,在语义视图和对象视图之间构建一个全连接的网络,对对象视图中的节点信息进行更新,期望以此获得对象间的语义信息;步骤2.2:对象视图的自融合:在融合过语义视图之后,利用步骤2.1的融合方法,构建对象视图之间的全连接网络,对对象视图进行自更新;步骤3:视觉场景图生成模块的构建步骤3.1:基于语义关系的视觉场景图的生成:对象视图的节点特征更新后,通过计算节点之间语义交互的概率分布,生成基于语义关系的视觉场景图;视觉场景图中的节点代表对象的区域及其类别标签,边表示视觉对象之间的语义交互类别;步骤3.2:基于位置关系的视觉场景图的生成:首先利用视觉对象的边界框的交并比IntersectionoverUnion,判断两个对象之间是否存在包含或重叠的关系;若IOU0.5,则通过计算它们边界框中心点之间的距离及角度,来判断它们之间的细粒度位置交互类别,所述的细粒度位置交互类别包括上、下、左、右、左上、左下、右上和右下八种类别。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人西北工业大学,其通讯地址为:710072 陕西省西安市友谊西路;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。