Document
拖动滑块完成拼图
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于transformer的对角线-全局性注意力机制的图像分割方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:淮阴工学院

摘要:本发明涉及图像处理技术领域,公开了一种基于transformer的对角线‑全局性注意力机制的图像分割方法,对待分割图像利用图像分割模型分割,在SETR模型基础上对backbone部分的自注意力机制进行改进,采用对角线‑全局性注意力机制,在关注对角线补丁块的基础上选取部分嵌入块进行全局注意力机制,其他嵌入块有选择性的进行注意力机制计算,在补丁嵌入方式上也进行了修改,将普通的矩形嵌入方式改成L形状补丁组成的形式,保证在捕捉到图像的局部细节信息的同时获取更广阔的上下文信息。与现有技术相比,本发明能够尽量少的关注区域且尽量多的提取图像特征,进一步提高分割精度降低参数量。

主权项:1.一种基于transformer的对角线-全局性注意力机制的图像分割方法,其特征在于,包括如下步骤:步骤1:获取待处理的图像数据集,对其进行预处理,按比例随机分为训练集、验证集;预处理时,首先将图像数据集中的图像裁剪成尺寸为n×n的正方形图片,n为图像大小;并将其裁剪成多个尺寸为m×m小方格图片,图像每行每列均有个小方格图片组成,m为每个小方格图片的大小,为每个小方格图片匹配对应的位置信息;步骤2:构建图像分割模型,所述图像分割模型在SEgementationTRansformer模型基础上对backbone部分的自注意力机制进行改进,提出对角线-全局性注意力机制和L形补丁嵌入块;所述对角线-全局性注意力机制首先选取对角线小方格图片区域关注,然后每隔s行和s列选取一个小方格图片关注该小方格图片的所在行和所有列进行关注,最后选取对角线左右各u个小方格图片进行关注,u为小于的正整数;所述L形补丁嵌入块将对角线-全局性注意力机制选取好关注的图像进行拆分,拆分为多个k×k,k+2×k+2,k+2+2×k+2+2···,p×p个不同尺寸的正方形图片作为嵌入块,p为小于的正整数,k为正整数;除第一个k×k嵌入块直接进行encoder操作外,其他图片用当前正方形嵌入块去减上一个嵌入块,获得一个长宽均为2个小方格图片宽度的L形的嵌入块来进行encoder操作;步骤3:利用改进后的图像分割模型对步骤1中待处理的图像进行分割。

全文数据:

权利要求:

百度查询: 淮阴工学院 基于transformer的对角线-全局性注意力机制的图像分割方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。