买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：哈尔滨工业大学(威海);南京龙垣信息科技有限公司

摘要：本发明涉及数据处理技术领域，具体涉及一种基于背景先验的弱监督语义分割方法，包括：将仅带有图像级标签的特定数据集输入背景聚类算法中根据像素值进行背景聚类，得到聚类掩码图；将数据集输入到在自然图像上经过预训练的SAM模型中进行推理，得到预训练掩码图；通过分割结果融合模块将聚类掩码图和预训练掩码图进行基于IOU的掩码融合，生成背景掩码图；利用多个串行的多尺度拼接卷积块，实现数据集特征的塔式提取，生成分类特征图；将背景掩码图对分类特征图中的前景和背景进行区分；将前景输入到分类器进行分类操作，并进行视觉可视化；本发明解决了现有的语义分割技术中分割标签难以获得和弱监督分割效果不佳的问题。

主权项：1.一种基于背景先验的弱监督语义分割方法，其特征在于，包括：将仅带有图像级标签的特定数据集输入背景聚类算法中根据像素值进行背景聚类，得到聚类掩码图；将所述数据集输入到在自然图像上经过预训练的SAM模型中进行推理，得到预训练掩码图；通过分割结果融合模块将所述聚类掩码图和预训练掩码图进行基于IOU的掩码融合，生成背景掩码图；利用多个串行的多尺度拼接卷积块，实现所述数据集特征的塔式提取，生成分类特征图；将所述背景掩码图对分类特征图中的前景和背景进行区分；将所述前景输入到分类器进行分类操作，并进行视觉可视化，生成语义分割图；所述将仅带有图像级标签的特定数据集输入背景聚类算法中根据像素值进行背景聚类，得到聚类掩码图的具体步骤包括：将输入图像进行RGB图转灰度图的操作，删除图像的透明度通道；通过对像素进行由大到小的排列，将所述图像包含的像素点组成像素序列，对固定值个相邻像素点序列的首个像素值与末尾像素值进行距离计算，找出拥有最大距离的像素序列，将该像素序列的中值做为阈值进行划分，实现颜色分割，生成聚类掩码图；所述将所述数据集输入到在自然图像上经过预训练的SAM模型中进行推理，得到预训练掩码图的具体步骤包括：将数据集通过权重冻结的图像token编码器进行编码，并将特征向量以numpy形式保存；利用numpy向量解码得到多个实例分割图并进行过滤，删除噪点级别的实例并对剩余实例进行分割图掩码累加，当掩码出现重叠时，使用掩码图以防止目标信息的丢失。

全文数据：

权利要求：

百度查询： 哈尔滨工业大学(威海) 南京龙垣信息科技有限公司 基于背景先验的弱监督语义分割方法