买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：西南科技大学

摘要：本发明提出一种新的基于深度学习的示温漆蝶形样片标定方法。首先，使用特定的实验设置，包括高分辨率照相机和照明系统，采集在不同温度条件下示温漆变色反应的蝶形样片图像；其次，通过Labelme工具对这些图像中的等温线及相邻区域进行详细标注，根据颜色变化将图像分为五个类别，以支持精确的区域划分，并在已有的数据基础上进行数据增强；接着，采用数据加载器和归一化技术处理图像，使其符合预训练网络的输入要求；之后，在MAE模型的基础上，通过多层Transformer编码器对图像块的特征进行抽象和编码，实现对示温漆颜色变化的深入学习和识别；随后，利用UPerNet网络通过解码过程结合上采样技术逐步恢复图像的空间细节，生成高精度的颜色分割图；最终，将这些图像处理结果用于精确标定示温漆的颜色变化区域，辅助确定实验中的二次标定点位。本方法极大提高了示温漆二次标定的精度和效率，适用于需要高准确性温度检测的科研和工业领域。

主权项：1.一种新的基于深度学习的示温漆蝶形样片标定方法，其特征在于，利用机器视觉获取蝶形样片的示温漆信息，实现对蝶形样片示温漆等温线的提取，并实现二次标定辅助，包括采集数据制作数据集及数据增强、通过MAE-UperNet网络输出分割图和计算分割区域轮廓几何特性得到实际物理距离三个部分，第一部分包括三个步骤：步骤1，使用搭建的实验平台采集不同示温漆变化的蝶片图片；步骤2，将采集到图片使用Labelme工具进行标注，作为第二部分网络训练的数据集；步骤3，数据增强，将除背景以外的部分进行随机的HSV色彩空间内的颜色调整，增强图像数据的多样性；第二部分包括六个步骤：步骤4，将输入的图像全部调整为512x512像素，并做归一化处理；步骤5，使用编码器将步骤4处理后的图像切分为多个小块patches，每个patch是16x16像素，再通过一个线性层将这些patches映射到一个768维度的空间，接着将这些经过映射的patches输入到一个由多个Transformer层组成的编码器中，这些层使用自注意力机制来处理序列化的patch表示，允许模型捕捉不同patch之间的关系，最终得到每个patch的高级特征表示；步骤6，将步骤5得到的高级特征通过输出索引传递到解码器，输出索引决定了哪些编码器层的输出将被用于解码过程，解码器会接收来自不同Transformer层输出的特征，这些特征代表了不同的尺度和抽象层次；步骤7，解码器使用接收到的步骤6的特征进行一系列操作，包括卷积、上采样等，逐步恢复特征图的空间维度，直至接近原始图像的尺寸，并通过分割头将高级特征映射到像素级的类别预测，分割头包括几个卷积层，用于生成最终的语义分割图，其中每个像素位置的输出代表一个类别标签；步骤8，利用了交叉熵损失作为主要的损失函数，并结合权重衰减及批量归一化等多种技术来提升模型的训练效果和泛化能力，帮助模型在训练过程中避免过拟合，并在多类图像分割任务中达到较好的性能；步骤9，输出一个与输入图像相同分辨率的分割图，每个像素对应一个类别标签，这些标签表示该像素属于输入图像中的哪个语义类别；第三部分包括四个步骤：步骤10，计算非背景区域的ROI子图，将预测结果二值化，非背景区域置为1，否则置为0，提取二值图的轮廓，对每个轮廓计算外接旋转矩形；找到外接旋转矩形最大的轮廓，作为唯一的非背景区域轮廓；使用仿射变换得到旋转矩形内部的图像，作为ROI子图；步骤11，色块轮廓提取；步骤11-1，得到每个类别的色块二值图，若为该类别则为1，否则为0；步骤11-2，计算第1类的中中心点：对第一类的二值图进行形态学开操作，提取轮廓，若存在多个轮廓则取面积最大的轮廓，计算轮廓重心，记为offsetx，offsety；步骤11-3，非第1类二值图裁剪：其余的3个类别，每个类别根据中心点裁剪为上下左右4个部分；步骤11-4，首先对每个二值图进行形态学开操作，然后提取轮廓，并记录轮廓所对应的二值图的方位左上，左下，右上，右下；步骤12，在处理图像的ROI子图时，首先剔除面积小于50像素的噪声轮廓，然后根据轮廓的方位确定和记录每个轮廓的最边缘点；接着，在ROI子图中确定靠近四角的点，并将这些点映射回原图，以标定测量温度所需的关键点，这些关键点按方位分组后，计算组内点的相对距离，用于进一步分析和测量；步骤13，通过棋盘格标定方法确定相机的像素与物理坐标的转换关系，首先采集一个10×10棋盘格每格10mm的图像，提取并排序角点坐标，以左上角角点为原点，构建世界坐标系下的角点坐标，计算图像到世界坐标的转换矩阵，并使用此矩阵转换图像坐标，以计算物理距离。

全文数据：

权利要求：

百度查询： 西南科技大学 一种新的基于深度学习的示温漆蝶形样片标定方法