买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：吉林大学

摘要：本申请公开了一种基于模式识别的眼底图像诊断分析系统及方法，涉及智能分析领域，其通过结合模式识别技术和图像处理技术，对被诊断患者对象的眼底彩照进行全面且多尺度的特征提取，以学习和捕捉眼底的异常状态，并进一步地实现眼底异常类型的判别。通过这样的方式，辅助医生进行眼底病变筛查，有助于减轻医生的工作负担。

主权项：1.一种基于模式识别的眼底图像诊断分析系统，其特征在于，包括：眼底彩照获取模块，用于获取被诊断患者对象的眼底彩照；颜色分布特征提取模块，用于提取所述眼底彩照的颜色特征以得到眼底颜色分布特征向量；眼底结构语义特征提取模块，用于提取所述眼底彩照的图像语义特征以得到眼底结构语义特征图；全局上下文信息强化融合模块，用于对所述眼底结构语义特征图进行全局上下文信息强化和多尺度信息融合以得到眼底结构多尺度融合语义特征图；跨模态联合编码模块，用于将所述眼底颜色分布特征向量和所述眼底结构多尺度融合语义特征图输入跨模态联合编码器以得到眼底多模态特征融合图；眼底异常诊断模块，用于基于所述眼底多模态特征融合图来确定诊断结果，所述诊断结果用于表示眼底异常类型标签；其中，所述全局上下文信息强化融合模块，包括：全局语义抽象表示单元，用于将所述眼底结构语义特征图输入上下文编码模块以得到全局语义权重向量；上下文信息强化单元，用于基于所述全局语义权重向量，对所述眼底结构语义特征图的沿通道维度的各个局部特征矩阵进行加权以得到上下文强化眼底结构语义特征图；多尺度语义信息融合单元，用于融合所述上下文强化眼底结构语义特征图和所述眼底结构语义特征图以得到所述眼底结构多尺度融合语义特征图；其中，所述颜色分布特征提取模块，包括：颜色直方图单元，用于使用颜色直方图来提取所述眼底彩照的颜色特征以得到所述眼底颜色分布特征向量；其中，所述颜色直方图单元，用于：对所述眼底彩照进行网格划分以得到眼底彩照块的序列；计算所述眼底彩照块的序列中的各个眼底彩照块的颜色直方图以得到颜色直方图的序列；将各个所述颜色直方图中的各个元素值除以对应所述颜色直方图的元素值之和以对各个所述颜色直方图进行归一化以得到归一化颜色直方图向量的序列；将所述归一化颜色直方图向量的序列进行一维拼接以得到所述眼底颜色分布特征向量；其中，所述眼底结构语义特征提取模块，包括：灰度处理单元，用于对所述眼底彩照进行灰度处理以得到眼底灰度图像；眼底结构语义信息局部编码单元，用于将所述眼底灰度图像输入基于空洞卷积神经网络模型的眼底语义特征提取器以得到所述眼底结构语义特征图；其中，所述全局语义抽象表示单元，用于：对所述眼底结构语义特征图进行全局平均池化以得到眼底结构全局语义特征向量；使用全连接层对所述眼底结构全局语义特征向量进行编码以得到所述全局语义权重向量；其中，所述跨模态联合编码模块，用于：将所述眼底颜色分布特征向量和所述眼底结构多尺度融合语义特征图输入基于MetaNet的跨模态联合编码器以得到所述眼底多模态特征融合图；其中，所述眼底异常诊断模块，用于：将所述眼底多模态特征融合图输入基于分类器的眼底图像诊断结果生成器以得到所述诊断结果。

全文数据：

权利要求：

百度查询： 吉林大学 基于模式识别的眼底图像诊断分析系统及方法