买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：小语智能信息科技(云南)有限公司

摘要：本发明涉及融合双重注意力机制的缅甸语图像文本识别方法及装置，属于自然语言处理领域。缅甸语字符具有独特的语言编码结构以及字符组合规则，为了解决缅甸语图像中上下标字符容易丢失导致准确率低的问题，本发明提出了一种融合双重注意力机制的缅甸语图像文本识别方法，主要包括缅甸语图像数据集构建及预处理、融合通道注意力和空间注意力的缅甸语图像特征增强、基于多头注意力解码器的缅甸语图像文本识别模型构建以及缅甸语图像文本识别四部分构成。根据这四个部分功能模块化制成融合双重注意力机制的缅甸语图像文本识别方法及装置，相比通用的图像文本识别方法本发明有效地缓解了缅甸语图像中字符上下标字符缺失导致识别准确率低的问题。

主权项：1.融合双重注意力机制的缅甸语图像文本识别方法，其特征在于：所述方法的具体步骤如下：Step1、缅甸语图像数据集构建及预处理：结合缅甸语的字符组合特征构造适应任务需求的缅甸语文本图像数据集；为丰富数据的多样性，构建的数据集包含不同噪声、不同倾斜角度、不同背景颜色以及不同编码字体；Step2、融合通道注意力和空间注意力的缅甸语图像特征增强：采用深度卷积神经网络对输入的缅甸语文本图像进行特征提取，将获得的特征图按通道的维数分组为子特征；对于每一项子特征，同时构造通道注意力和空间注意力机制，来获取缅甸语图像更细粒度的位置特征和通道映射特征，并将获取的两个特征进行融合，使得模型能更多地关注到缅甸语文本图像的上下标区域，提取到缅甸语图像中更多的文字边缘特征；Step3、利用基于多头注意力机制的序列编码器-解码器对缅甸语图像文本识别模型进行识别：利用基于多头注意力机制的序列编码器-解码器对融合通道注意力和空间注意力增强后的缅甸语图像特征进行解码，基于多头注意力机制的序列编码器-解码器通过特征图进行注意力计算获取整张缅甸语图像的全局信息，结合标签训练让模块关注到更准确的缅甸语文字区域，使模型进行并行训练；所述Step1的具体步骤为：Step1.1、通过缅甸语网站获取跨境缅甸语文本数据，然后进行去重、切分、过滤特殊字符预处理，构建缅甸语序列标注文本标签数据集；Step1.2、由于缅甸语的Zawgyi-One字体和Pyidaungsu字体的编码方式不一样，Zawgyi-One字体是通过“Zawgyi”方式编码的，而Pyidaungsu字体则是通过“Unicode”方式编码的；构造缅甸语Zawgyi-One和Pyidaungsu字体混合文本图像数据，使得训练的缅甸语文本图像识别模型能够识别不同编码字体的文本图像，图像中文本对应的标签通过缅甸语字体转换工具“CONVERTERSZawgyiAndUnicode”统一为Pyidaungsu字体文本；Step1.3、利用文本图像合成算法将处理好的缅甸语文本数据生成对应的文本图像，为了使训练的模型具有更好的鲁棒性和泛化性，生成的图像数据集包含了不同噪声、背景颜色、倾斜角度以及不同编码字体的缅甸语文本图像，并划分出相应的训练集、验证集和测试集。

全文数据：

权利要求：

百度查询： 小语智能信息科技(云南)有限公司 融合双重注意力机制的缅甸语图像文本识别方法及装置