买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：广州探迹科技有限公司

摘要：本发明公开了一种基于自蒸馏的命名实体识别与纠错方法，包括：针对命名实体识别模型进行训练；命名实体识别模型包括第一层模型、第二层模型和第三层模型；第一层模型用于根据无标注数据进行训练，以及将第一层模型中的概率分布压缩到第二层模型中；第二层模型用于进行命名实体提取；第三层模型用于对提取的命名实体进行错误检测及进行错误修正；获取待提取命名实体的文本并输入模型；通过命名实体识别模型进行命名实体的提取。采用该种方法，可以解决进行文本命名实体提取时，文本中出现语法错误或标点符号错误时会导致前后文特征过强，提取出错误命名实体的问题。同时，可以在提取到错误命名实体时进行自动纠正，从而达到了更精准提取的效果。

主权项：1.一种基于自蒸馏的命名实体识别与纠错方法，其特征在于，包括：针对命名实体识别模型进行训练；所述命名实体识别模型包括第一层模型、第二层模型和第三层模型；所述第一层模型用于根据无标注数据进行训练，以及将所述第一层模型中的概率分布压缩到所述第二层模型中；所述第二层模型用于进行命名实体提取；所述第三层模型用于对提取的所述命名实体进行错误检测，以及，在检测到错误后进行错误修正；其中，所述对提取的所述命名实体进行错误检测，包括：计算所述命名实体的语法逻辑合理性并打分；若所述命名实体的语法逻辑合理性打分高于预设第一阈值，则将提取的所述命名实体作为结果输出；若所述命名实体的语法逻辑合理性打分低于所述预设第一阈值，则确认提取的所述命名实体错误；其中，所述语法逻辑合理性是通过预设的语言模型根据上下词进行打分得到；所述在检测到错误后进行错误修正，包括：根据提取的所述命名实体，生成修正候选集；对所述修正候选集的命名实体进行评估；根据评估结果，从所述修正候选集中选取命名实体，作为提取的所述命名实体的修正结果；其中，所述对所述修正候选集的命名实体进行评估，包括：获取所述修正候选集的命名实体的修改率统计数据；计算所述修正候选集的命名实体与专有词库中的命名实体的第一语义相似度；计算所述修正候选集的命名实体与公共词库中的命名实体的第二语义相似度；根据所述修改率统计数据、所述第一语义相似度和所述第二语义相似度，对所述修正候选集的命名实体进行评估；获取待提取命名实体的文本并输入所述命名实体识别模型；通过所述命名实体识别模型进行所述命名实体的提取。

全文数据：

权利要求：

百度查询： 广州探迹科技有限公司 一种基于自蒸馏的命名实体识别与纠错方法