买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:北京智谱华章科技有限公司
摘要:本公开实施例提供一种垂域主观题评分用模型的选择方法和垂域主观题的评分方法。垂域主观题评分用模型的选择方法,包括:构建针对垂域主观题的多个评分提示模板,并基于各个评分提示模板构建模型输入;采用待选择大语言模型处理模型输入,得到针对答案的单角度评分;将同一种评分提示模板对应的单角度评分进行大小排序,并基于排序顺序确定加权权重;按照加权权重分别将待选择大语言模型输出的单角度评分进行加权求和,得到各个待选择大语言模型的多角度评分;选择多角度评分最大或者最小的预设数量待选择大语言模型作为垂域主观题评分用模型。采用本公开实施例方案选择确定的垂域主观题评分用模型作为真实应用模型更为合理。
主权项:1.一种垂域主观题评分用模型的选择方法,其特征在于,包括:构建针对垂域主观题的多个评分提示模板,并基于各个评分提示模板、所述垂域主观题和针对所述垂域主观题的答案构建模型输入;各个评分提示模板分别从特定提示角度提示对答案进行评分,各个评分提示模板的提示角度均根据垂域专家经验确定,各个评分提示模板的提示角度不同;各个模型输入均包括一个评分提示模板;采用待选择大语言模型处理模型输入,得到待选择大语言模型在各个评分提示模板下针对答案的单角度评分;将待选择大语言模型处理包括同一种评分提示模板的模型输入得到的单角度评分进行大小排序,确定排序顺序,并基于所述排序顺序确定对应同一评分提示模板的各个单角度评分的加权权重;按照所述加权权重,分别将待选择大语言模型输出的单角度评分进行加权求和,得到各个待选择大语言模型的多角度评分;按照单角度评分与垂域主观题答案质量的相关性关系,选择多角度评分最大或者最小的预设数量待选择大语言模型作为垂域主观题评分用模型。
全文数据:
权利要求:
百度查询: 北京智谱华章科技有限公司 垂域主观题评分模型的选择方法和垂域主观题的评分方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。