龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：中国—东盟信息港股份有限公司
摘要：本发明公开了一种用于LLM微调的数据组建方法、系统、设备及存储介质，属于计算机自然语言处理技术领域，解决通过单轮对话数据集微调大语言模型会导致大语言模型过拟合和多轮对话能力下降的问题，方法为：获取多条单轮对话数据，并作为用于微调大语言模型的单轮对话数据集；设置随机算子和多轮对话的轮数；根据单轮对话数据的结构、随机算子和多轮对话的轮数建立数据抽取方法，并加入数据抽取筛选机制；使用数据抽取方法对单轮对话数据集进行抽取，并组建成初始多轮对话数据集；遍历初始多轮对话数据集，剔除重复数据，获得最终多轮对话数据集。将单轮对话数据集转变为多轮对话数据集，使得大语言模型微调后降低过拟合风险并保持多轮对话能力。
主权项：1.一种用于LLM微调的数据组建方法，其特征在于，包括以下步骤：步骤1.获取多条单轮对话数据，并作为用于微调大语言模型的单轮对话数据集；步骤2.设置随机算子和多轮对话的轮数；步骤3.根据步骤1中单轮对话数据的结构和步骤2中的随机算子和多轮对话的轮数建立数据抽取方法，并加入数据抽取筛选机制；步骤4.使用步骤3中的数据抽取方法对步骤1中的单轮对话数据集进行抽取，并组建成初始多轮对话数据集；步骤5.遍历步骤4中的初始多轮对话数据集，每条数据一一比对，剔除重复数据，获得最终多轮对话数据集。
全文数据：
权利要求：
百度查询： 中国—东盟信息港股份有限公司 一种用于LLM微调的数据组建方法、系统、设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号