买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:鹏城实验室
摘要:本申请公开了模型的在线评测方法、系统、电子设备及介质,方法包括:接收模型评测请求以及模型评测资源,并创建调试任务;根据模型评测资源确定与调试任务对应的目标资源,并根据目标资源确定目标镜像、目标代码以及目标模型;通过目标镜像创建与调试任务对应的调试容器,并在调试容器中挂载目标代码和目标模型,对目标代码进行检测;当完成调试任务且对目标代码的检测通过时,根据目标资源创建推理任务;通过目标镜像创建与推理任务对应的推理容器,并在推理容器中对获取到的评测数据集进行预测,生成推理结果;对推理结果进行在线评测,得到评测结果。在本发明实施例中,无需用户再次上传资源,避免资源重复上传,提高评测效率。
主权项:1.一种模型的在线评测方法,其特征在于,包括:接收模型评测请求以及模型评测资源,并创建与所述模型评测请求对应的调试任务,其中,所述模型评测资源用于表征完成所述模型评测请求所需的资源;根据所述模型评测资源确定与所述调试任务对应的目标资源,并根据所述目标资源确定目标镜像、目标代码以及目标模型;通过所述目标镜像创建与所述调试任务对应的调试容器,并在所述调试容器中挂载所述目标代码和所述目标模型以执行所述调试任务,并对所述目标代码进行检测;当完成所述调试任务且对所述目标代码的检测通过时,根据所述目标资源创建推理任务,并获取与所述推理任务对应的评测数据集;通过所述目标镜像创建与所述推理任务对应的推理容器,并在所述推理容器中对所述评测数据集进行预测,生成推理结果;根据所述目标资源创建评测任务,并根据所述评测任务对所述推理结果进行在线评测,得到评测结果。
全文数据:
权利要求:
百度查询: 鹏城实验室 模型的在线评测方法、系统、电子设备及介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。