恭喜深圳云天励飞技术股份有限公司袁瑾获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜深圳云天励飞技术股份有限公司申请的专利模型蒸馏方法、装置及电子设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114519416B 。
龙图腾网通过国家知识产权局官网在2025-03-25发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202111680113.7,技术领域涉及:G06N3/045;该发明授权模型蒸馏方法、装置及电子设备是由袁瑾;肖嵘;王孝宇设计研发完成,并于2021-12-30向国家知识产权局提交的专利申请。
本模型蒸馏方法、装置及电子设备在说明书摘要公布了:本发明实施例涉及一种模型蒸馏方法、装置及电子设备,该方法包括:对第i个未标记数据进行第一泛化处理后,分别输入到至少两个教师网络模型中,获取一组第一识别结果;根据一组第一识别结果,获取第二识别结果;当至少一个备选标签中第一备选标签的预测概率大于或者等于预设概率阈值时,将第一备选标签设定为未标记数据的伪标签;对第i个未标记数据进行第二泛化处理后,输入到学生网络模型中,获取第三识别结果;根据第二识别结果、第三识别结果,以及伪标签,对学生网络模型进行优化,直至学生网络模型符合预设标准时结束。通过该方式,大大降低人力标记的成本。
本发明授权模型蒸馏方法、装置及电子设备在权利要求书中公布了:1.一种模型蒸馏方法,其特征在于,所述方法包括:对第i个未标记图像数据进行第一泛化处理后,分别输入到至少两个教师网络模型中,获取一组第一识别结果;根据一组所述第一识别结果,获取第二识别结果,其中第二识别结果包括第i个所述未标记图像数据的至少一个备选标签,以及每一个所述备选标签对应的预测概率;当至少一个所述备选标签中第一备选标签的预测概率大于或者等于预设概率阈值时,将所述第一备选标签设定为所述未标记图像数据的伪标签,其中,所述第一备选标签为至少一个所述备选标签中概率最大的标签;对第i个所述未标记图像数据进行第二泛化处理后,输入到学生网络模型中,获取第三识别结果;根据所述第二识别结果、所述第三识别结果,以及所述伪标签,对所述学生网络模型进行优化,直至所述学生网络模型符合预设标准时结束,其中,i为正整数;所述第一识别结果包括与第i个所述未标记图像数据对应的至少一个备选标签,以及每一个所述备选标签对应的第一候选概率;所述根据一组所述第一识别结果,获取第二识别结果,具体包括:分别获取一组所述第一识别结果中相同备选标签对应的第一候选概率的第一概率平均值;所述第一识别结果中的至少一个备选标签,以及每一个备选标签对应的第一概率平均值构成所述第二识别结果,其中每一个备选标签对应的第一概率平均值,即为所述第二识别结果中与所述备选标签对应的预测概率。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人深圳云天励飞技术股份有限公司,其通讯地址为:518000 广东省深圳市龙岗区园山街道龙岗大道8288号深圳大运软件小镇17栋1楼;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。