上海高德威智能交通系统有限公司于铭扬获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉上海高德威智能交通系统有限公司申请的专利基于知识蒸馏的模型训练方法、装置及电子设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115953643B 。
龙图腾网通过国家知识产权局官网在2025-12-09发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202211608782.8,技术领域涉及:G06V10/774;该发明授权基于知识蒸馏的模型训练方法、装置及电子设备是由于铭扬;唐三立设计研发完成,并于2022-12-14向国家知识产权局提交的专利申请。
本基于知识蒸馏的模型训练方法、装置及电子设备在说明书摘要公布了:本申请实施例提供一种基于知识蒸馏的模型训练方法、装置及电子设备,涉及机器学习技术领域,实现了在单阶段检测网络的学生模型以及两阶段检测网络的教师模型的情况下,其中学生模型与教师模型为异构模型,以知识蒸馏的方式训练用于目标检测的学生模型。该方法包括:获取已经训练好的教师模型;将学生模型特征层的特征尺度与教师模型特征层的特征尺度对齐,并确定特征蒸馏损失;将学生模型输出层的预测框及对应的概率分布与教师模型输出层的预测框及对应的概率分布对齐,并确定输出蒸馏损失;依据特征蒸馏损失及输出蒸馏损失改进学生模型的损失函数;基于改进后的损失函数训练学生模型,得到训练完成的模型。
本发明授权基于知识蒸馏的模型训练方法、装置及电子设备在权利要求书中公布了:1.一种基于知识蒸馏的模型训练方法,其特征在于,知识蒸馏中所涉及的教师模型与学生模型为异构模型,所述方法包括: 获取已经训练好的所述教师模型,所述教师模型用于对输入图像进行目标检测; 将所述学生模型特征层的特征尺度与所述教师模型特征层的特征尺度对齐,并确定特征蒸馏损失,所述特征蒸馏损失表示特征尺度对齐后,所述教师模型与所述学生模型特征层的差异程度; 将所述学生模型输出层的预测框及对应的概率分布与所述教师模型输出层的预测框及对应的概率分布对齐,并确定输出蒸馏损失,所述输出蒸馏损失表示预测框及对应的概率分布对齐后,所述教师模型与所述学生模型在输出层的差异程度,所述概率分布为所述预测框的输出的概率分布; 依据所述特征蒸馏损失及所述输出蒸馏损失改进所述学生模型的损失函数; 基于改进后的所述损失函数训练所述学生模型,得到训练完成的模型。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人上海高德威智能交通系统有限公司,其通讯地址为:201821 上海市嘉定区云谷路599弄6号620室J1452;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励