北京字跳网络技术有限公司王清怡获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉北京字跳网络技术有限公司申请的专利一种模型评测方法、装置、设备及介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120578915B 。
龙图腾网通过国家知识产权局官网在2026-04-07发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411027113.0,技术领域涉及:G06F18/21;该发明授权一种模型评测方法、装置、设备及介质是由王清怡;李依霙;赵花婷;张永健;王富林;方静;赵奉宣;刘清;张博;何碧波;刘舒设计研发完成,并于2024-07-29向国家知识产权局提交的专利申请。
本一种模型评测方法、装置、设备及介质在说明书摘要公布了:本公开实施例涉及一种模型评测方法、装置、设备及介质,其中该方法包括:获取多个待测模型以及历史评测结果;基于所述多个待测模型以及历史评测结果生成多个评测任务,其中,每个评测任务定义两个待测模型进行对比评测;对多个评测任务生成对应的多个评测数据;将多个评测数据分发给评测用户进行评测,得到多个评测任务对应的多个单评测结果;基于多个待测模型的初始分数以及多个单评测结果采用对弈水平评分方式确定多个待测模型的当前分数;根据多个待测模型的当前分数确定模型排序结果。本公开提升了模型评测的效率和易用性,并且不同模型通过权威性以及准确性较高的对弈水平评分方式进行排序确定,提升了排序结果的可靠性和准确性。
本发明授权一种模型评测方法、装置、设备及介质在权利要求书中公布了:1.一种模型评测方法,其特征在于,包括: 获取多个待测模型以及历史评测结果; 基于所述多个待测模型以及所述历史评测结果生成多个评测任务,其中,每个所述评测任务定义两个所述待测模型进行对比评测; 对所述多个评测任务生成对应的多个评测数据; 将所述多个评测数据分发给评测用户进行评测,得到所述多个评测任务对应的多个单评测结果,其中,所述评测数据为通过评测页面展示的; 基于所述多个待测模型的初始分数以及所述多个单评测结果采用对弈水平评分方式确定所述多个待测模型的当前分数; 根据所述多个待测模型的当前分数确定模型排序结果; 其中,基于所述多个待测模型以及所述历史评测结果生成多个评测任务,包括: 根据所述历史评测结果确定两两所述待测模型组成的多个模型对的多个置信区间缩小量,其中,所述置信区间缩小量是模型经过对比评测后置信区间缩小的数值; 基于所述多个模型对的多个置信区间缩小量,生成多个评测任务。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人北京字跳网络技术有限公司,其通讯地址为:100190 北京市海淀区紫金数码园4号楼2层0207;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励