苏州浪潮智能科技有限公司王萌获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉苏州浪潮智能科技有限公司申请的专利模型能力测试方法、装置、电子设备、存储介质及产品获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116302874B 。
龙图腾网通过国家知识产权局官网在2025-07-11发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310020722.2,技术领域涉及:G06F11/34;该发明授权模型能力测试方法、装置、电子设备、存储介质及产品是由王萌设计研发完成,并于2023-01-06向国家知识产权局提交的专利申请。
本模型能力测试方法、装置、电子设备、存储介质及产品在说明书摘要公布了:本发明提供的模型能力测试方法、装置、电子设备、存储介质及产品,属于深度学习技术领域,包括:接收更新请求;响应于所述更新请求,更新推理图的流量配置;基于更新后的推理图,将各个待测模型的用户流量分配至服务集,以供所述服务集利用各用户流量确定每个待测模型的能力指数。本发明提供的模型能力测试方法、装置、电子设备、存储介质及产品,通过对分流系统更新模块中的推理图的流量配置进行维护和更新,利用更新后的推理图对待测模型的用户流量进行拦截和再分配,进而利用服务集测试每个待测模型的能力指数,操作简单,能够对每个待测模型的泛化能力等性能进行快速且客观地评估。
本发明授权模型能力测试方法、装置、电子设备、存储介质及产品在权利要求书中公布了:1.一种模型能力测试方法,其特征在于,包括: 接收更新请求; 响应于所述更新请求,读取所述更新请求的参数配置信息,以确定所述更新请求的请求类型;所述请求类型,包括:流量分配、服务全量和流量回滚; 在确定所述请求类型为流量分配的情况下,根据所述参数配置信息,确定流量分配方案; 在确定所述流量分配方案为平均分配的情况下,从所述参数配置信息中读取主线桶的总流量和测试桶的总流量,以及测试桶的数量; 将所述主线桶的总流量确定为所述主线桶的目标流量,并根据所述测试桶的总流量和所述测试桶的数量,确定每个测试桶的目标流量; 在确定所述流量分配方案为自定义分配的情况下,从所述参数配置信息中读取主线桶的目标流量和测试桶的目标流量; 根据所述主线桶的目标流量和测试桶的目标流量,更新推理图的流量配置; 基于更新后的推理图,将各个待测模型的用户流量分配至服务集,以供所述服务集利用各用户流量确定每个待测模型的能力指数; 所述根据所述主线桶的目标流量和测试桶的目标流量,更新推理图的流量配置,包括: 在确定所述参数配置信息中未设置滚动发布的情况下,利用所述主线桶的目标流量和所述测试桶的目标流量,对所述推理图的流量配置进行更新; 在确定所述参数配置信息中设置滚动发布的情况下,从所述参数配置信息中读取时间间隔和步长; 根据所述主线桶的目标流量、所述测试桶的目标流量、所述时间间隔和所述步长,计算滚动发布策略; 将所述滚动发布策略写入至数据库; 利用滚动发布模块从所述数据库中调取所述滚动发布策略; 在达到更新时间的情况下,读取所述滚动发布策略中的流量配置信息; 利用所述流量配置信息,对所述推理图的流量配置进行更新。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人苏州浪潮智能科技有限公司,其通讯地址为:215128 江苏省苏州市吴中经济开发区郭巷街道官浦路1号9幢;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。