买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉国家工业信息安全发展研究中心申请的专利一种面向政务大模型检测的方法、系统及设备获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120234396B 。

龙图腾网通过国家知识产权局官网在2025-11-21发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510677262.X，技术领域涉及：G06F16/3329；该发明授权一种面向政务大模型检测的方法、系统及设备是由彭文华;张瑶;李凯;刘劲松设计研发完成，并于2025-05-26向国家知识产权局提交的专利申请。

本一种面向政务大模型检测的方法、系统及设备在说明书摘要公布了：本申请公开了一种面向政务大模型检测的方法、系统及设备，包括根据第一查询文本集，通过目标待测模型，获得第一答案集；根据第一答案集，获得第二答案集；根据第二答案集，获得第二答案集对应的第二查询文本集；根据第二查询文本集，获得与第二答案集对应的第二Prompt集；根据第二Prompt集，通过目标待测模型，获得第三答案集；根据第一答案集、第二答案集和第三答案集，获得目标待测模型的评估结果。至少解决了现有的政务大模型评估方法没有对查询文本的理解能力进行评估，评估结果无法为政务大模型的优化提供帮助的问题。

本发明授权一种面向政务大模型检测的方法、系统及设备在权利要求书中公布了：1.一种面向政务大模型检测的方法，其特征在于，包括： 根据第一查询文本集，通过目标待测模型，获得第一答案集； 根据所述第一答案集，获得第二答案集，所述第二答案集被配置为包括所述第一答案集中与标准答案不符的答案； 根据所述第二答案集，获得所述第二答案集对应的第二查询文本集，所述第二查询文本集被配置为包括所述第一查询文本集中与所述第二答案集的答案对应的查询文本； 根据所述第二查询文本集，获得与所述第二答案集对应的第二Prompt集，所述第二Prompt集被配置为包括根据所述第二查询文本集中的查询文本生成的Prompt； 根据所述第二Prompt集，通过所述目标待测模型，获得第三答案集； 根据所述第一答案集、所述第二答案集和所述第三答案集，获得所述目标待测模型的评估结果； 在根据所述第二查询文本集，获得与所述第二答案集对应的第二Prompt集的步骤之前，所述方法还包括； 根据所述目标待测模型，获得所述目标待测模型接入的知识库的知识图谱； 建立一个Prompt，在Prompt中加入问题占位符；根据知识图谱中的实体、关系和属性，获得知识的分类；根据实体的分类，在Prompt中加入与实体的分类对应的知识占位符，获得Prompt模板； 所述根据所述第二查询文本集，获得与所述第二答案集对应的第二Prompt集，包括： 根据所述第二查询文本集，获得所述第二查询文本集中的查询文本； 对所述查询文本进行解析，获得所述查询文本对应的关键参数； 将查询文本的关键参数或关键词加入Prompt模板的问题占位符；根据查询文本的关键参数或关键词的类别和在知识图谱中的查询结果，将查询文本的关键参数或关键词加入Prompt模板的知识占位符；根据加入关键参数或关键词后的Prompt模板，获得与查询文本对应的Prompt； 根据所述第二查询文本集中全部查询文本对应的Prompt，获得第二Prompt集。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人国家工业信息安全发展研究中心，其通讯地址为：100040 北京市石景山区鲁谷路35号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。