买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉北京火山引擎科技有限公司申请的专利用于对基于大模型构建的数据分析智能体的评估的方法、装置、电子设备和计算机程序产品获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN118708921B 。

龙图腾网通过国家知识产权局官网在2025-09-02发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202410831618.6，技术领域涉及：G06F18/21；该发明授权用于对基于大模型构建的数据分析智能体的评估的方法、装置、电子设备和计算机程序产品是由李阳;孙阳;张雪;田志龙;李沛峰;李爽设计研发完成，并于2024-06-25向国家知识产权局提交的专利申请。

本用于对基于大模型构建的数据分析智能体的评估的方法、装置、电子设备和计算机程序产品在说明书摘要公布了：本公开的实施例涉及用于评估的方法、装置、电子设备和计算机程序产品。该方法包括通过智能体根据用户输入执行多个子任务，来生成与多个子任务相对应的多个输出。该方法还包括基于多个输出，确定多个输出中的每个输出的子评估。此外，该方法还包括基于多个输出中的每个输出的子评估，确定针对智能体的综合评估。通过本公开的实施例的评估方法，不仅能够生成更全面、准确的评估结果，还能够具体衡量智能体在每个环节的表现。这种细化的评估方式，有助于识别智能体在不同环节中的优缺点，从而进行针对性的优化和调整，提高智能体的整体性能。此外，对每个子任务的输出进行自动评测，能够显著节约评估所需的资源，缩短评估周期。

本发明授权用于对基于大模型构建的数据分析智能体的评估的方法、装置、电子设备和计算机程序产品在权利要求书中公布了：1.一种评估方法，包括： 通过基于大模型构建的数据分析智能体根据自然语言形式的用户输入来执行数据分析任务，所述数据分析任务在所述用户输入中被指定，并且所述数据分析任务被拆分为多个子任务，所述多个子任务包括知识召回任务、分析推理任务、代码编写任务以及结论生成任务； 由所述数据分析智能体执行所述多个子任务，来生成与所述多个子任务相对应的多个输出； 基于所述多个输出，确定多个子任务中的每个子任务的子评估；以及 基于所述多个子任务中的每个子任务所述子评估，确定针对所述智能体的综合评估， 其中确定所述多个子任务中的所述代码编写任务的所述子评估包括： 获取与所述代码编写任务相对应的代码编写输出；以及 基于所述代码编写输出与基准代码，确定所述代码编写任务的评估， 其中确定所述代码编写任务的所述评估包括： 基于所述代码编写输出和所述基准代码生成的数据结果，确定执行正确性；以及 基于所述代码编写输出和所述基准代码之间的结构相似度和所述执行正确性，确定所述代码编写任务的所述评估， 其中确定所述代码编写输出的所述执行正确性包括： 确定预测数据表与基准数据表的最大公共匹配和并集；以及 基于所述最大公共匹配和所述并集，确定交并比作为所述执行正确性。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人北京火山引擎科技有限公司，其通讯地址为：100190 北京市海淀区紫金数码园4号楼13层1309；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。