买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉北京中科金财科技股份有限公司申请的专利RAG智能体系统自动化评测方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120011186B 。

龙图腾网通过国家知识产权局官网在2025-10-21发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411904870.1，技术领域涉及：G06F11/34；该发明授权RAG智能体系统自动化评测方法及系统是由杨宏阳;王骄阳设计研发完成，并于2024-12-23向国家知识产权局提交的专利申请。

本RAG智能体系统自动化评测方法及系统在说明书摘要公布了：本发明公开了RAG智能体系统自动化评测方法及系统，涉及人工智能技术领域，所述方法包括接收用户上传的原始文档数据，基于自然语言处理技术对原始文档进行语义切分，生成多个语义完整的文档块，根据不同条件，结合文档块内容，自动生成不同场景下的问题及对应答案，包括基于单个文档块生成的问题，结合多个文档块生成的跨块问题，基于隐含语义推理生成的隐性问题；该RAG智能体系统自动化评测方法及系统，通过自动化的评测流程和问题生成方法，显著减少了对人工干预的依赖，降低了数据标注和结果验证的复杂性，大幅缩短了评测时间，从而满足快速迭代优化的需求。

本发明授权RAG智能体系统自动化评测方法及系统在权利要求书中公布了：1.一种RAG智能体系统自动化评测方法，其特征在于，所述方法包括： 接收用户上传的原始文档数据； 基于自然语言处理技术对原始文档进行语义切分，生成多个语义完整的文档块； 根据不同条件，结合文档块内容，自动生成不同场景下的问题及对应答案，包括基于单个文档块生成的问题，结合多个文档块生成的跨块问题以及基于隐含语义推理生成的隐性问题； 利用上述生成的问题和答案对RAG系统进行自动化评测，评测指标包括检索结果与问题相关性的相关性评分，检索结果与标准答案的准确性评分，文档重排能力的精准度评分，生成答案与标准答案的相似性评分； 生成综合评测报告，提供定量化指标和系统优化建议； 所述语义切分使用BERT模型对文档进行编码，并结合K-means聚类算法生成多个语义完整的文档块； 所述问题生成包括根据用户输入的主题关键词、文档类型以及应用场景生成问题； 结合多个文档块生成的跨块问题包括基于不同文档块的综合信息推导复杂问题，并通过多文档间语义匹配获取答案：系统通过分析多个文档块间的语义关系，利用跨文档语义推理技术，推导出复杂问题的答案；生成的问题能够覆盖多文档信息的交叉点，时间序列上的因果关系或概念间的逻辑关联；答案则通过多文档间的语义匹配与推理来获取，确保综合信息的准确性和一致性；有效提升了跨文档场景中问题生成与答案提取的能力，使评测覆盖更加全面；同时，跨块问题的生成和解答利用了文档块间的语义联系，提高了系统对复杂信息整合和逻辑推理的能力，从而增强了评测的深度和专业性； 隐性问题的生成通过分析文档块间隐含的语义关系，结合条件推理生成问题及答案：系统首先利用语义分析技术对文档块间的隐含语义关系进行深度挖掘，通过句间逻辑连接、语义相似度或上下文依赖性发现潜在关联；随后，结合条件推理方法基于规则的推理或基于神经网络的因果推理，构造隐性问题并推导出相应答案，生成的隐性问题揭示文档内容未直接显现但逻辑上可推导的深层信息；显著扩展了问题生成的范围，能够挖掘文档中未显性表述的潜在信息，增强了评测的智能化水平；通过条件推理生成的隐性问题及答案进一步提升了评测的深度和覆盖度，为RAG系统的全面性评估提供了强有力的支持。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人北京中科金财科技股份有限公司，其通讯地址为：100085 北京市海淀区学清路9号汇智大厦11层2单元1201B室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。