买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉浪潮电子信息产业股份有限公司申请的专利事实性知识问题的回答能力评估方法、产品、设备及介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120180060B 。

龙图腾网通过国家知识产权局官网在2025-09-02发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510668928.5，技术领域涉及：G06F18/21；该发明授权事实性知识问题的回答能力评估方法、产品、设备及介质是由范宝余;贾麒;鲁璐;唐轶男设计研发完成，并于2025-05-23向国家知识产权局提交的专利申请。

本事实性知识问题的回答能力评估方法、产品、设备及介质在说明书摘要公布了：本申请公开了事实性知识问题的回答能力评估方法、产品、设备及介质，涉及自然语言处理领域，包括：对历史知识图谱中的子图进行采样，以生成事实性知识问题评测集；将评测集和先验提示信息组输入至预训练语言模型中，以对事实性知识问题进行推理得到多个推理回答；若多个推理回答中均不包含预设目标字符，则利用后验提示信息对多个推理回答的真实性进行检测，若检测结果表明多个推理回答与事实相符，则判定模型具备回答相应问题的能力。本申请通过先验判断和后验检查两个阶段，先对事实性知识问题进行推理，再对推理后的回答进行真实性检测，可以防止模型因幻觉导致的误判，并提高了模型对事实性知识问题的回答能力的评估效率。

本发明授权事实性知识问题的回答能力评估方法、产品、设备及介质在权利要求书中公布了：1.一种事实性知识问题的回答能力评估方法，其特征在于，包括： 采集目标领域的历史知识图谱，并对所述历史知识图谱中的子图进行采样，以生成针对所述目标领域的事实性知识问题评测集； 将所述事实性知识问题评测集和预设的先验提示信息组输入至预训练语言模型中，以通过线性验证的方式并基于所述先验提示信息组中的多个提示语句依次对所述事实性知识问题评测集中的事实性知识问题进行推理，得到事实性知识问题对应的多个推理回答；所述线性验证的方式指的是模拟对话中的压力测试场景，对事实性知识问题依次使用先验提示语句逐个进行推理的方式；所述先验提示信息组中的多个提示语句是用于提示用户输入的文本或指令； 若所述多个推理回答中均不包含预设目标字符，则将所述多个推理回答和预设的后验提示信息输入至所述预训练语言模型中，以利用所述后验提示信息对所述多个推理回答的真实性进行检测，得到检测结果；所述预设目标字符为表征所述推理回答存在异常的字符； 若所述检测结果表明所述多个推理回答与事实相符，则判定所述预训练语言模型具备回答所述事实性知识问题评测集中相应事实性知识问题的能力； 所述对所述历史知识图谱中的子图进行采样，以生成针对所述目标领域的事实性知识问题评测集，包括：基于不同的采样规则对所述历史知识图谱中的子图进行采样，得到多个子图集合；对所述多个子图集合进行合并，得到评测子图集合，并将所述评测子图集合输入至预先创建的事实性知识问题生成模版中，以构建覆盖所述评测子图集合的事实性知识问题评测集； 所述基于不同的采样规则对所述历史知识图谱中的子图进行采样，得到多个子图集合，包括：基于高频知识采样策略和长尾知识采样策略对所述历史知识图谱中的子图进行采样，得到高频子图集合和长尾子图集合；其中，所述高频知识采样策略为将知识图谱中各个节点的节点度数排名前预设数量的节点作为高频知识节点的采样策略；所述长尾知识采样策略为将子图熵值大于预设熵值的位于知识图谱的子图中的节点作为长尾知识节点的采样策略；所述长尾知识采样策略依据的是图熵，用于捕获低频但关键的多样化知识，高熵值的子图中包含更多低频但多样化的节点，代表长尾知识； 所述对所述多个子图集合进行合并，得到评测子图集合，并将所述评测子图集合输入至预先创建的事实性知识问题生成模版中，以构建覆盖所述评测子图集合的事实性知识问题评测集，包括：对所述高频子图集合和所述长尾子图集合进行合并，得到评测子图集合，并将所述评测子图集合输入至预先创建的事实性知识问题生成模版中，以构建覆盖所述评测子图集合的事实性知识问题评测集； 所述事实性知识问题生成模版的类型包括直接提问类型、三元组掩码类型和路径查询类型；其中，所述直接提问类型为基于知识图谱中的三元组直接生成问题的类型；所述三元组掩码类型为通过随机掩码头实体或尾实体生成填空题的类型；所述路径查询类型为提取长度小于或等于预设长度的关系路径，并基于所述关系路径生成多跳推理问题的类型； 所述将所述评测子图集合输入至预先创建的事实性知识问题生成模版中，以构建覆盖所述评测子图集合的事实性知识问题评测集，包括：将所述评测子图集合输入至预先创建的包含直接提问类型、三元组掩码类型和路径查询类型的事实性知识问题生成模版中，以按照预设生成比例生成与所述直接提问类型、所述三元组掩码类型和所述路径查询类型对应数量的问题，得到覆盖所述评测子图集合的事实性知识问题评测集；其中，所述评测子图集合中各子图生成的问题的数量是基于相应子图的节点数目确定的，且所述高频子图集合生成的问题的数量与所述长尾子图集合生成的问题的数量的比值为预设数值； 所述将所述多个推理回答和预设的后验提示信息输入至所述预训练语言模型中，以利用所述后验提示信息对所述多个推理回答的真实性进行检测，得到检测结果，包括：将所述多个推理回答和预设的第一后验提示信息输入至所述预训练语言模型中，以基于所述第一后验提示信息将所述多个推理回答整合为一段文本，得到整合后文本；将所述整合后文本和预设的第二后验提示信息输入至所述预训练语言模型中，以基于所述第二后验提示信息对所述整合后文本的真实性进行检测，得到检测结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人浪潮电子信息产业股份有限公司，其通讯地址为：250014 山东省济南市高新区草山岭南路801号9层东侧；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。