买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉平安科技(深圳)有限公司申请的专利一种基于多模型算法的文本去重方法、及其相关设备获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN115344685B 。

龙图腾网通过国家知识产权局官网在2025-06-27发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202210997003.1，技术领域涉及：G06F16/335；该发明授权一种基于多模型算法的文本去重方法、及其相关设备是由徐耀宗设计研发完成，并于2022-08-19向国家知识产权局提交的专利申请。

本一种基于多模型算法的文本去重方法、及其相关设备在说明书摘要公布了：本申请属于大数据技术领域，涉及一种基于多模型算法的文本去重方法，包括获取目标坐席的待去重文本；判断所述待去重文本是否包括第一类待去重文本或第二类待去重文本；若所述待去重文本中包括所述第一类待去重文本，则对所述第一类待去重文本进行全量去重；若所述待去重文本中包括所述第二类待去重文本，则通过simhash算法提取所述第二类待去重文本的特征文本并进行哈希计算，得到特征指纹值；对所述特征指纹值进行分箱，将分箱后得到的多段待查询特征指纹值分别进行检索去重。本申请还提供一种基于多模型算法的文本去重装置、计算机设备及存储介质。本申请能够降低沟通成本，有利于提升检索效率，降低机器的存储消耗，快速响应客户需求。

本发明授权一种基于多模型算法的文本去重方法、及其相关设备在权利要求书中公布了：1.一种基于多模型算法的文本去重方法，其特征在于，包括下述步骤： 获取目标坐席的待去重文本； 判断所述待去重文本是否包括第一类待去重文本或第二类待去重文本； 若所述待去重文本中包括所述第一类待去重文本，则对所述第一类待去重文本进行全量去重； 若所述待去重文本中包括所述第二类待去重文本，则通过simhash算法提取所述第二类待去重文本的特征文本并进行哈希计算，得到特征指纹值； 对所述特征指纹值进行分箱，将分箱后得到的多段待查询特征指纹值分别进行检索去重； 所述判断所述待去重文本是否包括第一类待去重文本或第二类待去重文本的步骤具体包括： 判断所述目标坐席的所述待去重文本中是否包括文本长度小于预设长度阈值的文本； 判断所述目标坐席的所述待去重文本中是否包括非中文文本； 若所述目标坐席的所述待去重文本中包括文本长度未达到所述预设长度阈值的文本或所述目标坐席的所述待去重文本中包括所述非中文文本，则确定所述待去重文本中包括所述第一类待去重文本； 若所述目标坐席的所述待去重文本中包括文本长度达到所述预设长度阈值的文本，则确定所述待去重文本中包括所述第二类待去重文本； 所述对所述特征指纹值进行分箱，将分箱后得到的多段待查询特征指纹值分别进行检索去重的步骤具体包括： 基于所述特征指纹值的长度确定单位分箱长度，根据所述单位分箱长度对所述特征指纹值进行分箱，得到多段所述待查询特征指纹值； 对每段所述待查询特征指纹值进行检索，若均未查询到相同的待去重特征指纹值，则保留对应均未查询到相同的特征指纹值的所述第二类待去重文本； 若检索到与多段所述待查询特征指纹值中存在任意一段相同，则基于所述特征指纹值计算相同的两段所述待查询特征指纹值的差异点； 若所述差异点不满足预设差异点，则对所述差异点不满足所述预设差异点的两段所述待查询特征指纹值对应的第二类待去重文本进行去重； 其中，完成对所有坐席的第一类待去重文本以及第二类待去重文本去重操作后，创建一对一的检索数据库分别存储每位坐席已去重的文本数据，用于坐席检索。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人平安科技(深圳)有限公司，其通讯地址为：518000 广东省深圳市福田区福田街道福安社区益田路5033号平安金融中心23楼；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。