华南理工大学刘竹琳获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉华南理工大学申请的专利一种基于软提示的智能图文检索系统、方法及电子设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119719392B 。
龙图腾网通过国家知识产权局官网在2025-11-04发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411677124.3,技术领域涉及:G06F16/435;该发明授权一种基于软提示的智能图文检索系统、方法及电子设备是由刘竹琳;郭勇彬;张通;陈俊龙设计研发完成,并于2024-11-22向国家知识产权局提交的专利申请。
本一种基于软提示的智能图文检索系统、方法及电子设备在说明书摘要公布了:本发明公开了一种基于软提示的智能图文检索系统、方法及电子设备,其中系统包括:检索界面模块、模型检索模块、检索数据收集模块、软提示高效更新模型模块;其中软提示高效更新模型模块,用于在收集的图文对数据集达到预设阈值,利用存储的数据在多模态预训练模型上进行训练,获得新的软提示,并用其更新模型检索模块。本发明利用适用于大规模预训练模型的软提示方法,考虑了多模态建模的特点,将软提示方法与多模态方法结合,来实现向量在图文检索任务上的最佳对齐;构建模态共享的软提示和模态特定的软提示,来促进不同模态软提示信息的对齐,进而促进不同模态信息的对齐。本发明可广泛应用于图文检索技术领域。
本发明授权一种基于软提示的智能图文检索系统、方法及电子设备在权利要求书中公布了:1.一种基于软提示的智能图文检索系统,其特征在于,包括: 检索界面模块,用于与用户交互,获取输入的查询信息,以及显示检索结果;所述查询信息包括字符、文本或者图像中的至少之一; 模型检索模块,用于将查询信息和软提示拼接后输入多模态预训练模型中进行特征提取,将提取获得的特征向量与向量数据库进行相似性搜索,获得图文数据向量;根据图文数据向量从图文数据库中获取相应的数据,作为检索结果; 检索数据收集模块,用于将查询信息和对应的检索结果组成图文对数据集,存储在图文数据库中; 软提示高效更新模型模块,用于在收集的图文对数据集达到预设阈值,利用存储的数据在多模态预训练模型上进行训练,获得新的软提示,并用其更新模型检索模块; 其中,在多模态预训练模型中,使用两种软提示:模态共享的软提示和模态特定的软提示; 模态特定的软提示是基于共同知识基础构建的;文本编码器、图像编码器和多模态编码器分别使用各自的模态特定的软提示,来适应各自特定的信息; 所述软提示高效更新模型模块还包括单模态软提示融合单元;所述单模态软提示融合单元用于促进单模态软提示和多模态软提示之间的协同,通过融合单模态软提示,并将其与多模态软提示进行对应位置元素相加运算,来形成新的多模态软提示; 所述软提示高效更新模型模块采用自动化的测试和评估机制;所述软提示高效更新模型模块支持模型的持续迭代,模型训练完成后只需用新生成的软提示来替换模型检索模块中的软提示,完成模型的更新。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人华南理工大学,其通讯地址为:510641 广东省广州市天河区五山路381号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励