厦门美图之家科技有限公司卢波获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉厦门美图之家科技有限公司申请的专利多模态场景识别方法、装置、计算机设备和存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116597293B 。
龙图腾网通过国家知识产权局官网在2026-03-20发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310005427.X,技术领域涉及:G06V20/00;该发明授权多模态场景识别方法、装置、计算机设备和存储介质是由卢波;肖塞;曲晓超;刘洛麒设计研发完成,并于2023-01-04向国家知识产权局提交的专利申请。
本多模态场景识别方法、装置、计算机设备和存储介质在说明书摘要公布了:本申请涉及一种多模态场景识别方法、装置、计算机设备、存储介质和计算机程序产品。方法包括:确定预训练的第一多模态场景识别模型;第一多模态场景识别模型包括第一图像编码网络,第二多模态场景识别模型包括第二图像编码网络;将样本图像分别输入第一图像编码网络和第二图像编码网络中进行编码处理,将对应的编码处理的结果分别输入预训练的第一辅助分支和已训练的第二辅助分支中进行图像识别,得到第一图像识别结果和第二图像识别结果;基于第一图像识别结果与第二图像识别结果之间的差异,调整第一图像编码网络,得到已训练的第一多模态场景识别模型;基于已训练的第一多模态场景识别模型进行场景识别。采用本方法能够提高场景识别的准确度。
本发明授权多模态场景识别方法、装置、计算机设备和存储介质在权利要求书中公布了:1.一种多模态场景识别方法,其特征在于,所述方法包括: 确定预训练的第一多模态场景识别模型;所述预训练的第一多模态场景识别模型包括第一图像编码网络、第一文本编码网络,所述预训练的第一多模态场景识别模型,是基于已训练的第二多模态场景识别模型训练得到的,所述第二多模态场景识别模型包括第二图像编码网络、第二文本编码网络,所述第一图像编码网络的网络复杂程度小于所述第二图像编码网络的网络复杂程度;所述第一文本编码网络是基于所述第二文本编码网络确定的; 将样本图像输入到所述第一图像编码网络中进行编码处理,将编码处理的结果输入到预训练的第一辅助分支中进行图像识别,得到第一图像识别结果;其中,所述第一辅助分支用于识别图像中的场景特征;所述第一辅助分支辅助于模型的蒸馏训练; 将样本图像输入到所述第二图像编码网络中进行编码处理,将编码处理的结果输入到已训练的第二辅助分支中进行图像识别,得到第二图像识别结果;其中,所述预训练的第一辅助分支是基于所述已训练的第二辅助分支训练得到的; 基于所述第一图像识别结果与所述第二图像识别结果之间的差异,调整所述第一图像编码网络,得到已训练的第一多模态场景识别模型; 基于所述已训练的第一多模态场景识别模型进行场景识别。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人厦门美图之家科技有限公司,其通讯地址为:361000 福建省厦门市火炬高新区软件园华讯楼C区B1F-089;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励