买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉浙江中控信息产业股份有限公司申请的专利基于多模态大模型的客流分析方法、系统及服务器获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119540814B 。

龙图腾网通过国家知识产权局官网在2025-10-10发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411465088.4，技术领域涉及：G06V20/40；该发明授权基于多模态大模型的客流分析方法、系统及服务器是由姜雪明;钟超文;虞锦明设计研发完成，并于2024-10-21向国家知识产权局提交的专利申请。

本基于多模态大模型的客流分析方法、系统及服务器在说明书摘要公布了：本申请提供了一种基于多模态大模型的客流分析方法、系统及服务器，方法包括：通过流媒体服务实时获取视频数据，实时分析视频数据生成实时分析结果，通过消息传输服务将实时分析结果发送到消息池，通过大语言模型根据用户提问信息、接口信息、提示信息及实时分析结果，生成答案信息，并将答案信息发送给客户端进行展示。本申请基于视频数据得到实时分析结果，可以保证分析结果的实时性和准确性，并通过大语言模型生成答案信息，具有高拓展性，满足用户的多样性需求。

本发明授权基于多模态大模型的客流分析方法、系统及服务器在权利要求书中公布了：1.一种基于多模态大模型的客流分析方法，其特征在于，应用于客流分析系统，所述客流分析系统包括服务端和客户端，所述服务端部署有：流媒体服务、预先训练得到的多模态大模型、消息传输服务以及大语言模型，所述方法包括： 通过所述流媒体服务实时获取待分析的目标区域的视频数据； 通过所述多模态大模型对所述视频数据进行实时分析，生成实时分析结果，所述实时分析结果包括：对象位置结果、排队检测结果、逆行检测结果及跌倒检测结果； 通过所述消息传输服务将所述实时分析结果发送到所述服务端的消息池； 通过所述大语言模型从所述消息池中读取所述实时分析结果，并根据所述客户端发送的用户提问信息、预设的接口信息、预设的提示信息及所述实时分析结果，生成所述用户提问信息对应的答案信息，并通过所述消息传输服务将所述答案信息发送给所述客户端进行展示，所述接口信息包括所述大语言模型待调用的分析算法的参数信息，所述提示信息包括所述分析算法的数据格式； 所述多模态大模型的训练过程包括： 将第一图像样本输入初始图像模型中，并将第一文本样本输入初始文本模型中，对所述初始图像模型和所述初始文本模型进行对比训练，得到目标图像模型、目标文本模型以及所述目标文本模型的权值； 基于所述目标文本模型的权值建立初始微调模型，并将第一训练样本输入所述初始微调模型中进行训练，得到目标微调模型； 将第二训练样本分别输入所述目标图像模型、所述目标文本模型和目标微调模型，并分别输出第一预测结果、第二预测结果和第三预测结果，所述第二训练样本包括第二图像样本、第二文字样本及提示词，并将所述第一预测结果、第二预测结果和第三预测结果输入解码器中，得到第四预测结果，根据所述第一预测结果、所述第二预测结果、所述第三预测结果以及所述第四预测结果，对所述目标图像模型、所述目标文本模型、所述目标微调模型以及所述解码器进行迭代修正，得到所述多模态大模型。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人浙江中控信息产业股份有限公司，其通讯地址为：310000 浙江省杭州市滨江区滨康路352号2号楼23-25层；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。