买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉同济大学申请的专利基于模态同步的多模态情感检测方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119322982B 。

龙图腾网通过国家知识产权局官网在2025-11-18发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411291322.6，技术领域涉及：G06F18/2431；该发明授权基于模态同步的多模态情感检测方法是由李文根;叔宇楼;关佶红;张毅超设计研发完成，并于2024-09-13向国家知识产权局提交的专利申请。

本基于模态同步的多模态情感检测方法在说明书摘要公布了：本发明提供了一种基于模态同步的多模态情感检测方法，其中情感检测模型包括：图像自注意模块用于根据图像向量生成图像嵌入；文本自注意力模块用于根据文本向量生成文本嵌入；图像跨模态转化模块用于根据图像向量和文本向量生成图像模态转换向量；图像融合模块用于根据图像模态转换向量和图像嵌入生成图像单模态嵌入；文本跨模态转换模块用于根据图像向量和文本向量生成文本模态转换向量；文本融合模块用于根据文本模态转换向量和文本嵌入生成文本单模态嵌入；融合编码模块用于根据图像单模态嵌入和文本单模态嵌入生成融合向量；多层感知模块用于根据融合向量得到情感检测结果。总之，本方法能够得到准确的多模态情感分类结果。

本发明授权基于模态同步的多模态情感检测方法在权利要求书中公布了：1.一种基于模态同步的多模态情感检测方法，用于根据指定图片和对应的指定文本，得到对应的情感检测结果，其特征在于，包括以下步骤： 步骤S1，构建情感检测模型； 步骤S2，根据现有图文数据构建训练数据集，并根据所述训练数据集对所述情感检测模型进行训练，得到训练好的情感检测模型； 步骤S3，将所述指定图片和所述指定文本输入所述情感检测模型，得到所述情感检测结果， 其中，所述情感检测模型包括： 图像编码模块，用于对所述指定图片进行编码，得到图像向量； 图像自注意模块，用于对所述图像向量进行自注意力处理，得到图像嵌入； 文本编码模块，用于对所述指定文本进行编码，得到文本向量； 文本自注意力模块，用于对所述文本向量进行自注意力处理，得到文本嵌入； 图像跨模态转化模块，用于根据所述图像向量和所述文本向量，生成图像模态转换向量，其中，在所述图像跨模态转化模块中，所述图像模态转换向量的计算表达式为： 式中Xv2t为所述图像模态转换向量，T为所述文本向量，V为所述图像向量，为图像模态的查询的权重矩阵，为图像模态的键的权重矩阵，为图像模态的值的权重矩阵，dk为键向量的维度， 图像融合模块，用于将所述图像模态转换向量和所述图像嵌入进行拼接，得到图像单模态嵌入； 文本跨模态转换模块，用于根据所述图像向量和所述文本向量，生成文本模态转换向量，在所述文本跨模态转换模块中，所述文本模态转换向量的计算表达式为： 式中Xt2v为，为文本模态的查询的权重矩阵，为文本模态的键的权重矩阵，为文本模态的值的权重矩阵； 文本融合模块，用于将所述文本模态转换向量和所述文本嵌入进行拼接，得到文本单模态嵌入； 融合编码模块，用于对所述图像单模态嵌入和所述文本单模态嵌入进行交叉模态注意力处理，得到融合向量； 多层感知模块，包括多层感知机，用于对所述融合向量进行处理，得到所述情感检测结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人同济大学，其通讯地址为：200092 上海市杨浦区四平路1239号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。