买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉中国电信股份有限公司申请的专利一种多模态情绪识别方法以及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN116189669B 。

龙图腾网通过国家知识产权局官网在2025-10-03发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202111422119.4，技术领域涉及：G10L15/14；该发明授权一种多模态情绪识别方法以及系统是由张星星;张画设计研发完成，并于2021-11-26向国家知识产权局提交的专利申请。

本一种多模态情绪识别方法以及系统在说明书摘要公布了：本公开涉及多模态情绪识别方法以及系统，该方法包括：多模态信息预处理步骤，采集用户的语音数据和图像数据，获得对应的语音片段数据和面部图像数据；多模态情绪识别步骤，进行语音、文本和表情视觉情绪分析以得到对应的情绪状态的结果；第一HMM处理步骤，将多模态的情绪状态的结果组合成一组特征，作为观测值输入至该第一HMM，输出各个情绪的对应概率；相关度计算步骤，对于多模态的情绪状态的结果，使用交叉相关函数CCF，计算结果两两之间的相关性；以及第二HMM处理步骤，将相关性结果以及多模态的情绪状态的结果作为观测值输入至该第二HMM，将输出数值最大的情绪作为最终识别结果。

本发明授权一种多模态情绪识别方法以及系统在权利要求书中公布了：1.一种多模态情绪识别方法，包括： 多模态信息预处理步骤，采集作为情绪识别对象在说话时产生的包括至少语音数据和图像数据的多模态原始数据，将多模态原始数据中的语音数据进行空白片段检测和标记后存储为语音片段数据，利用语音转文字ASR对语音音频流进行解析以将语音转化为文本片段数据，对多模态原始数据中的图像数据进行面部检测和裁剪后将面部图像数据存储于存储器； 多模态情绪识别步骤，根据所述多模态信息预处理步骤中得到的至少包括语音片段数据、文本片段数据和面部图像数据的多模态信息，分别进行语音情绪分析、文本情绪分析和表情视觉情绪分析，以得到基于语音的情绪状态、基于文本的情绪状态和基于视觉的情绪状态的结果，基于语音的情绪状态、基于文本的情绪状态和基于视觉的情绪状态的结果各自包括多种情绪中的各个情绪的对应概率； 第一隐马尔可夫模型HMM处理步骤，将根据所述多模态情绪识别步骤中的语音情绪分析、文本情绪分析和表情视觉情绪分析而得到的情绪状态的结果组合成一组特征，作为该第一HMM中的观测值输入至该第一HMM，输出多种情绪中的各个情绪的对应概率； 相关度计算步骤，对于所述多模态情绪识别步骤中得出的基于语音的情绪状态、基于文本的情绪状态和基于视觉的情绪状态的结果，使用交叉相关函数CCF，计算多模态的情绪状态的结果两两之间的相关性；以及第二HMM处理步骤，将所述相关度计算步骤中得到的相关性结果以及所述第一HMM处理步骤中得到的各个情绪的概率，作为该第二HMM中的观测值输入至该第二HMM，将输出的各个情绪的状态值中数值最大的情绪作为最终的情绪识别结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人中国电信股份有限公司，其通讯地址为：100033 北京市西城区金融大街31号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。