宁波大学刘箴获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉宁波大学申请的专利具有共情机制的多模态人机交互方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119961405B 。
龙图腾网通过国家知识产权局官网在2025-10-28发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510040783.4,技术领域涉及:G06F16/3329;该发明授权具有共情机制的多模态人机交互方法是由刘箴;刘婷婷;戴旭尧设计研发完成,并于2025-01-10向国家知识产权局提交的专利申请。
本具有共情机制的多模态人机交互方法在说明书摘要公布了:本发明涉及一种具有共情机制的多模态人机交互方法,通过对用户在人机交互过程中的情感特征做多模态实时提取,分别得到每个模态对应的情感特征,并融合处理提取到的各情感特征,形成表征用户当前时刻情感的多模态情感特征向量,再对多模态情感特征向量做处理得到用户当前时刻的用户情感,最后将所得用户在当前时刻的用户情感输入到对话模型处理,预测得到用户将来时刻的情感,且将与该用户将来时刻的情感相匹配的共情交互内容输出给用户。如此,不仅可以基于多模态方式准确识别用户当前时刻情感,而且还可以预测用户情感,且把与用户将来情感匹配的共情交互内容输出给用户,实现人机交互过程的人性化,增强了针对复杂情感交互场景应用能力。
本发明授权具有共情机制的多模态人机交互方法在权利要求书中公布了:1.具有共情机制的多模态人机交互方法,其特征在于,包括如下步骤: 步骤1,对用户在人机交互过程中的情感特征做多模态实时提取,分别得到每一个模态所对应的情感特征;其中,多模态包括用户的面部表情图像信号、音频信号和对话文本语义信号; 步骤2,将提取到的各情感特征做融合处理,形成表征用户当前时刻情感的多模态情感特征向量;其中,在该多模态情感特征向量中,每一个模态具有与其对应的情感特征向量; 步骤3,对多模态情感特征向量做处理,得到用户在当前时刻的用户情感; 步骤4,将所得用户在当前时刻的用户情感输入到自身的对话模型处理,以预测得到用户将来时刻的情感,且将与该用户将来时刻的情感相匹配的共情交互内容输出给用户;其中,对话模型由生成器和鉴别器组成;生成器负责根据用户的输入语义和情感特征生成符合上下文语义逻辑且具有共情能力的对话文本;鉴别器负责评估所生成文本的情感一致性和语义合理性,并将反馈信息传递给生成器进行优化;并且,该对话模型的构建过程包括如下步骤: 步骤41,基于预训练的Transformer并结合多个功能模块,通过情感感知模块对输入的用户多模态信息进行编码,生成当前时刻的情感特征向量;其中,该情感特征向量包含积极性、消极性和共情信息; 步骤42,通过情感预测机制,结合当前时刻的情感特征向量、上下文语义向量以及历史对话中的情感变化趋势,预测用户将来时刻的情感状态; 步骤43,对话模型在生成阶段加入生成约束模块,通过控制解码过程,使生成的内容在语义上与上下文保持一致,并在情感上与预测的用户未来情感状态相匹配;其中,对话模型的训练数据来自覆盖多种情感场景和用户意图的多轮共情对话数据集。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人宁波大学,其通讯地址为:315211 浙江省宁波市江北区风华路818号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励