买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉中国传媒大学申请的专利基于用户指令强调的听障人士交流方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120412103B 。

龙图腾网通过国家知识产权局官网在2025-10-21发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510847138.3，技术领域涉及：G06V40/20；该发明授权基于用户指令强调的听障人士交流方法及系统是由赵薇;王若孚;柴剑平设计研发完成，并于2025-06-24向国家知识产权局提交的专利申请。

本基于用户指令强调的听障人士交流方法及系统在说明书摘要公布了：本发明提供一种基于用户指令强调的听障人士交流方法及系统，方法包括：获取待处理的手语视频和用户指令信息；利用基于Transformer架构的视觉模型对待处理的手语视频进行特征提取，获得手语动作特征矩阵；基于所述手语动作特征矩阵分别获取指令强调的手语动作特征向量和时空强调的手语动作特征矩阵；将所述指令强调的手语动作特征向量和时空强调的手语动作特征矩阵进行特征融合，获得融合后的手语动作特征矩阵；基于所述融合后的手语动作特征矩阵通过预设的语音合成模型，获得待处理的手语视频对应的语音信息。本发明达到了显著提高手语识别的准确率的技术效果。

本发明授权基于用户指令强调的听障人士交流方法及系统在权利要求书中公布了：1.一种基于用户指令强调的听障人士交流方法，应用于电子设备，其特征在于，包括： 获取待处理的手语视频和用户指令信息；所述用户指令是用自然语言表述的、引导模型关注特定特征的指令； 利用基于Transformer架构的视觉模型对待处理的手语视频进行特征提取，获得手语动作特征矩阵；基于所述手语动作特征矩阵分别获取指令强调的手语动作特征向量和时空强调的手语动作特征矩阵；其中，所述指令强调的手语动作特征向量通过对所述用户指令信息进行处理获得特征提取指令，基于所述特征提取指令对所述手语动作特征矩阵进行指令强调后获得；所述时空强调的手语动作特征矩阵的获取方法包括，利用时间差分算子对所述手语动作特征矩阵进行动作帧强调和静止帧抑制，获得时间强调的手语动作特征矩阵；对所述时间强调的手语动作特征矩阵进行手部动作和面部表情的空间强调，获得所述时空强调的手语动作特征矩阵； 将所述指令强调的手语动作特征向量和所述时空强调的手语动作特征矩阵进行特征融合，获得融合后的手语动作特征矩阵； 通过上下文蒸馏模型将所述融合后的手语动作特征矩阵，转换为文字表达和情感特征，通过预设的语音合成模型，获得待处理的手语视频对应的语音信息；基于所述特征提取指令对所述手语动作特征矩阵进行指令强调，获得指令强调的手语动作特征向量的方法包括，利用Q-Former根据所述特征提取指令生成对应的交互后的指令向量；将所述特征提取指令与所述交互后的指令向量在Q-Former中进行交互；将所述交互后的指令向量捕获的所述特征提取指令的关键信息作为交互结果；将所述交互结果与所述手语动作特征矩阵利用交叉注意力机制进行筛选，获得指令强调的手语动作特征向量。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人中国传媒大学，其通讯地址为：100024 北京市朝阳区定福庄东街1号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。