买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉中国科学院自动化研究所申请的专利基于多模态行为一致性的伪造人脸视频检测方法及装置、电子设备、存储介质及程序产品获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120580567B 。

龙图腾网通过国家知识产权局官网在2025-11-11发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510752404.4，技术领域涉及：G06V20/00；该发明授权基于多模态行为一致性的伪造人脸视频检测方法及装置、电子设备、存储介质及程序产品是由罗冠;赵中华;王博;袁江;唐楚杰;张欣怡;李兵;胡卫明设计研发完成，并于2025-06-06向国家知识产权局提交的专利申请。

本基于多模态行为一致性的伪造人脸视频检测方法及装置、电子设备、存储介质及程序产品在说明书摘要公布了：本公开提供一种基于多模态行为一致性的伪造人脸视频检测方法及装置、电子设备、存储介质及程序产品。所述方法包括：从包括待检测视频信号提取语音特征、面部表情特征和头部动作特征；识别语音情感、面部情感和语义情感；基于各种情感的VAD值序列，计算各种情感之间的情感一致性特征和情感同步性特征，并计算语义内容与面部情感和语音情感之间的情感语义一致性特征；构建跨模态时间依赖图，得到交互特征；利用层次化注意力网络处理语音特征、面部表情特征和头部动作特征，得到时序特征；形成多维度的融合特征向量；利用预设的二分类器处理融合特征向量，得到指示待检测视频信号是否为伪造人脸视频的分类结果。

本发明授权基于多模态行为一致性的伪造人脸视频检测方法及装置、电子设备、存储介质及程序产品在权利要求书中公布了：1.一种基于多模态行为一致性的伪造人脸视频检测方法，其特征在于，所述方法包括： 通过特征提取模块，从包括人脸的待检测视频信号提取语音特征、面部表情特征和头部动作特征； 通过情感语义对齐分析模块，从语音特征和面部表情特征识别语音情感和面部情感，并从待检测视频信号中的语音信号识别语义情感，其中，语音情感、面部情感和语义情感均包括多种情绪的概率分布及对应的VAD值序列；基于各种情感的VAD值序列，计算各种情感之间的情感一致性特征和情感同步性特征，并计算从所述语音信号识别的语义内容与面部情感和语音情感之间的情感语义一致性特征； 通过时序协同关系建模模块，以语音特征、面部表情特征和头部动作特征作为节点，构建跨模态时间依赖图，并利用图卷积网络模型处理跨模态时间依赖图，得到反映语音特征、面部表情特征和头部动作特征之间的时间依赖关系的交互特征；利用层次化注意力网络处理语音特征、面部表情特征和头部动作特征，得到融合语音特征、面部表情特征和头部动作特征的时序特征； 通过融合判决模块，从情感一致性特征、情感同步性特征、情感语义一致性特征、交互特征以及时序特征筛选多个目标特征，形成多维度的融合特征向量；利用预设的二分类器处理所述多维度的融合特征向量，得到指示待检测视频信号是否为伪造人脸视频的分类结果， 其中，计算各种情感之间的情感一致性特征和情感同步性特征，并计算从所述语音信号识别的语义内容与面部情感和语音情感之间的情感语义一致性特征，包括： 对各种情感的VAD值序列按照时间戳配准，形成各种情感的VAD值时间序列，并且以逐帧或滑窗的方式计算各种情感的VAD值时间序列之间的距离和相似度，作为情感一致性特征； 通过动态时间规整算法计算各种情感的VAD值序列之间的最优路径距离，作为情感同步性特征； 利用基于注意力机制的对比学习网络和多层感知机计算语义内容与面部情感以及语义内容与语音情感之间的一致性分数，作为情感语义一致性特征。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人中国科学院自动化研究所，其通讯地址为：100190 北京市海淀区中关村东路95号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。