杭州小影创新科技股份有限公司胡家庆获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉杭州小影创新科技股份有限公司申请的专利一种高清视频定制化人脸融合方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116798101B 。
龙图腾网通过国家知识产权局官网在2026-04-17发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310901677.1,技术领域涉及:G06V40/16;该发明授权一种高清视频定制化人脸融合方法及系统是由胡家庆;胡耀武;李晓红;韩晟设计研发完成,并于2023-07-21向国家知识产权局提交的专利申请。
本一种高清视频定制化人脸融合方法及系统在说明书摘要公布了:本申请公开了一种高清视频定制化人脸融合方法及系统,涉及人脸融合领域。具体实现方案为:将少量定制化人脸数据输入至定制化人脸在线微调模块获取定制化人脸融合模型FaceMerge_xx;对素材视频进行预处理并提取不同ID的人脸关键点,标定目标人脸;将模型FaceMerge_xx加载到人脸融合模块,同时对目标人脸进行对齐处理并输入至定制化人脸模型获取融合后的人脸;对融合后的人脸进行人像修复和超分处理并进行视频编码,输出人脸融合后的视频。本申请方法实现了高清视频的定制化人脸融合,系统通过定制化人脸数据微调得到定制化人脸模型,将目标人脸通过该模型进行重建,经后处理提升重建人脸的自然性和清晰度,选取轻量化的网络结构用于最终的部署,提升推理过程的性能。
本发明授权一种高清视频定制化人脸融合方法及系统在权利要求书中公布了:1.一种高清视频定制化人脸融合方法,其特征在于,包括: 输入少量定制化人脸数据和一段素材视频; 将所述少量定制化人脸数据输入至定制化人脸在线微调模块,获取定制化人脸融合模型FaceMerge_xx; 对所述素材视频进行预处理,提取素材视频中不同ID的人脸关键点,并标定目标人脸; 将所述定制化人脸融合模型FaceMerge_xx加载到人脸融合模块,同时对所述目标人脸进行对齐处理,将对齐处理后的目标人脸输入至定制化人脸模型,获取融合后的人脸; 对融合后的人脸进行人像修复和超分处理并进行视频编码,输出人脸融合后的视频; 所述定制化人脸融合模型FaceMerge_xx的获取包括, 基于大数据集预训练两个网络的基础模型unsupervised_baseline和supervised_baseline; 基于所述少量定制化人脸数据微调unsupervised_baseline得到unsupervised_xx; 基于unsupervised_xx生成配对的数据集,利用所述配对的数据集微调supervised_baseline得到定制化人脸融合模型FaceMerge_xx; 微调自监督网络得到unsupervised_xx的操作包括, 将定制化人脸和预设的目标人脸分别输入自监督训练网络中的身份编码器和属性编码器,提取定制化人脸的身份特征和预设的目标人脸的属性特征; 将所述身份特征和所述属性特征注入人脸生成器,生成重建的人脸; 通过损失函数Loss约束,引导自监督网络充分学习定制化人脸的身份特征; 通过损失函数Loss约束,引导自监督网络充分学习定制化人脸的身份特征的计算包括, 损失函数Loss的计算包括, ; 其中,表示gan损失,表示属性保留损失,表示身份保留损失,表示重构损失,、和分别表示、和的损失权重; 属性保留损失的计算包括, ; 身份保留损失的计算包括, ; 其中,表示两个向量的余弦相似度; 重构损失的计算包括, 。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人杭州小影创新科技股份有限公司,其通讯地址为:310000 浙江省杭州市西湖区文三路478号华星时代广场A座22层;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励