中国科学技术大学张举勇获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国科学技术大学申请的专利一种多模态人像视频编辑方法、电子设备以及存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119180897B 。
龙图腾网通过国家知识产权局官网在2025-11-04发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202410855478.6,技术领域涉及:G06T15/00;该发明授权一种多模态人像视频编辑方法、电子设备以及存储介质是由张举勇;高玄设计研发完成,并于2024-06-28向国家知识产权局提交的专利申请。
本一种多模态人像视频编辑方法、电子设备以及存储介质在说明书摘要公布了:本发明提供了一种多模态人像视频编辑方法,可以应用于视频编辑技术领域。该方法包括:给定人像视频,预处理得到相机参数,人体身份、表情、姿态系数、人体语义分割图和二维人像遮罩;基于神经高斯纹理机制,将可学习的三维高斯特征嵌入到参数化人体几何表面上,使用神经渲染器将三维高斯泼溅特征图转化为图像,通过视频的RGB和分割图信息,优化重建三维人像;使用迭代数据集更新技术,将多模态二维图像生成模型的知识蒸馏到三维人像编辑中,使用表情相似性引导和面部感知人像编辑模型,提升了编辑质量。该方法将二维编辑任务提升至三维,具有良好的三维一致性和时域一致性。通过多模态生成模型的知识,可以实现高质量人像视频编辑功能。
本发明授权一种多模态人像视频编辑方法、电子设备以及存储介质在权利要求书中公布了:1.一种多模态人像视频编辑方法,其特征在于,所述方法包括: 通过将三维高斯场中的高斯点嵌入到参数化人体几何表示的二维纹理空间中对所述人像视频的帧图像进行升维操作,得到三维动态高斯特征场; 对所述三维动态高斯特征场进行三维高斯泼溅,得到三维高斯渲染特征,并利用卷积神经渲染器将所述三维高斯渲染特征进行转化,得到神经渲染的RGB图像; 利用所述三维动态高斯特征场对所述人像视频中的目标人物进行三维重建,并通过重建阶段的损失函数利用所述神经渲染的RGB图像、所述人像视频的原始RGB图像对三维人像重建过程进行优化; 将对所述神经渲染RGB图像的编辑信息蒸馏到优化后的三维人像重建结果上进而完成三维人像的更新,并利用编辑后的神经渲染RGB图像替换所述人像视频的原始帧图像进而完成视频帧数据集的编辑; 交替迭代地进行视频帧数据集的编辑过程和三维人像的更新过程,并将所述编辑后的神经渲染的RGB图像与所述人像视频的原始帧图像映射到相同表情空间; 利用表情相似度损失函数以及所述重建阶段的损失函数对所述卷积神经渲染器进行优化,并对所述三维动态高斯特征场进行再次优化,直到完成所述人像视频中所有视频帧图像的编辑。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国科学技术大学,其通讯地址为:230026 安徽省合肥市包河区金寨路96号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励