Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 浙江大学;浙江大学软件学院(宁波)管理中心(宁波软件教育中心)张金山获国家专利权

浙江大学;浙江大学软件学院(宁波)管理中心(宁波软件教育中心)张金山获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉浙江大学;浙江大学软件学院(宁波)管理中心(宁波软件教育中心)申请的专利一种面向多要素驱动源的2D数字人生成方法及装置获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119251365B

龙图腾网通过国家知识产权局官网在2025-10-17发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411239784.3,技术领域涉及:G06T13/80;该发明授权一种面向多要素驱动源的2D数字人生成方法及装置是由张金山;蒋涛;田旭泽;郭厚孝;沈根行;尹建伟设计研发完成,并于2024-09-05向国家知识产权局提交的专利申请。

一种面向多要素驱动源的2D数字人生成方法及装置在说明书摘要公布了:本发明公开了一种面向多要素驱动源的2D数字人生成方法及装置,包括获取文本、语音和视频多种要素的驱动源以及待驱动的虚拟形象图像,并使用驱动源解析模块中的文本转语音、音频特征提取和视频预处理等算法得到唇形驱动源和动作驱动源;将动作驱动源中的姿势动作和表情动作迁移到待驱动的虚拟图像中,得到与动作驱动源动作同步的驱动结果;并根据唇形驱动源将动作驱动结果中的口型替换为新口型,得到与唇形驱动源同步的结果;将文本和语音信号对应的融合音频与动作及唇形的双重驱动结果进行合成,得到音画匹配的2D数字人生成结果。本发明支持多要素的驱动源进行较为可控的2D数字人驱动生成。

本发明授权一种面向多要素驱动源的2D数字人生成方法及装置在权利要求书中公布了:1.一种面向多要素驱动源的2D数字人生成方法,其特征在于,该方法包括以下步骤: S1、获取多要素驱动源和待驱动虚拟形象的图像; S2、进行驱动源解析,包括: 将文本信号转换为无噪声第一音频后提取特征,作为第一唇形驱动源; 将语音信号转化为无噪声第二音频后提取特征,作为第二唇形驱动源; 将视频信号和待驱动虚拟形象的图像经过视频预处理算法处理,得到格式规范的动作驱动源和规范的虚拟形象图像,将虚拟形象图像的矩形裁剪框作为第一裁剪参数; S3、提取动作驱动源和虚拟形象图像的面部参数,进行流场建模,根据流场中的像素点进行图像重建后对面部参数进行修复,具体为: 基于图像重建算法,将流场中的每个像素点的偏移量叠加到所述虚拟形象的图像坐标上;然后使用由numpy包实现的双线性插值方法,根据生成的坐标在所述虚拟形象图像上进行插值,最后根据插值得到的像素值,重构目标图像,根据流场将虚拟形象的图像扭曲为与目标动作同步的动作驱动第一结果; 将动作驱动第一结果和虚拟形象的图像输入至预训练的修复网络,并根据第一面部参数进行修复,得到与驱动源动作同步的动作驱动第二结果; S4、对动作驱动结果进行矩形框裁剪,将得到的裁剪参数和规范的虚拟形象图像结合,并保存和对齐仿射变换矩阵与矩形裁剪框; S5、将第一唇形驱动源和第二唇形驱动源组合为第三唇形驱动源,将第一音频和语音信号组合为第三音频;将第三唇形驱动源中的唇形信息映射到虚拟图像中,得到唇形驱动的第三结果后根据仿射变换矩阵进行逆变换,再根据矩形裁剪框进行图像数据替换,得到唇形驱动的第四结果; S6、根据第一裁剪参数将原始虚拟图像裁剪框中的图像数据替换为第四结果,将所唇形驱动的第四结果和第三音频进行合成,得到2D数字人生成结果。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人浙江大学;浙江大学软件学院(宁波)管理中心(宁波软件教育中心),其通讯地址为:310058 浙江省杭州市西湖区余杭塘路866号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。