Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 厦门理工学院江楠峰获国家专利权

厦门理工学院江楠峰获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉厦门理工学院申请的专利基于教案驱动的教育虚拟人生成方法、装置、设备和介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120526061B

龙图腾网通过国家知识产权局官网在2025-09-30发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511020646.0,技术领域涉及:G06T17/00;该发明授权基于教案驱动的教育虚拟人生成方法、装置、设备和介质是由江楠峰;周欣玥;刘宇琦;王大寒;满旺设计研发完成,并于2025-07-24向国家知识产权局提交的专利申请。

基于教案驱动的教育虚拟人生成方法、装置、设备和介质在说明书摘要公布了:基于教案驱动的教育虚拟人生成方法、装置、设备和介质,涉及虚拟人技术领域。方法包含:获取语音文件。获取第一图像帧。重复执行后续步骤直至语音结束,获取图像帧序列。并进行同步合成,获取虚拟人的教学视频。提取目标帧的人像特征和下一帧的音频特征并对齐,获取多模态对齐特征。从人像特征提取身份特征参数、表情系数参数和姿态参数,然后由FLAME模型转为人脸三维点云信息,并进行位置编码,获取查询嵌入特征。以查询嵌入特征和多模态对齐特征为主输入,以音频特征为条件进行融合,获取视觉对齐特征。将视觉对齐特征、身份特征参数、表情系数参数和姿态参数融合调制成高斯表示,并投影至二维图像平面再融合,获取下一帧的图像帧。

本发明授权基于教案驱动的教育虚拟人生成方法、装置、设备和介质在权利要求书中公布了:1.一种基于教案驱动的教育虚拟人生成方法,其特征在于,包含: 获取教案文本对应的语音文件;其中,获取能够找到教案的信息数据;其中,所述信息数据为教案编号和或名称;根据所述信息数据从预先构建的结构化教案数据库中获取教案相关数据,并输入大语言模型,生成结构化教案数据集; 获取讲师的正面照作为第一图像帧; 重复执行后续步骤直至语音文件结束,获取图像帧序列;并将所述图像帧序列与所述语音文件按时间轴进行同步合成,输出对应的结构化教育数据集生成的虚拟人的教学视频; 提取目标帧的人像特征,以及下一帧的音频片段的音频特征,并对齐,获取多模态对齐特征;第一次迭代时以所述第一图像帧作为目标帧,后续迭代以上一次迭代生成的图像帧作为目标帧;其中,通过基于Vit的特征提取模块从目标图像中提取人像特征;提取下一帧对应的音频片段,并使用梅尔频谱图提取该音频片段的音频特征;将静态人像图像的特征在时间维度上复制多份,使其与音频的帧数保持一致;引入一个对齐模块,进一步对每对图像‑音频特征进行特征级融合;对齐模块包括时间对齐机制和多模态注意力机制;时间对齐机制根据图像帧与音频帧在时间轴上的对应关系,对音频特征进行帧级重采样或窗口平滑处理,保证时间一致性,对图像特征与音频特征分别通过线性投影层映射至统一维度,并进行归一化处理;多模态注意力机制设音频帧序列为KeyValue,图像特征为Query,通过注意力机制提取音频在当前时间点上的关键语义信息,并与图像嵌入聚合,形成对齐后的多模态对齐特征; 通过三个独立的全连接子网络从所述人像特征提取身份特征参数、表情系数参数和姿态参数,然后由FLAME模型转为人脸三维点云信息,并进行位置编码,获取人脸点云的查询嵌入特征; 以所述查询嵌入特征和所述多模态对齐特征为主输入,以所述音频特征为条件,进行融合,获取视觉对齐特征; 将所述视觉对齐特征、所述身份特征参数、所述表情系数参数和所述姿态参数融合调制成高斯表示,并投影至二维图像平面再融合,获取下一帧的图像帧。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人厦门理工学院,其通讯地址为:361024 福建省厦门市集美区理工路600号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。