Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 华中科技大学田佳钦获国家专利权

华中科技大学田佳钦获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉华中科技大学申请的专利一种基于元宇宙的唇语学习辅助训练系统及其应用获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116524791B

龙图腾网通过国家知识产权局官网在2025-12-19发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310371018.1,技术领域涉及:G09B21/00;该发明授权一种基于元宇宙的唇语学习辅助训练系统及其应用是由田佳钦;何思珝;赵勤劳;肖阳;王然设计研发完成,并于2023-04-07向国家知识产权局提交的专利申请。

一种基于元宇宙的唇语学习辅助训练系统及其应用在说明书摘要公布了:本发明公开了一种基于元宇宙的唇语学习辅助训练系统及其应用,其中系统包括:唇读训练模块,用于存储标准唇形视频,建立元宇宙学习场景,使得用户在元宇宙学习场景中通过标准唇形视频进行唇读训练,计算用户唇读的文本和标准唇形视频的文本之间的相似度;虚拟人对答沟通模块,用于建立元宇宙社交场景,使得用户在元宇宙社交场景中与虚拟人进行对答沟通;用户个人中心模块,用于记录和反馈用户的唇读训练效果,将用户的音频与人脸结合形成用户的虚拟形象,使得用户在元宇宙社交场景中以虚拟形象与其他用户进行对答沟通。本发明系统可以提高唇语学习的准确率,及时反馈学习效果,互动性强,学习辅助方式多样,使用户通过系统辅助增强沟通能力。

本发明授权一种基于元宇宙的唇语学习辅助训练系统及其应用在权利要求书中公布了:1.一种基于元宇宙的唇语学习辅助训练系统,其特征在于,包括:唇读训练模块、虚拟人对答沟通模块和用户个人中心模块; 所述唇读训练模块,用于存储预先采集的标准唇形视频,建立元宇宙学习场景,使得用户在元宇宙学习场景中通过标准唇形视频进行唇读训练,从用户通过标准唇形视频进行唇读训练时的唇语学习视频中识别用户唇读的文本,计算用户唇读的文本和标准唇形视频的文本之间的相似度,通过相似度判断用户的唇读训练效果; 所述虚拟人对答沟通模块,用于建立元宇宙社交场景,从用户在元宇宙社交场景中讲话的视频中识别社交文本,将社交文本在对答过程的回答文本转化为音频后与人脸结合形成虚拟人,使得用户在元宇宙社交场景中与虚拟人进行对答沟通; 所述用户个人中心模块,用于记录和反馈用户的唇读训练效果,将用户的音频与人脸结合形成用户的虚拟形象,使得用户在元宇宙社交场景中以虚拟形象与使用唇语学习辅助训练系统的其他用户进行对答沟通; 所述虚拟人对答沟通模块包括:虚拟人形成模块和对话机器人, 所述虚拟人形成模块,用于调用唇读训练模块中的唇语识别模型从用户在元宇宙社交场景中讲话的视频中识别社交文本,将社交文本输入对话机器人,将对话机器人输出的回答文本转化为音频后与人脸结合形成虚拟人; 所述虚拟人形成模块包括语音合成模块和动画生成模块, 所述语音合成模块,用于将对话机器人输出的文本通过语音合成软件合成音频; 所述动画生成模块,用于使用说话人脸生成模型将音频与人脸结合,形成虚拟人;其中,说话人脸生成模型包括编码器、解码器和口型判别器,说话人脸生成模型通过如下方式训练得到: 将样本语音片段转换为梅尔频谱形式,通过编码器中的残差卷积将梅尔频谱形式的样本语音片段编码为预处理音频,通过编码器中的残差卷积对样本人脸图片下采样,得到预处理人脸图片,通过解码器中的转置卷积将预处理音频和预处理人脸图片解码,形成虚拟人;口型判别器通过两个卷积网络分别对虚拟人的口型和音频编码,以编码后的口型与预处理人脸图片中口型之间误差最小且编码后的音频与预处理音频之间误差最小为目标,训练至收敛,得到训练好的说话人脸生成模型。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人华中科技大学,其通讯地址为:430074 湖北省武汉市洪山区珞喻路1037号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。