买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉上海交通大学申请的专利一种基于边缘计算终端的唇语识别方法及装置获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN114360062B 。

龙图腾网通过国家知识产权局官网在2025-11-04发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202210004835.9，技术领域涉及：G06V40/20；该发明授权一种基于边缘计算终端的唇语识别方法及装置是由薛广涛;赖皓阳;张永昭设计研发完成，并于2022-01-05向国家知识产权局提交的专利申请。

本一种基于边缘计算终端的唇语识别方法及装置在说明书摘要公布了：本发明涉及一种基于边缘计算终端的唇语识别方法及装置，包括以下步骤：S1、构建唇语识别模型，通过中文唇语数据集进行模型预训练，提取出预训练模型；S2、对预训练模型进行模型压缩；S3、连续采集边缘计算终端的视频数据，作为目标数据集进行保存；S4、对目标数据集进行预处理；S5、根据目标数据集，对预训练模型进行微调训练，获得轻量化模型；S6、优化轻量化模型，适配边缘计算终端的硬件平台并部署到边缘计算终端，采集用户的视频数据，识别用户的唇语信息，输出用户指令的识别结果。与现有技术相比，本发明具有提高语音识别的识别效果和准确性，提高唇语识别模型的鲁棒性，有利于部署在计算能力有限的边缘计算终端上等优点。

本发明授权一种基于边缘计算终端的唇语识别方法及装置在权利要求书中公布了：1.一种基于边缘计算终端的唇语识别方法，其特征在于，具体包括以下步骤： S1、构建基于深度学习的唇语识别模型，通过中文唇语数据集进行模型预训练，提取出在数据集上表现良好的预训练模型；所述唇语识别模型包括处理图像特征的前端网络结构，深度处理图像信息的中端网络结构，以及处理前后文信息的后端网络结构，采用3DConv+ResNet-18+MS-TCN模型结构； S2、通过知识蒸馏、模型剪枝和参数迁移方式对预训练模型进行模型压缩；其中，将3DConv层全部参数迁移，ResNet-18层迁移前面6层的参数，MS-TCN层全部参数迁移； S3、连续采集边缘计算终端的使用场景中用户使用的视频数据，作为迁移学习使用的目标数据集进行保存； S4、对目标数据集进行预处理，并且对经预处理得到的音频数据，通过语音识别技术以及音视频时间轴对齐方式，生成对应视频帧的中文标签； S5、根据完成预处理的目标数据集，对完成模型压缩的预训练模型进行微调训练，获得轻量化模型； S6、优化轻量化模型的计算速度，适配边缘计算终端的硬件平台并部署到相应的边缘计算终端，采集用户的视频数据，识别用户的唇语信息，输出用户指令的识别结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人上海交通大学，其通讯地址为：200240 上海市闵行区东川路800号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。