上海交通大学翟广涛获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉上海交通大学申请的专利基于神经辐射场的超低带宽视频通话传输系统和方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115941875B 。
龙图腾网通过国家知识产权局官网在2025-08-22发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202211684296.4,技术领域涉及:H04N7/14;该发明授权基于神经辐射场的超低带宽视频通话传输系统和方法是由翟广涛;彭乙骢;李一非;王嘉设计研发完成,并于2022-12-27向国家知识产权局提交的专利申请。
本基于神经辐射场的超低带宽视频通话传输系统和方法在说明书摘要公布了:本发明提供一种基于神经辐射场的超低带宽视频通话传输系统和方法,包括:三维数字人脸重建模型,其从人脸图像中提取出人脸特征进行超低带宽视频通话传输;并能够以表情特征为输入显示地控制人脸表情,实现三维重建;人脸特征聚类分析模块,其实现人脸特征进行超低带宽视频通话传输的实时性;人脸特征压缩模块,对人脸特征进行压缩;视频通话演示模块,展示实时的超低带宽视频通话传输过程。本发明动态神经辐射场实现人脸重建模型,实现高拟真度无限分辨率的人脸重建,根据模型将人脸表情特征与人脸图像一一对应的特性,由原本的人脸视频的传输转为人脸特征的传输,并通过聚类分析和特征压缩,最终实现超低带宽近乎实时的人脸视频通话传输效果。
本发明授权基于神经辐射场的超低带宽视频通话传输系统和方法在权利要求书中公布了:1.一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,包括: 三维数字人脸重建模块,所述三维数字人脸重建模型从输入的人脸图像中提取人脸表情特征,并以人脸表情特征为输入隐式地控制人脸表情,实现三维重建; 视频通话演示模块,所述视频通话演示模块展示实时的视频通话过程,其包括服务器发送端和客户接收端,所述服务器发送端利用所述三维数字人脸重建模块采集的人脸表情特征传输至客户接收端; 人脸特征压缩模块,所述人脸特征压缩模块与所述服务器发送端连接,将传输的人脸表情特征进行压缩; 人脸特征聚类分析模块,所述人脸特征聚类分析模块与所述客户接收端连接,对接收的经所述人脸特征压缩模块压缩后的人脸表情特征进行聚类分析、利用所述三维数字人脸重建模块进行采样预渲染和结果替代,实现视频通话的实时性; 所述的人脸特征聚类分析模块,包括: 人脸特征采集单元,所述人脸特征采集单元对多个不同主体分别进行人脸视频采集,并获取所有人脸表情特征整合到一起; 聚类分析单元,所述聚类分析单元对所述人脸特征采集单元得到的人脸表情特征进行k-means聚类分析,计算每类人脸表情特征点到其聚类中心的距离,并求和对比,最终确定最佳的聚类数目; 采样和预渲染单元,所述采样和预渲染单元对所述聚类分析后的每一类人脸特征点按比例进行采样,并通过三维数字人脸重建模型对采样点进行预渲染,得到渲染结果存储下来; 结果替代单元,将所述传输来的目标人脸特征与聚类采样得到的人脸特征进行比较,选取距离最近的特征的预渲染结果,近似地代替当前传输来的人脸特征的渲染结果; 其中,所述人脸特征采集单元考虑到人脸表情在通话时随时间分布的聚类特性,并以此为依据,构建视频通话人脸表情特征数据库。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人上海交通大学,其通讯地址为:200240 上海市闵行区东川路800号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。