重庆邮电大学高新波获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉重庆邮电大学申请的专利一种基于图像点云多模态融合与关节引导的手势重建方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119963740B 。
龙图腾网通过国家知识产权局官网在2025-11-11发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510125414.5,技术领域涉及:G06T17/00;该发明授权一种基于图像点云多模态融合与关节引导的手势重建方法是由高新波;陈磊;甘吉;冷佳旭;李嫄源;朱浩设计研发完成,并于2025-01-27向国家知识产权局提交的专利申请。
本一种基于图像点云多模态融合与关节引导的手势重建方法在说明书摘要公布了:本发明属于人机交互和计算机视觉领域,特别涉及一种基于图像点云多模态融合与关节引导的手势重建方法,包括以手部深度图与三维点云作为输入,利用针对二维深度图像和三维点云的特征提取网络分别提取深度图及三维点云的关键点特征;随后利用多模态特征与全局特征融合模块,为多模态特征提供额外的全局信息;接着,使用关节坐标引导的特征融合迭代模块进一步优化和更新融合特征,以提高三维手势的重建精度,同时通过多次迭代更新实现了对手部姿态中各关键点的精确估计。本发明有效结合了深度图像信息与点云空间几何结构特征,同时采用关键点特征来聚合各自模态的特征信息,减少了无效特征的冗余交互,并提高了多模态融合的效率。
本发明授权一种基于图像点云多模态融合与关节引导的手势重建方法在权利要求书中公布了:1.一种基于图像点云多模态融合与关节引导的手势重建方法,其特征在于,构建手势重建模型,利用该模型对深度图像进行手势重建,重建过程包括以下步骤: 101、获取手部深度图像及其点云数据,图像特征提取网络从深度图像中提取得到局部图像特征和全局图像特征,点云特征提取网络从点云数据中提取得到全局点云特征; 102、将全局图像特征和全局点云特征拼接在一起,并通过诱导偏置层为每个关节点生成偏差嵌入向量,所有关节点的该向量构成全局关键点嵌入; 103、全局关键点嵌入通过线性变换将高维嵌入投影至三维空间得到初始三维关节坐标,并根据该三维关节从点云数据中提取局部点云特征; 104、通过图卷积网络对全局关键点嵌入进行更新,得到更新的全局特征,将该全局特征分别与图像局部特征和点云局部特征拼接,得到图像关节特征和点云关节特征; 105、基于注意力机制分别对图像关节特征和点云关节特征进行加权处理,将加权后的特征送入图卷积网络,充分利用拓扑信息进行进一步特征融合和更新; 106、利用图卷积网络更新后得到的图像关节特征和点云关节特征预测三维关节坐标,判断是否达到迭代上限,若未达到则根据预测的三维关节点更新点云局部特征,并返回步骤104,否则当前预测的三维关节坐标作为重建结果。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人重庆邮电大学,其通讯地址为:400065 重庆市南岸区南山街道崇文路2号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励