山东师范大学戚萌获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉山东师范大学申请的专利一种基于注意力机制和图卷积的3D手势估计方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN117058761B 。
龙图腾网通过国家知识产权局官网在2025-12-26发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202311034413.7,技术领域涉及:G06V40/20;该发明授权一种基于注意力机制和图卷积的3D手势估计方法及系统是由戚萌;刘延兵;魏育赟;彭丽媛设计研发完成,并于2023-08-16向国家知识产权局提交的专利申请。
本一种基于注意力机制和图卷积的3D手势估计方法及系统在说明书摘要公布了:本发明属于计算机视觉技术领域,尤其涉及一种基于注意力机制和图卷积的3D手势估计方法及系统,包括:利用2D特征提取模块对手部RGB图像进行特征提取,得到2D热图与轮廓图;对将2D热图进行特征加强,将特征加强后的2D热图以及轮廓图输入至特征相互注入模块,将2D关节点位置信息注入到轮廓图中得到第一特征图,同时将轮廓图中与预测关节点坐标相关的全局信息注入到2D热图的特征中得到第二特征图;将第一和第二特征图拼接后,再与2D特征提取模块跳跃链接后输入至3D手势预测网络中,预测3D手部关节点位置。本发明使用基于注意力的模块来完成不同模态之间的特征相互注入,从而充分利用手部关节位置信息和全局信息,提升3D手势估计精度。
本发明授权一种基于注意力机制和图卷积的3D手势估计方法及系统在权利要求书中公布了:1.一种基于注意力机制和图卷积的3D手势估计方法,其特征在于,包括以下步骤: 利用2D特征提取模块对获取的手部RGB图像进行特征提取,得到手部RGB图像的2D热图与轮廓; 将2D热图输入至图卷积神经网络中加强邻居关节点之间的联系,得到特征加强后的2D手部关节热图; 将特征加强后的2D热图以及轮廓图输入至特征相互注入模块,通过特征注入操作,将2D关节点位置信息注入到轮廓图中,得到第一特征图,同时将轮廓图中与预测关节点坐标相关的全局信息注入到2D热图的特征中,得到第二特征图;将第一特征图和第二特征图拼接后作为特征相互注入模块的输出; 将特征相互注入模块的输出与2D特征提取模块中第一个残差块的输出跳跃链接后输入至3D手势预测网络中,预测3D手部关节点位置,同时预测深度图作为监督; 所述将2D关节点位置信息注入到轮廓图中,包括: 从轮廓图中提取query矩阵和矩阵,在热图中提取key矩阵、和value矩阵;将矩阵与矩阵的转置矩阵做矩阵乘法,经过softmax函数后得到第一注意力矩阵; 将矩阵与矩阵的转置做矩阵乘法,经过sigmoid函数后得到第二注意力矩阵;将第一注意力矩阵与第二注意力矩阵逐元素相乘后,与矩阵做矩阵乘法,最后经过全连接层和残差连接后得到第一特征图; 所述将轮廓图中与预测关节点坐标相关的全局信息注入到2D热图的特征中,包括: 从轮廓图中提取key矩阵以及value矩阵,在热图中提取query矩阵; 将矩阵与矩阵的转置做矩阵乘法,经过softmax函数后得到第三注意力矩阵,将第三注意力矩阵与矩阵逐元素相乘后,经过全连接层和残差连接得到第二特征图。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人山东师范大学,其通讯地址为:250014 山东省济南市历下区文化东路88号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励