中国科学技术大学李厚强获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国科学技术大学申请的专利手语识别方法、系统、设备及存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116092192B 。
龙图腾网通过国家知识产权局官网在2025-12-26发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310069248.2,技术领域涉及:G06V40/20;该发明授权手语识别方法、系统、设备及存储介质是由李厚强;周文罡;赵伟超;胡鹤臻设计研发完成,并于2023-01-16向国家知识产权局提交的专利申请。
本手语识别方法、系统、设备及存储介质在说明书摘要公布了:本发明公开了一种手语识别方法、系统、设备及存储介质,将训练分为自监督的预训练和下游的微调两个训练阶段,在自监督的预训练中可以充分利用已有的手语数据无标注数据,具体的:利用手语数据生成伪标签,通过遮盖元组建模的方式对姿态三元组的隐语义表征进行遮盖,通过捕捉上下文线索来重建遮盖的元组对应的隐语义表征,以学习姿态之间的转换关系;之后,通过下游的微调阶段,进行模型参数的微调,以提高手语识别模型的识别准确率;通过上述训练可以从而在识别阶段下游手语孤立词分类任务准确识别出手语数据对应的词汇。
本发明授权手语识别方法、系统、设备及存储介质在权利要求书中公布了:1.一种手语识别方法,其特征在于,包括: 构建初始的手语识别模型; 利用姿态运动序列对所述初始的手语识别模型进行两阶段训练;第一阶段为自监督的预训练:初始的手语识别模型包括:姿态量化器、姿态嵌入层、时序编码器与码字解码器;将姿态运动序列中每一姿态三元组分别输入至姿态量化器与姿态嵌入层,通过所述姿态量化器进行量化,生成每一姿态三元组对应的伪标签;通过所述姿态嵌入层将每一姿态三元组映射为对应的隐语义表征,并利用遮盖元组建模的方式对每一姿态三元组中的若干元组对应的隐语义表征进行遮盖再输入至时序编码器;所述时序编码器通过捕捉上下文线索来重建遮盖的元组对应的隐语义表征,输出姿态运动序列对应的编码序列;所述码字解码器利用所述编码序列以及每一姿态三元组中遮盖元组的位置预测每一遮盖元组的标签,并结合伪标签构建第一阶段的损失函数,优化所述初始的手语识别模型,所述遮盖元组是指隐语义表征被遮盖的元组;第二阶段为微调阶段,完成第一阶段的训练后,移除姿态量化器并使用预测头替换所述码字解码器,获得包含姿态嵌入层、时序编码器与预测头的最终手语识别模型,输入姿态运动序列,通过姿态嵌入层将每一姿态三元组映射为对应的隐语义表征并通过时序编码器获得姿态运动序列对应的编码序列,再通过所述预测头预测出词序列,利用所述姿态运动序列对应真实标签与预测出的词序列构建第二阶段的损失函数进行参数的微调,获得训练后的手语识别模型;其中,第一阶段使用的姿态运动序列为无标签数据,第二阶段使用的姿态运动序列为有标签数据; 手语识别阶段,将待识别的姿态运动序列输入至所述训练后的手语识别模型,获得预测出的词序列。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国科学技术大学,其通讯地址为:230026 安徽省合肥市包河区金寨路96号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励