Document
拖动滑块完成拼图
个人中心

预订订单
服务订单
发布专利 发布成果 人才入驻 发布商标 发布需求

在线咨询

联系我们

龙图腾公众号
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 恭喜南京理工大学舒祥波获国家专利权

恭喜南京理工大学舒祥波获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网恭喜南京理工大学申请的专利一种基于混合对比学习的零样本动作识别方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115050096B

龙图腾网通过国家知识产权局官网在2025-06-17发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202210629941.6,技术领域涉及:G06V40/20;该发明授权一种基于混合对比学习的零样本动作识别方法是由舒祥波;王青云;宋砚设计研发完成,并于2022-06-06向国家知识产权局提交的专利申请。

一种基于混合对比学习的零样本动作识别方法在说明书摘要公布了:本发明公开了一种基于混合对比学习的零样本动作识别方法,步骤如下:1、首先对视频类别进行随机划分,2、对视频和类别的文本描述分别生成正例样本,3、对视频进行预处理得到视频的时空特征,4、学习与任务相关的视频嵌入特征,5、学习与任务相关的文本嵌入特征,6、同时优化视频和文本的嵌入特征,7、在公共特征空间中对齐视频和文本的嵌入特征,8、训练模型,9、测试模型。本发明提出了一种端到端的零样本动作识别框架,和一种基于混合对比学习的零样本动作识别方法,通过在公共特征空间对不同模态特征同时进行优化和对齐以实现不同模态间信息的泛化。为了具体实现这一目标,本发明还针对该混合对比学习方法,提出了分别针对视频和文本的正例样本生成方法,最终提升了零样本动作识别的性能。

本发明授权一种基于混合对比学习的零样本动作识别方法在权利要求书中公布了:1.一种基于混合对比学习的零样本动作识别方法,其特征在于,该方法包括以下步骤: 步骤1:获取包括视频数据以及对应的标签描述语句的基准数据集,划分训练集和测试集; 步骤2:对步骤1中的视频数据,采取以不同帧率随机选取视频片段的方式生成视频特征的正例样本;对应的标签描述语句,采取随机遮蔽标签描述语句中若干单词的方式生成文本特征的正例样本; 步骤3:构建动作识别模型,所述动作识别模型包括视频处理模块、视频特征提取模块、文本特征提取模块; 所述视频处理模块中,使用预训练好的网络模型r2+1d对以不同帧率随机选取的输入视频的片段抽取时空特征,得到各片段的时空特征; 所述视频特征提取模块中,根据各片段的时空特征,输出各片段的视频嵌入特征; 所述文本特征提取模块中,使用预训练过的语言模型BERT对采取随机遮蔽标签描述语句中若干单词后标签描述语句进行特征提取,得到文本嵌入特征; 步骤4:基于步骤2中得到的训练集,联合训练视频特征提取模块与文本特征提取模块; 步骤5:对步骤2中得到的测试集,使用训练好的文本特征提取模块提取采取随机遮蔽标签描述语句中若干单词后标签描述语句的文本嵌入特征;将以不同帧率随机选取的视频数据的片段依次输入视频处理模块、训练好的视频特征提取模块,得到各片段的视频嵌入特征,取各片段的视频嵌入特征的平均值作为该视频数据的视频嵌入特征;基于最近邻分类方法,将该视频数据的视频嵌入特征与测试集对应的文本嵌入特征进行比较,预测其类别。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人南京理工大学,其通讯地址为:210094 江苏省南京市玄武区孝陵卫200号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。