买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉华中科技大学申请的专利一种融合情感信息的多模态短视频标签推荐方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN115329127B 。

龙图腾网通过国家知识产权局官网在2025-09-09发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202210867181.2，技术领域涉及：G06F16/735；该发明授权一种融合情感信息的多模态短视频标签推荐方法是由李玉华;杜畅;李瑞轩;辜希武设计研发完成，并于2022-07-22向国家知识产权局提交的专利申请。

本一种融合情感信息的多模态短视频标签推荐方法在说明书摘要公布了：本发明公开了一种融合情感信息的多模态短视频标签推荐方法，属于视频处理技术领域，包括：构建短视频样本集；将短视频样本输入基于多头注意力机制和自编码器的初始多模态标签推荐模型，以使其对短视频样本的图像、音频、文本进行特征提取得到内容特征和情感特征，并利用注意力网络进行融合得到多个候选视频标签；以期望视频标签为目标，以候选视频标签与期望视频标签的文字特征区别为损失，训练初始多模态标签推荐模型得到目标多模态标签推荐模型；将当前短视频输入目标多模态标签推荐模型以使其生成目标视频标签。本发明通过融合图像特征、音频特征以及文本特征，能够充分利用视频相关的多模态信息，有效提高所生成的视频标签的质量。

本发明授权一种融合情感信息的多模态短视频标签推荐方法在权利要求书中公布了：1.一种融合情感信息的多模态短视频标签推荐方法，其特征在于，包括： S1：构建短视频样本集，各短视频样本的标签包括对应的多个平台标签，且其属性包括对应的图像特征、音频特征以及文本特征； S2：将所述短视频样本输入基于多头注意力机制和自编码器的初始多模态标签推荐模型，以使其对所述短视频样本的图像、音频、文本进行特征提取，得到内容特征和情感特征，并利用注意力网络进行融合得到多个候选视频标签；以期望视频标签为目标，以所述候选视频标签与所述期望视频标签的文字特征区别为损失，训练所述初始多模态标签推荐模型得到目标多模态标签推荐模型； S3：将当前短视频输入所述目标多模态标签推荐模型以使其生成目标视频标签； 所述初始多模态标签推荐模型包括：内容特征提取模块、情感特征提取模块和标签预测模块；所述内容特征提取模块基于模态Transfomer结构；所述情感特征提取模块基于跨模态的多头注意力结构；所述标签预测模块基于注意力网络； 所述内容特征提取模块包括依次连接的：编码器层、堆叠块层和融合层；所述编码器层用于对不同模态信息进行编码，所述堆叠块层用于进行带有注意力机制的模态表示；所述融合层用于对跨模态信息进行融合得到最终的内容特征表示；所述堆叠块层中对每个模态都采用N个堆叠块实现带有注意力机制的特征表示，所述堆叠块包括多头注意力机制、跨注意力机制以及两个前馈神经网络； 所述情感特征提取模块通过多模态多头注意力框架MMFA将图像特征、音频特征以及文本特征进行模态间的特征融合，得到所述短视频样本对应的情感表示向量；MMFA中包括多头自注意力机制和多头共注意力机制。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人华中科技大学，其通讯地址为：430074 湖北省武汉市洪山区珞喻路1037号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。