浙江师范大学;科大讯飞股份有限公司黄昌勤获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉浙江师范大学;科大讯飞股份有限公司申请的专利一种基于大模型视频描述的多模态情感分析方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN117237774B 。
龙图腾网通过国家知识产权局官网在2025-11-25发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202311215847.7,技术领域涉及:G06V10/80;该发明授权一种基于大模型视频描述的多模态情感分析方法及系统是由黄昌勤;林振亨;黄琼浩;蒋云良;王士进设计研发完成,并于2023-09-19向国家知识产权局提交的专利申请。
本一种基于大模型视频描述的多模态情感分析方法及系统在说明书摘要公布了:本发明公开了一种基于大模型视频描述的多模态情感分析方法及系统,方法包括:获取有声视频片段,将有声视频片段分解成视频模态数据、音频模态数据和文本模态数据;对视频模态数据、音频模态数据和文本模态数据进行单模态嵌入处理,得到视频模态特征向量、音频模态特征向量和文本模态特征向量;根据视频模态特征向量和音频模态特征向量对文本模态特征向量进行信息增强处理,得到增强文本模态特征向量;对视频模态特征向量、增强文本模态特征向量和音频模态特征向量在大模型块中进行跨模态融合处理,得到情感分析输出值。本发明实施例能够结合原始多模态数据中的更多信息进行情感分析,分析结果更为准确,可广泛应用于计算机技术领域。
本发明授权一种基于大模型视频描述的多模态情感分析方法及系统在权利要求书中公布了:1.一种基于大模型视频描述的多模态情感分析方法,其特征在于,包括: 获取有声视频片段,将所述有声视频片段分解成视频模态数据、音频模态数据和文本模态数据; 对所述视频模态数据、所述音频模态数据和所述文本模态数据进行单模态嵌入处理,得到视频模态特征向量、音频模态特征向量和文本模态特征向量; 根据所述视频模态特征向量和所述音频模态特征向量对所述文本模态特征向量进行信息增强处理,得到增强文本模态特征向量; 对所述视频模态特征向量、所述增强文本模态特征向量和所述音频模态特征向量在大模型块中进行跨模态融合处理,得到情感分析输出值; 所述根据所述视频模态特征向量和所述音频模态特征向量对所述文本模态特征向量进行信息增强处理,得到增强文本模态特征向量,包括: 根据各个模态特征向量确定可学习标量;其中,所述可学习标量根据一个全局卷积对各个模型的特征向量进行压缩得到; 配置第一参数矩阵,根据各个模态特征向量和所述第一参数矩阵确定第一中间向量; 根据所述第一中间向量和所述可学习标量计算各个模态组合情况的信息值; 对所述信息值进行信息集成,得到增强文本模态特征向量。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人浙江师范大学;科大讯飞股份有限公司,其通讯地址为:321004 浙江省金华市迎宾大道688号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励