中国科学院空天信息创新研究院姚方龙获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国科学院空天信息创新研究院申请的专利一种用于视频讽刺分析的类脑跨模态信息交互融合方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116071629B 。
龙图腾网通过国家知识产权局官网在2025-12-12发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310139115.8,技术领域涉及:G06V10/80;该发明授权一种用于视频讽刺分析的类脑跨模态信息交互融合方法是由姚方龙;李树超;张泽群;田昌元;李晓宇;金力;刘庆;马豪伟;关世昌设计研发完成,并于2023-02-10向国家知识产权局提交的专利申请。
本一种用于视频讽刺分析的类脑跨模态信息交互融合方法在说明书摘要公布了:本申请涉及电数字数据处理领域,特别是涉及一种用于视频讽刺分析的类脑跨模态信息交互融合方法。所述方法包括以下步骤:S100,获取目标视频的图像模态特征、文本模态特征和语音模态特征;S200,对目标视频的图像模态特征、文本模态特征和语音模态特征进行模态内和模态间的交互,得到目标视频的图像模态、文本模态和语音模态对应的特征向量;S300,分别对目标视频的图像模态、文本模态和语音模态对应的特征向量进行拼接、自注意力和注意力池化处理,得到目标视频的图像模态、文本模态和语音模态对应的目标矩阵和目标向量;S400,利用所述目标向量对目标视频是否为讽刺视频进行判断。本发明实现了对视频的讽刺检测。
本发明授权一种用于视频讽刺分析的类脑跨模态信息交互融合方法在权利要求书中公布了:1.一种用于视频讽刺分析的类脑跨模态信息交互融合方法,其特征在于,包括以下步骤: S100,获取目标视频的图像模态特征、文本模态特征和语音模态特征,所述图像模态特征包括空间记忆矩阵、空间引导向量、时间记忆矩阵和时间引导向量,所述文本模态特征包括文本记忆矩阵和文本引导向量,所述语音模态特征包括语音记忆矩阵和语音引导向量; S200,对目标视频的图像模态特征、文本模态特征和语音模态特征进行模态内和模态间的交互,得到目标视频的图像模态、文本模态和语音模态对应的特征向量; S300,分别对目标视频的图像模态、文本模态和语音模态对应的特征向量进行拼接、自注意力和注意力池化处理,得到目标视频的图像模态、文本模态和语音模态对应的目标矩阵;对目标视频的图像模态、文本模态和语音模态对应的目标矩阵进行自注意力和注意力池化处理,得到目标向量; S400,利用所述目标向量对目标视频是否为讽刺视频进行判断; 对目标视频的图像模态特征进行模态内的交互包括: S210,分别使用门控机制对空间记忆矩阵和时间记忆矩阵进行处理,得到使用门控机制处理后的第一空间记忆矩阵和第一时间记忆矩阵; S220,使用引导注意力机制对第一空间记忆矩阵和空间引导向量进行处理,得到第一空间向量;使用引导注意力机制对第一时间记忆矩阵和时间引导向量进行处理,得到第一时间向量; S230,使用多跳机制对第一空间记忆矩阵和第一空间向量进行处理,得到第二空间记忆矩阵;使用多跳机制对第一时间记忆矩阵和第一时间向量进行处理,得到第二时间记忆矩阵; S240,分别对第二空间记忆矩阵和第二时间记忆矩阵进行注意力池化处理,获取第二空间向量和第二时间向量; S250,将第二空间向量和第二时间向量进行融合处理,得到目标视频的图像特征向量。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国科学院空天信息创新研究院,其通讯地址为:100080 北京市海淀区北四环西路19号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励