买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉山东交通学院申请的专利基于多模态前缀和跨模态注意力的情感分析方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN117609882B 。

龙图腾网通过国家知识产权局官网在2025-07-04发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202311621681.9，技术领域涉及：G06F18/2415；该发明授权基于多模态前缀和跨模态注意力的情感分析方法及系统是由朱振方;李萌;李克峰;亓江涛;裴洪丽;张广渊;王朋设计研发完成，并于2023-11-29向国家知识产权局提交的专利申请。

本基于多模态前缀和跨模态注意力的情感分析方法及系统在说明书摘要公布了：本发明公开了基于多模态前缀和跨模态注意力的情感分析方法及系统；其中方法，包括：获取待情感分析的视频片段；所述待情感分析的视频片段包括：语音、文本和图像三种模态数据；将待情感分析的视频片段，输入到训练后的多模态情感分析模型中，输出多模态情感分析结果；其中，训练后的多模态情感分析模型，用于：对视频片段中的语音、文本和图像分别进行编码，得到语音特征、文本标记序列和视觉特征；对语音特征和视觉特征分别进行前缀生成，得到语音前缀标记和视觉前缀标记；将语音前缀标记和视觉前缀标记进行串联拼接，将拼接结果添加到文本标记序列中，得到修正后的文本标记序列；对修正后的文本标记序列进行情感分类，得到情感分类标签。

本发明授权基于多模态前缀和跨模态注意力的情感分析方法及系统在权利要求书中公布了：1.基于多模态前缀和跨模态注意力的情感分析方法，其特征是，包括： 获取待情感分析的视频片段；所述待情感分析的视频片段包括：语音、文本和图像三种模态数据； 将待情感分析的视频片段，输入到训练后的多模态情感分析模型中，输出多模态情感分析结果，所述多模态情感分析模型，其网络结构包括： 语音特征编码模块、文本特征编码模块和视觉特征编码模块； 所述语音特征编码模块的输出端与音频前缀生成模块的输入端连接； 所述视觉特征编码模块的输出端与视觉前缀生成模块的输入端连接； 音频前缀生成模块的输出端、视觉前缀生成模块的输出端和文本特征编码模块的输出端，均与串联拼接模块的输入端连接； 串联拼接模块的输出端与预训练语言模型的输入端连接，预训练语言模型的输出端输出情感分类预测结果； 其中，训练后的多模态情感分析模型，用于：对视频片段中的语音、文本和图像分别进行编码，得到语音特征、文本标记序列和视觉特征；对语音特征和视觉特征分别进行前缀生成，得到语音前缀标记和视觉前缀标记；将语音前缀标记和视觉前缀标记进行串联拼接，将拼接结果添加到文本标记序列中，得到修正后的文本标记序列；对修正后的文本标记序列进行情感分类，得到情感分类标签，所述音频前缀生成模块和视觉前缀生成模块的内部结构是一样的，所述音频前缀生成模块，包括： 依次连接的输入端、BiGRU模块、注意力机制模块和层归一化模块； 所述注意力机制模块，包括：依次连接的第一线性层、第一激活函数层、第二线性层和第二激活函数层； 所述第一线性层的输入端与BiGRU模块的输出端连接； 所述第二激活函数层的输出端与层归一化模块的输入端连接； 所述音频前缀生成模块和视觉前缀生成模块的工作过程是一样的，其中，音频前缀生成模块的工作过程，包括： 其中，m∈{a,v}，和表示前向GRU和后向GRU计算， Tm表示时间步长，δ表示sigmoid激活函数，W表示权重矩阵，b表示偏置， 表示拼接操作。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人山东交通学院，其通讯地址为：250300 山东省济南市天桥区交校路5号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。