中国科学院软件研究所马翠霞获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国科学院软件研究所申请的专利一种融合视频多模态内容的人物可视化方法及装置获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN117033699B 。
龙图腾网通过国家知识产权局官网在2026-02-06发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310976862.7,技术领域涉及:G06F16/74;该发明授权一种融合视频多模态内容的人物可视化方法及装置是由马翠霞;贺强;黄泽远;邓小明;王宏安设计研发完成,并于2023-08-04向国家知识产权局提交的专利申请。
本一种融合视频多模态内容的人物可视化方法及装置在说明书摘要公布了:本发明涉及一种融合视频多模态内容的人物可视化方法及装置。该方法包括:抽取目标视频在各模态下的原始数据;依据各模态下抽取的原始数据的最小尺度,对齐各模态下的原始数据;基于对齐后的各模态下的原始数据,在设定尺度范围内依据不同模态特性提取模态特征数据;基于提取的模态特征数据,针对视频摘要的可视化形式进行人物可视化,并针对视频播放器的可视化形式进行人物可视化;基于视频播放器的可视化形式,进行视频播放及播放过程中可视化元素的交互实现。本发明创新性地使用融合视频内容的多模态人物摘要的可视化形式,并创新性地使用增强人物非语言表达的视频播放器的可视化形式,能够促进对视频人物肢体语言与表达技巧的快速理解。
本发明授权一种融合视频多模态内容的人物可视化方法及装置在权利要求书中公布了:1.一种融合视频多模态内容的人物可视化方法,其特征在于,包括以下步骤: 抽取目标视频在各模态下的原始数据; 依据各模态下抽取的原始数据的最小尺度,对齐各模态下的原始数据; 基于对齐后的各模态下的原始数据,在设定尺度范围内依据不同模态特性提取模态特征数据; 基于提取的模态特征数据,针对视频摘要的可视化形式进行人物可视化; 基于提取的模态特征数据,针对视频播放器的可视化形式进行人物可视化; 基于视频播放器的可视化形式,进行视频播放及播放过程中可视化元素的交互实现; 所述针对视频摘要的可视化形式进行人物可视化,包括通过以下步骤进行视频摘要形式的人物面部可视化: 基于抽取的眼神注视数据,在设定尺度范围内,计算每帧眼神注视的方向与位置并进行算数平均; 基于抽取的面部情感数据,在设定尺度范围内,计算其离散情感类型的分布、效价与唤醒度的算数平均; 基于抽取的音高数据,在设定尺度范围内,计算其音高的算数平均; 根据算数平均后的眼神注视方向与位置坐标,计算其基于眼睛中心点的极坐标,利用该极坐标生成面部可视化中的眼睛元素; 利用人脸可视化的不同区域映射不同类别离散情感类型的分布; 通过人脸外围的转折曲线的凸起程度来映射情感的唤醒度; 基于情感的效价值反应了情绪的正负程度,将面部情感效价的算数平均值映射为面部可视化中嘴巴元素的上下弯曲程度; 根据音高的算数平均值,将其映射为面部可视化元素中嘴巴元素的宽度。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国科学院软件研究所,其通讯地址为:100190 北京市海淀区中关村南四街4号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励