同济人工智能研究院(苏州)有限公司邓若愚获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉同济人工智能研究院(苏州)有限公司申请的专利一种人脸伪造视频检测方法和系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116363765B 。
龙图腾网通过国家知识产权局官网在2025-12-16发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310328130.7,技术领域涉及:G06V40/40;该发明授权一种人脸伪造视频检测方法和系统是由邓若愚;胡尚薇;王楚天设计研发完成,并于2023-03-30向国家知识产权局提交的专利申请。
本一种人脸伪造视频检测方法和系统在说明书摘要公布了:本申请提供一种人脸伪造视频检测方法和系统。方法包括以下步骤:1对输入包含人脸的视频进行预处理,得到逐帧的人脸图像帧序列S;2使用预训练的卷积神经网络提取人脸图像的视觉特征图F;3对特征图进行切块并展开为token向量序列T;4对token向量序列进行预处理,分别在时间维度和空间维度上添加分类tokenTt和Ts得到作为transformer输入的token序列I;5使用视频transformer神经网络处理token序列;6使用分类池化层得到用于分类的token,并使用预测头预测分类结果。与现有方法相比,本发明有效利用了视频中存在的时序信息,拥有鲁棒性较强,可解释性较好的优点。
本发明授权一种人脸伪造视频检测方法和系统在权利要求书中公布了:1.一种人脸伪造视频检测方法,基于时空分离自注意视频transformer,其特征在于,包括以下步骤: 1对输入包含人脸的视频进行预处理,使用人脸识别框架检测并截取人脸得到逐帧的人脸图像帧序列; 2使用在大规模图像分类数据集上预训练的卷积神经网络,从所述人脸图像帧序列中生成人脸图像的视觉特征图; 3对所述视觉特征图进行1×1切块,并将每一块视觉特征图一维展开为token向量序列; 4对所述token向量序列进行预处理,分别在时间维度和空间维度上添加分类token,并添加位置编码得到作为transformer输入的token序列; 5使用由多个时空分离的transformer模块构成的视频transformer神经网络处理所述token序列;所述的步骤5中,所使用的视频transformer神经网络基于时空分离的自注意力构成;具体地,输入transformer模块的token序列I,将首先被线性映射层映射为Query,Key和Value向量Q,K,V,这些特征被分割为不同的头,随后在时间和空间维度上对向量Q,K,V执行自注意力的计算;其中,对于时间自注意力,处于相同空间位置,但时间位置不同的token对应的Q,K和V进行自注意力的运算,且在不同的空间位置同步进行,表示为: , 其中代表时间自注意力在空间位置j的输出结果,,和分别代表Query,Key和Value在空间位置j的所有token,D为内部特征维度; 对于空间自注意力而言,处于相同时间位置,但空间不同的所有token对应的Q,K和V进行自注意力的运算,且在不同的时间位置同步进行,表示为: , 代表空间自注意力在时间位置k即第k帧的输出结果,,和分别代表Query,Key和Value在时间位置k的所有token; 所使用的视频transformer神经网络引入残差相减机制,对于输入token序列I,残差相减即为将I中空间位置相同,时间位置相邻的token进行相减,得到残差token序列I’,表示为: , 其中catA,B,dim=d表示将张量A和B在第d维进行拼接操作,为不参与残差相减的,时间位置上的第0个分类token和第1个token,为时间位置上的第2至最后一个token,为时间位置上的第1至倒数第二个token; 6对经视频transformer神经网络处理过的token序列,使用分类池化层得到用于分类的token,随后使用由全连接层构成的预测头预测真伪分类结果。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人同济人工智能研究院(苏州)有限公司,其通讯地址为:215000 江苏省苏州市相城区高铁新城青龙港路58号天成时代商务广场29、30层;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励