买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：长沙理工大学

摘要：本发明公开了一种基于双流的Deepfakes视频检测方法及系统，该方法包括：使用自适应视频帧提取方法提取视频中的人脸图像；提取人脸图像的篡改伪影特征，对篡改伪影特征进行全局平均池化，获得第一特征图；获取人脸图像对应的残差图像；提取残差图像的篡改痕迹特征，对篡改痕迹特征进行全局平均池化，获得第二特征图；融合第一特征图和第二特征图，获得融合特征图；将融合特征图进行分类，获得目标检测结果。本申请即能保证Deepfake视频检测性能，又能减少资源浪费，还能够抑制拟合图像内容特征，防止过拟合，提高了Deepfake视频检测性能。

主权项：1.一种基于双流的Deepfakes视频检测方法，其特征在于，包括步骤：使用自适应视频帧提取方法提取视频中的人脸图像；其中，所述自适应视频帧提取方法，包括：获取序列长度、样本数量以及所述视频的视频总帧数，所述样本数量指将所述视频总帧数分成多个样本的数量，所述序列长度指从每个所述样本中提取的视频帧的数量；将所述视频中的第一帧人脸坐标设置为最大人脸坐标；基于所述视频总帧数和所述样本的数量，计算跳跃步长；将视频帧索引初始化为零；当所述视频帧索引小于所述视频总帧数时，判断所述视频帧索引与所述跳跃步长的求余结果是否大于所述序列长度；如果所述视频帧索引与所述跳跃步长的求余结果小于所述序列长度，获取所述视频帧索引对应的视频帧中的人脸坐标；如果所述视频帧中有多个所述人脸坐标，计算每个所述人脸坐标与所述最大人脸坐标之间的欧氏距离，并将欧氏距离最小的人脸坐标作为新的最大人脸坐标，保存所述新的最大人脸坐标对应的人脸图像并对齐，使所述视频帧索引自增一，再判断所述视频帧索引是否小于所述视频总帧数；如果所述视频帧中只有一个所述人脸坐标，直接保存所述人脸坐标对应的人脸图像并对齐，使所述视频帧索引自增一，再判断所述视频帧索引是否小于所述视频总帧数；如果视频帧中没有所述人脸坐标，使所述视频帧索引自增一，再判断所述视频帧索引是否小于所述视频总帧数；如果所述视频帧索引与所述跳跃步长的求余结果大于或等于所述序列长度，将所述视频帧索引自增一，再判断所述视频帧索引是否小于所述视频总帧数；当所述视频帧索引大于或等于所述视频总帧数时，结束视频帧读取；如果获得的所述人脸图像数量大于指定的所述样本的数量，删除最后多余的视频帧对应的人脸图像；提取所述人脸图像的篡改伪影特征，对所述篡改伪影特征进行全局平均池化，获得第一特征图；获取所述人脸图像对应的残差图像；提取所述残差图像的篡改痕迹特征，对所述篡改痕迹特征进行全局平均池化，获得第二特征图；融合所述第一特征图和所述第二特征图，获得融合特征图；将所述融合特征图进行分类，获得目标检测结果。

全文数据：

权利要求：

百度查询： 长沙理工大学 一种基于双流的Deepfakes视频检测方法及系统