摘要:目的 随着视频篡改技术的快速发展,原始视频与篡改视频之间的差距愈发缩小,现有检测方法在处理篡改 视频数据时,仍需提高检测准确度以及泛化性能,为此,提出一种基于时空一致性的视频篡改检测方法。 方法 首先 通过不同的视频采样步幅预处理视频数据,利用时序卷积核在高采样率视频帧数据中侧重提取帧间时序特征信 息,空间卷积核在低采样率视频数据中侧重提取帧内空间特征信息,并在高采样视频帧数据与低采样视频帧数据 间建立横向连接,从而获得更有效的视频时空特征;同时结合 Transformer 模型在时空特征序列中提取时空特征的 不一致性,实现对篡改视频的判定。 结果 改进的方法在高质量和低质量 FaceForensics++数据集上进行性能测试, AUC 数值分别达到 99. 47%和 93. 05%,此外在 FaceForensics++数据集上的域内跨伪造方式实验以及 Celeb-DF 数 据集上的跨数据集实验中,测试结果相较于目前主流检测算法同样表现出竞争性,消融实验结果验证了方法中每 个单一模块的有效性。 结论 各项实验结果验证,所提方法在域内性能测试中有着优于现有算法的检测精度,并且 在跨域性能测试中具有更好的泛化性能,即验证了联合时空卷积 Transformer 模型可以提高模型泛化性能。