董晶
- 作品数：58 被引量：6H指数：2
- 供职机构：中国科学院自动化研究所更多>>
- 发文基金：国家自然科学基金北京市自然科学基金陕西省科学技术研究发展计划项目更多>>
- 相关领域：自动化与计算机技术文化科学电子电信更多>>
- 面向轻量级深度伪造检测的无数据模型压缩
- 2023年
- 目的尽管现有的深度伪造检测方法已在各大公开数据集上展现出了极佳的真伪鉴别性能,但考虑到运行过程中耗费的巨大内存占用和计算成本,如何实现此类模型的在线部署仍是一个具有挑战性的任务。对此,本文尝试利用无数据量化的方法开发轻量级的深度伪造检测器。方法在保证准确率损失较少的前提下,对提前训练好的高精度深度伪造检测模型进行压缩处理,不再使用32 bit浮点数表示模型的权重参数与激活值,而是将其全部转化为低位宽的整型数值。此外,由于人脸数据涉及隐私保护问题,本文中所有的量化操作都是基于无数据场景完成的,即利用合成数据作为校准集来获取正确的激活值范围。这些数据经过不断优化迭代,完美匹配了存储在预训练模型各批归一化层中的统计信息,与原始训练数据具备非常相似的分布特征。结果在两个经典的人脸伪造数据集Face Forensics++和Celeb-DF v2上,4种预先训练好的深度伪造检测模型Res Net50、Xception、EfficientNet-b3和MobileNetV2经过所提方法的量化压缩处理后,均能保持甚至超越原有的性能指标。即使当模型的权重和激活值被压缩为6 bit时,所得轻量级模型的最低检测准确率也能达到81%。结论通过充分利用蕴含在深度伪造检测预训练模型中的有价值信息,本文提出了一种基于无数据模型压缩的轻量级人脸伪造检测器,该检测器能够准确高效地识别出可疑人脸样本的真实性,与此同时,检测所需的资源和时间成本大幅降低。
- 卓文琦李东泽王伟董晶
- 人脸活体检测对抗鲁棒性的评估方法及装置
- 本公开涉及一种人脸活体检测对抗鲁棒性的评估方法及装置、电子设备及计算机设备，所述方法包括：将原始人脸图像输入预先训练好的语义特征增广网络，输出噪声特征；将原始人脸图像输入预先训练好的多任务网络模型，输出多个分支特征向量；...
- 王伟董晶彭勃杨嵩林王建文
- 文献传递
- 计算机生成图像的检测方法、系统、装置
- 本发明属于计算机生成图像、计算机视觉与图像取证领域，具体涉及一种计算机生成图像的检测方法、系统、装置，旨在解决现有计算机生成图像检测模型对模型的训练集非同源的数据检测准确率低的问题。本系统方法包括获取待检测的图像，作为输...
- 董晶王伟彭勃轩心升王建文
- 文献传递
- 图像鉴伪模型训练方法、图像鉴伪方法、装置及电子设备
- 本发明涉及图像处理技术领域，提供一种图像鉴伪模型训练方法、图像鉴伪方法、装置及电子设备，该方法通过图像鉴伪模型在不同时段的伪造类型的真伪图像样本上进行域增量学习，以提升图像鉴伪模型对新型伪造算法的快速适应能力，同时保持对...
- 王伟董晶彭勃项伟卓文琦
- 基于对称邻域信息的盲隐写分析方法
- 本发明公开了一种基于空域特征的数字图像隐写分析方法，该方法包括以下步骤，对训练集中已标记类别信息的数字图像，计算其对称邻域内多个方向上的像素灰度差分值信息；并对像素灰度差分值信息进行处理和旋转不变性编码；然后计算编码后信...
- 谭铁牛董晶关晴骁
- 文献传递
- 一种基于图像灰度游程直方图分析的盲信息隐藏检测方法
- 本发明公开了一种基于图像灰度游程直方图分析的盲信息隐藏检测方法，通过分析图像灰度游程直方图中的长游程与短游程个数分布情况，来判断图像是否可能含有隐藏信息，包括：对训练集中已标记类别信息的灰度图像计算灰度游程矩阵，得到游程...
- 谭铁牛董晶
- 文献传递
- 对抗样本图像的确定方法、装置、电子设备及存储介质
- 本公开涉及一种对抗样本图像的确定方法、装置、电子设备及存储介质，上述方法包括：获取原始图像，并通过降维算法将所述原始图像转换为原始图像流形；调用图像搜索函数，以根据所述原始图像流形确定目标图像；通过神经网络模型，根据所述...
- 董晶王伟彭勃何子文谭铁牛
- 文献传递
- 基于空洞卷积和注意力机制的深度伪造检测被引量：3
- 2022年
- 人脸深度伪造图像的生成过程是对目标人脸进行替换,由于不同图片的肤色和光照等差异,在人脸周围会产生比较分散的伪影边界,且对人脸进行裁剪之后会包含部分背景信息的干扰。针对深度伪造图像的生成特点,区别于常规的CNN分类识别网络,设计了一种符合伪造痕迹特点的检测网络。首先,利用Resnet34卷积神经网络对待检测的图像提取初步的伪造特征;其次,经过空洞卷积提高网络模型的感受野来更好地捕获比较分散的伪造痕迹;再由空间注意力模块进行权重的重加权,减少其他背景信息的干扰;最后使用多层全连接神经网络对特征进行分类,达到对深度伪造图片进行准确分类的目的。在Faceforensics++、Celeb-DF、DFDC三个主流数据集上进行实验,并取得比当前其他方法更好的效果。实验结果表明,所提方法结合了空洞卷积和注意力机制,应对不同人脸截取比例的伪造图像拥有更好的适应性。
- 张时润彭勃王伟董晶
- 关键词：图像分类感受野
- 基于视频像素时空相关性的通用视频隐写分析方法
- 本发明公开了一种基于视频像素时空相关性的通用视频隐写分析方法，该方法包括：对训练集中的视频进行解压并提取多个图像分段，对每一图像分段进行切片获得多个切片图像；对每个切片图像进行差分滤波和阈值化处理；在每个切片图像的所有差...
- 谭铁牛董晶许锡锴
- 文献传递
- 基于视觉对抗重构的DeepFake防御方法和系统
- 本发明提出基于视觉对抗重构的DeepFake防御方法和系统。其中，方法包括：两阶段方法。在第一阶段，将真实人脸数据转化为潜在编码，它能够通过一个生成器逼真地重建真实图像。将这个问题看做GAN的逆向问题，训练一个编码器来生...
- 董晶王伟彭勃何子文项伟谭铁牛
- 文献传递
