Fake Image Detection (FID), aiming at unified detection across four image forensic subdomains, is critical in real-world forensic scenarios. Compared with ensemble approaches, monolithic FID models are theoretically more promising, but to date, consistently yield inferior performance in practice. In this work, by discovering the ``heterogeneous phenomenon'', which is the intrinsic distinctness of artifacts across subdomains, we diagnose the cause of this underperformance for the first time: the collapse of the artifact feature space driven by such phenomenon. The core challenge for developing a practical monolithic FID model thus boils down to the ``unified-yet-discriminative" reconstruction of the artifact feature space. To address this paradoxical challenge, we hypothesize that high-level semantics can serve as a structural prior for the reconstruction, and further propose Semantic-Induced Constrained Adaptation (SICA), the first monolithic FID paradigm. Extensive experiments on our OpenMMSec dataset demonstrate that SICA outperforms 15 state-of-the-art methods and reconstructs the target unified-yet-discriminative artifact feature space in a near-orthogonal manner, thus firmly validating our hypothesis. The code and dataset are available at:https: //github.com/scu-zjz/SICA_OpenMMSec.


翻译:虚假图像检测旨在实现跨四个图像取证子领域的统一检测,在实际取证场景中至关重要。与集成方法相比,统一的虚假图像检测模型在理论上更具前景,但迄今为止在实践中始终表现欠佳。本研究通过发现"异构现象"——即不同子领域间伪造痕迹的内在差异性,首次诊断了这种性能不足的根源:由该现象导致的伪造特征空间坍缩。因此,开发实用统一虚假图像检测模型的核心挑战可归结为"统一且可区分"的伪造特征空间重构。为应对这一矛盾性挑战,我们提出高层语义可作为重构的结构性先验,并进一步提出语义引导约束适应方法——首个统一的虚假图像检测范式。在我们构建的OpenMMSec数据集上进行的大量实验表明,SICA在性能上超越了15种先进方法,并以近似正交的方式重构出目标所需的统一且可区分伪造特征空间,从而有力验证了我们的假设。代码与数据集已开源:https://github.com/scu-zjz/SICA_OpenMMSec。

0
下载
关闭预览

相关内容

基于深度学习的伪装目标检测研究进展
专知会员服务
30+阅读 · 2025年4月12日
【CIKM2024】使用大型视觉语言模型的多模态虚假信息检测
《深度伪造检测模型的准确性和鲁棒性》2023最新论文
专知会员服务
41+阅读 · 2023年10月29日
基于多模态学习的虚假新闻检测研究
专知会员服务
34+阅读 · 2023年9月8日
专知会员服务
23+阅读 · 2021年9月23日
专知会员服务
68+阅读 · 2021年9月10日
专知会员服务
28+阅读 · 2021年8月15日
基于深度学习的图异常检测技术综述
专知会员服务
86+阅读 · 2021年7月28日
ISWC2020最佳论文《可解释假信息检测的链接可信度评价》
论文浅尝 | 虚拟知识图谱:软件系统和应用案例综述
开放知识图谱
15+阅读 · 2019年5月7日
CVPR 2019 | 无监督领域特定单图像去模糊
PaperWeekly
14+阅读 · 2019年3月20日
跨多个异构数据源的实体对齐
FCS
15+阅读 · 2019年3月13日
一文看懂虚假新闻检测(附数据集 & 论文推荐)
PaperWeekly
36+阅读 · 2019年2月19日
深度学习时代的图模型,清华发文综述图网络
GAN生成式对抗网络
13+阅读 · 2018年12月23日
侦测欺诈交易(异常点检测)
GBASE数据工程部数据团队
20+阅读 · 2017年5月10日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
VIP会员
相关VIP内容
基于深度学习的伪装目标检测研究进展
专知会员服务
30+阅读 · 2025年4月12日
【CIKM2024】使用大型视觉语言模型的多模态虚假信息检测
《深度伪造检测模型的准确性和鲁棒性》2023最新论文
专知会员服务
41+阅读 · 2023年10月29日
基于多模态学习的虚假新闻检测研究
专知会员服务
34+阅读 · 2023年9月8日
专知会员服务
23+阅读 · 2021年9月23日
专知会员服务
68+阅读 · 2021年9月10日
专知会员服务
28+阅读 · 2021年8月15日
基于深度学习的图异常检测技术综述
专知会员服务
86+阅读 · 2021年7月28日
ISWC2020最佳论文《可解释假信息检测的链接可信度评价》
相关基金
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
Top
微信扫码咨询专知VIP会员