Command Palette
Search for a command to run...
{Martin Boyer David Fischinger}

초록
공공 여론의 체계적 조작, 특히 온라인 소셜 네트워크(Online Social Networks, OSN)를 통해 확산되는 조작된 이미지를 통한 여론 조작은 사회에 심각한 위협이 되고 있다. 본 논문에서는 픽셀 단위의 이미지 조작을 탐지하기 위한 깊은 신경망인 디지털 포렌식 네트워크(Digital Forensics Net, DF-Net)를 제안한다. 공개된 모델은 네 가지 확립된 벤치마크 데이터셋에서 여러 최신 기술보다 뛰어난 성능을 보였다. 특히 DF-Net은 소셜 네트워크에서 자동으로 수행되는 손실이 있는 이미지 처리 작업(예: 크기 조정, 압축)에 대해 강건한 탐지 성능을 유지함으로써, 실제 환경에서의 적용 가능성을 크게 높였다.
벤치마크
| 벤치마크 | 방법론 | 지표 |
|---|---|---|
| image-manipulation-detection-on-casia-osn | DF-Net | AUC: 0.905 F-score: 0.587 Intersection over Union: 0.492 |
| image-manipulation-detection-on-casia-osn-1 | DF-Net | AUC: 0.902 Intersection over Union: 0.467 f-Score: 0.564 |
| image-manipulation-detection-on-casia-osn-2 | DF-Net | AUC: 0.905 Intersection over Union: 0.495 f-Score: 0.588 |
| image-manipulation-detection-on-casia-osn-3 | DF-Net | AUC: 0.902 Intersection over Union: 0.490 f-Score: 0.584 |
| image-manipulation-detection-on-casia-v1 | DF-Net | AUC: .906 |
| image-manipulation-detection-on-columbia | DF-Net | AUC: 0.880 |
| image-manipulation-detection-on-columbia-osn | DF-Net | AUC: 0.883 Intersection over Union: 0.681 f-Score: 0.760 |
| image-manipulation-detection-on-columbia-osn-1 | DF-Net | AUC: 0.881 Intersection over Union: 0.681 f-Score: 0.759 |
| image-manipulation-detection-on-columbia-osn-2 | DF-Net | AUC: 0.883 Intersection over Union: 0.685 f-Score: 0.762 |
| image-manipulation-detection-on-columbia-osn-3 | DF-Net | AUC: 0.890 Intersection over Union: 0.684 f-Score: 0.766 |
| image-manipulation-detection-on-dso-1 | DF-Net | AUC: 0.769 |
| image-manipulation-detection-on-dso-osn | DF-Net | AUC: 0.770 Intersection over Union: 0.245 f-Score: 0.359 |
| image-manipulation-detection-on-dso-osn-1 | DF-Net | AUC: 0.765 Intersection over Union: 0.245 f-Score: 0.358 |
| image-manipulation-detection-on-dso-osn-2 | DF-Net | AUC: 0.765 Intersection over Union: 0.249 f-Score: 0.361 |
| image-manipulation-detection-on-dso-osn-3 | DF-Net | AUC: 0.759 Intersection over Union: 0.245 f-Score: 0.354 |
| image-manipulation-detection-on-nist-osn | DF-Net | AUC: 0.795 Intersection over Union: 0.229 f-Score: 0.304 |
| image-manipulation-detection-on-nist-osn-1 | DF-Net | AUC: 0.799 Intersection over Union: 0.238 f-Score: 0.314 |
| image-manipulation-detection-on-nist-osn-2 | DF-Net | AUC: 0.803 Intersection over Union: 0.247 f-Score: 0.324 |
| image-manipulation-detection-on-nist-osn-3 | DF-Net | AUC: 0.791 Intersection over Union: 0.230 f-Score: 0.303 |