검증 가이드

스크린샷과 JPEG 압축은 60개 파일 AI 이미지 탐지 시험에서 무엇을 바꿨나

출처 12개와 파일 60개를 사용해 스크린샷, 크기 조정, JPEG 압축, 메타데이터 재인코딩, C2PA 크리덴셜과 시각 모델 출력을 살펴본 재현 가능한 사례 연구입니다.

기사 표지. 제목: 스크린샷과 JPEG 압축은 60개 파일 AI 이미지 탐지 시험에서 무엇을 바꿨나

스크린샷, 크기 조정과 JPEG 압축은 파일을 작게 만들기만 하지 않습니다. 다른 파일을 만들고 삽입된 출처 정보를 없앨 수 있으며 시각 탐지기의 점수도 바꿀 수 있습니다. 저희는 작지만 모든 내용이 기록된 표본에서 이러한 변화가 어떻게 나타나는지 보여 주기 위해 통제된 60개 파일 사례 연구를 진행했습니다.

시험한 내용

공개 AI Detector Arena 표본 저장소에서 원본 이미지 12개를 선택했습니다. 카메라 사진 네 장, Flux 생성 이미지 네 장, 카메라 사진을 눈에 띄게 편집한 파생 이미지 네 장입니다. 주제는 동물, 예술, 음식과 풍경 네 가지였습니다.

각 원본으로 다섯 가지 버전을 만들었습니다.

  • 바이트 단위로 동일한 원본
  • Chrome에서 1280 × 900픽셀로 표시한 뒤 실제로 캡처한 브라우저 스크린샷
  • 긴 변을 1024픽셀로 제한해 크기를 조정한 버전
  • 품질 60으로 내보낸 JPEG
  • 메타데이터를 생략하고 재인코딩한 PNG

각 버전의 SHA-256 해시, 형식, 크기, 바이트 크기, EXIF 필드 수, C2PA 결과와 AIFakeScan 로컬 시각 모델의 원시 출력을 기록했습니다. 이 실행에는 2026년 구월 25일 c2patool 0.26.60과 `community-forensics-384.onnx`를 사용했습니다.

60행 결과 CSV 다운로드. 원본 목록 다운로드. 실행 설정 다운로드。

시각 모델 출력의 변화

표의 각 셀은 파일 네 개의 원시 점수 평균을 보여 줍니다. 이 표본의 관찰값이며 정확도나 보정된 확률이 아닙니다.

원본 그룹원본스크린샷크기 조정JPEG 품질 60메타데이터 제거
카메라 사진0.00360.00210.01150.00200.0036
눈에 띄게 편집된 사진0.00630.00140.01450.00310.0063
Flux 생성 이미지0.99680.85690.71510.52260.9968

생성 이미지 그룹의 변화가 가장 컸습니다. 생성된 예술 이미지 한 장은 원본의 0.9978에서 크기 조정 후 0.3240, JPEG 압축 후 0.0093으로 바뀌었습니다. 생성된 풍경 이미지 한 장은 0.9900에서 스크린샷의 0.4344로 바뀌었습니다. 같은 변환 후에도 다른 생성 파일은 1.0에 가까운 상태를 유지했습니다.

이러한 차이 때문에 스크린샷 점수를 보지 못한 원본의 점수로 취급할 수 없습니다. 또한 탐지기가 원하는 답을 낼 때까지 파일을 편집하는 것은 유효한 검토 방법이 아니라는 점도 보여 줍니다.

Content Credentials의 변화

생성된 원본 네 개 모두 생성 콘텐츠를 선언한 C2PA 매니페스트를 포함했습니다. c2patool은 매니페스트가 유효하다고 보고했지만 서명 크리덴셜이 로컬 신뢰 목록에 없어 유효하지만 신뢰되지 않는 것으로 기록했습니다.

이 네 파일 각각의 스크린샷, 크기를 조정한 JPEG, 압축 JPEG와 메타데이터 제거 버전에는 삽입된 Content Credential이 없었습니다. 나머지 카메라와 편집된 원본 파일 여덟 개도 시험한 모든 버전에 크리덴셜이 없었습니다.

이 결과는 해당 내보내기 경로에 적용됩니다. 모든 크기 조정이나 편집기가 C2PA를 제거한다는 뜻은 아닙니다. C2PA를 지원하는 작업 흐름은 크리덴셜을 보존하거나 교체할 수 있습니다. 크리덴셜이 없는 파일이 진짜라는 뜻도 아닙니다.

메타데이터의 변화

선택한 원본 12개는 Pillow를 통해 EXIF 필드를 표시하지 않았습니다. 따라서 이 표본의 메타데이터 제거 버전으로 카메라 EXIF가 제거되었다고 보여 줄 수 없습니다. 다만 로컬 시각 모델 출력이 소수점 아래 여섯 자리까지 같더라도 픽셀이 동일한 재인코딩이 파일 해시와 컨테이너를 바꾼다는 점은 보여 줍니다.

이 한계도 결과의 일부입니다. 선택한 원본에 제거할 메타데이터가 없었으므로 메타데이터가 제거되었다고 대신 주장하지 않았습니다.

시험하지 않은 내용

선택한 파일이 지원되는 독점 워터마크 제공업체의 제품이라는 문서는 없었습니다. 따라서 공식 SynthID 또는 다른 제공업체의 워터마크 검사를 수행하지 않았고 기록의 해당 필드는 비어 있습니다. 빈칸은 미실행을 뜻하며 워터마크가 없다는 뜻이 아닙니다.

이 파일을 소셜 플랫폼에 업로드하지도 않았습니다. 여기에는 특정 플랫폼이 무엇을 보존하거나 제거하는지에 관한 결론이 없습니다.

직접 버전을 확인하는 방법

  1. 편집기에서 열기 전에 가지고 있는 가장 이른 파일을 보관하세요.
  2. 각 버전의 해시를 계산하고 라벨을 붙이세요. 원본을 덮어쓰지 마세요.
  3. 각 파일에 C2PA 검사기를 사용하여 크리덴셜이 있는지와 검증이 완료되었는지 확인하세요.
  4. Google AI가 출처로 의심된다면 관련 버전마다 SynthID 검증 절차를 따르세요.
  5. 다음 도구를 실행하세요: AI 이미지 탐지기에서 점수 하나만 복사하지 말고 전체 보고서와 한계를 기록하세요.
  6. 결과가 실제 검사한 파일에 적용된다고 명시하세요.

이 사례 연구의 한계

각 원본 그룹에는 이미지 네 장이 있고 주제는 네 가지입니다. 표본은 재현 가능한 방법을 보여 주기 위해 선택했으며 모집단 정확도를 추정하기 위한 것이 아닙니다. 편집 그룹에는 눈에 띄는 편집 방식 한 가지를 사용했습니다. 로컬 모델은 탐지기 한 버전입니다. 제공업체 워터마크와 소셜 플랫폼 전달은 시험하지 않았습니다. 위의 요약을 확인할 때는 전체 행별 기록을 사용해야 합니다.

자주 묻는 질문

스크린샷은 모든 AI 이미지 탐지기를 무력화하나요?

아니요. 이 표본에서 생성 이미지의 스크린샷 중 일부는 원본 점수와 비슷하게 유지됐고 다른 일부는 크게 변했습니다. 스크린샷은 새로운 입력이며 그에 맞게 보고해야 합니다.

C2PA가 없으면 이미지가 진짜임이 증명되나요?

아니요. 해당 파일에서 이용 가능한 크리덴셜을 찾지 못했다는 뜻입니다. 실제 파일과 생성 파일 모두 삽입된 크리덴셜이 없는 경우가 많습니다.

원시 시각 점수는 정확도 백분율인가요?

아니요. 파일 하나에서 관찰된 모델 출력입니다. 이 실험은 민감도, 특이도 또는 일반적인 정확도를 추정하지 않습니다.

자주 묻는 질문

스크린샷은 모든 AI 이미지 탐지기를 무력화하나요?

아니요. 이 표본에서 생성 이미지의 스크린샷 중 일부는 원본 점수와 비슷했고 다른 일부는 크게 변했습니다.

C2PA가 없으면 이미지가 진짜임이 증명되나요?

아니요. 정확히 그 파일에서 이용 가능한 크리덴셜을 찾지 못했다는 뜻일 뿐입니다.

시각 점수는 정확도 백분율인가요?

아니요. 파일 하나에 대한 모델 출력이며 이 사례 연구는 일반적인 정확도를 추정하지 않습니다.

출처

  1. AI Detector Arena benchmark dataset — AI Detector Arena
  2. C2PA public test files and verifier context — C2PA
  3. c2patool release 0.26.60 — Content Authenticity Initiative
  4. AIFakeScan 60-row experiment record — AIFakeScan