Руководства по проверке

Что изменили снимки экрана и сжатие JPEG в нашем тесте обнаружения ИИ на 60 файлах

Воспроизводимое исследование 12 источников и 60 файлов: снимки экрана, изменение размера, сжатие JPEG, перекодирование метаданных, учётные данные C2PA и выходные данные визуальной модели.

Обложка статьи с заголовком: Что изменили снимки экрана и сжатие JPEG в нашем тесте обнаружения ИИ на 60 файлах

Снимки экрана, изменение размера и сжатие JPEG не просто уменьшают файл. Они создают другой файл, могут удалить встроенные сведения о происхождении и изменить оценку визуального детектора. Мы провели контролируемое исследование на 60 файлах, чтобы показать эти изменения в одной небольшой, полностью задокументированной выборке.

Что мы проверили

Мы выбрали 12 исходных изображений из публичного репозитория примеров AI Detector Arena: четыре фотографии с камеры, четыре изображения, созданных Flux, и четыре заметно отредактированные версии фотографий с камеры. Четыре темы: животные, искусство, еда и пейзажи.

Из каждого источника получили пять версий:

  • оригинал с идентичными байтами;
  • реальный снимок браузера Chrome с размером 1280 на 900 пикселей;
  • версию с изменённым размером и длинной стороной не более 1024 пикселей;
  • экспорт JPEG с качеством 60;
  • перекодированный PNG без метаданных.

Для каждой версии мы записали хеш SHA-256, формат, размеры, размер в байтах, число полей EXIF, результат C2PA и необработанный результат локальной визуальной модели AIFakeScan. Запуск выполнен 25 сентября 2026 года с c2patool 0.26.60 и `community-forensics-384.onnx`.

Скачать CSV с 60 строками результатов. Скачать список источников. Скачать настройки запуска.

Как изменился результат визуальной модели

В каждой ячейке таблицы приведено среднее необработанное значение для четырёх файлов. Это наблюдения в данной выборке, а не показатели точности или калиброванные вероятности.

Группа источниковОригиналСнимок экранаРазмер изменёнJPEG, качество 60Метаданные удалены
Фотографии с камеры0.00360.00210.01150.00200.0036
Заметно отредактированные фотографии0.00630.00140.01450.00310.0063
Изображения, созданные Flux0.99680.85690.71510.52260.9968

Сильнее всего изменилась группа созданных изображений. Для одного созданного художественного изображения значение изменилось с 0.9978 в оригинале до 0.3240 после изменения размера и 0.0093 после сжатия JPEG. Для созданного пейзажа оно изменилось с 0.9900 до 0.4344 на снимке экрана. Другие созданные файлы после тех же преобразований остались близки к 1.0.

Из-за этих различий оценку снимка экрана нельзя считать оценкой невиданного оригинала. Это также показывает, почему редактирование файла до получения желаемого ответа детектора не является допустимым методом проверки.

Что произошло с Content Credentials

Все четыре созданных оригинала содержали манифест C2PA, заявляющий созданный контент. c2patool признал манифест действительным, но учётные данные подписи отсутствовали в локальном списке доверия, поэтому результат записан как действительный, но недоверенный.

Снимок экрана, JPEG с изменённым размером, сжатый JPEG и версия без метаданных каждого из этих четырёх файлов не содержали встроенных Content Credentials. Восемь исходных файлов с камеры и с редактированием также не содержали таких данных ни в одной проверенной версии.

Этот результат относится к указанным способам экспорта. Он не означает, что любое изменение размера или редактор обязательно удаляет C2PA. Процесс с поддержкой C2PA может сохранить или заменить учётные данные. Отсутствие данных также не означает подлинность файла.

Что произошло с метаданными

Ни один из 12 выбранных оригиналов не показал поля EXIF через Pillow. Поэтому версии без метаданных не могут продемонстрировать удаление EXIF камеры в этой выборке. Они показывают, что перекодирование с теми же пикселями меняет хеш и контейнер файла, даже когда результат локальной визуальной модели остаётся одинаковым до шести знаков после запятой.

Это ограничение является частью результата. Мы не утверждали, что метаданные были удалены, когда в выбранных оригиналах нечего было удалять.

Что мы не проверяли

Нет документального подтверждения, что выбранные файлы созданы поддерживаемым поставщиком закрытых водяных знаков. Поэтому мы не запускали официальную проверку SynthID или знаков другого поставщика, и эти поля в записи пусты. Пустое поле означает, что проверка не проводилась, а не отсутствие знака.

Мы также не загружали эти файлы на социальные платформы. Здесь нет выводов о том, что сохраняет или удаляет конкретная платформа.

Как проверить собственные версии

  1. Сохраните самую раннюю имеющуюся версию файла до открытия в редакторе.
  2. Вычислите хеш и пометьте каждую версию. Не перезаписывайте оригинал.
  3. Используйте проверку C2PA для каждого файла, чтобы узнать, есть ли учётные данные и завершилась ли их проверка.
  4. Если предполагаемый источник — ИИ Google, используйте путь проверки SynthID для каждой соответствующей версии.
  5. Запустите детектор изображений ИИ и сохраните полный отчёт и ограничения, а не только одну оценку.
  6. Указывайте, что результат относится именно к проверенному файлу.

Ограничения исследования

Выборка содержит четыре изображения в каждой группе источников и четыре темы. Она выбрана для демонстрации воспроизводимого метода, а не оценки точности на всей совокупности. Для отредактированной группы использовался один видимый способ редактирования. Локальная модель — одна версия детектора. Водяные знаки поставщиков и передача через социальные платформы не проверялись. При проверке любого приведённого выше обобщения следует использовать полную запись по строкам.

Частые вопросы

Обходит ли снимок экрана любой детектор изображений ИИ?

Нет. В этой выборке некоторые снимки созданных изображений сохранили оценку близко к оригиналу, а другие существенно изменились. Снимок экрана — новый входной файл, и так его следует указывать.

Доказывает ли отсутствие C2PA подлинность изображения?

Нет. Это означает, что в файле не найдены пригодные учётные данные. Многие подлинные и созданные файлы не содержат встроенных данных.

Является ли необработанная визуальная оценка процентом точности?

Нет. Это результат модели для одного файла. Эксперимент не оценивает чувствительность, специфичность или общую точность.

Вопросы и ответы

Обходит ли снимок экрана любой детектор изображений ИИ?

Нет. В этой выборке оценки некоторых снимков созданных изображений остались близкими к оригиналу, а другие существенно изменились.

Доказывает ли отсутствие C2PA подлинность изображения?

Нет. Это лишь означает, что в данном конкретном файле не найдены пригодные учётные данные.

Является ли визуальная оценка процентом точности?

Нет. Это результат модели для одного файла, а исследование не оценивает общую точность.

Источники

  1. AI Detector Arena benchmark dataset — AI Detector Arena
  2. C2PA public test files and verifier context — C2PA
  3. c2patool release 0.26.60 — Content Authenticity Initiative
  4. AIFakeScan 60-row experiment record — AIFakeScan