В НГТУ НЭТИ разработали нейросеть для цифровой криминалистики
AI Изображение носит иллюстративный характер
В Новосибирском государственном техническом университете НЭТИ создана методика, которая автоматически определяет, настоящее ли перед вами фото или его сгенерировал искусственный интеллект. Алгоритм изучает скрытые частотные «отпечатки», оставляемые генеративными моделями.
Поводом для работы стала проблема: визуально отличить синтетику от реальности все труднее из-за развития Stable Diffusion, Midjourney и DALL-E. Это открывает дорогу фейкам, подделке улик и нарушениям авторских прав. Чтобы найти решение, ученые сравнили разные подходы — от классического машинного обучения до современных трансформеров.
Лучше всех показал себя Vision Transformer: он оценивает изображение целиком, а не по кусочкам, — объяснил руководитель проекта Егор Антонянц. — Сверточные сети видят только локальные текстуры, а трансформер замечает артефакты, распределенные по всему кадру. Причем метод эффективен даже при небольшой обучающей выборке.
Обычные детекторы требуют десятков тысяч размеченных примеров и начинают ошибаться при сжатии или изменении разрешения. Новая сеть работает стабильнее: тестовый ViT Tiny достиг точности 89%. Разработчики — студенты Виталий Заозернов и Александр Леонтьев — также визуализировали, как модель «смотрит» на изображение, подтвердив, что трансформер охватывает весь кадр.
Технология предназначена для систем верификации контента в новостных агентствах, соцсетях и правоохранительных органах. В перспективе ее адаптируют для борьбы с новейшими генеративными моделями и разными форматами сжатия.
