Иллюзии на показ: Как научить детекторы распознавать дипфейки любого поколения

Предлагаемый метод обучения для универсального обнаружения дипфейков использует частотное маскирование, преобразуя входное изображение $I(x,y)$ в частотную область $F(u,v)$ посредством быстрого преобразования Фурье, затем выборочно подавляя определенные частоты для создания $M(u,v)$, что, в отличие от пространственного маскирования или геометрических преобразований, позволяет обучать детектор распознавать и нивелировать артефакты, возникающие при создании дипфейков, исключительно на этапе контролируемого обучения для формирования обобщенных представлений.

Новый подход к обучению детекторов дипфейков с использованием маскирования в частотной области позволяет добиться устойчивой работы против разнообразных моделей генерации и даже при сжатии нейронных сетей.