ДалееСледующее руководство
ESRGAN и GAN Super-Resolution
Визуальный ИИ
Визуальное руководство по искусственному интеллекту
GAN Вассерштейна (WGAN) — это обновленная версия цели обучения GAN, в которой вместо исходных минимальных и максимальных потерь используется расстояние Вассерштейна.
Прослушайте это руководствоОзвучено ИИ · ~2 min
It makes notoriously unstable GAN training far more reliable and gives a loss value that actually correlates with image quality.
Оригинальные GAN обучают две сети в перетягивании каната: генератор создает фальшивые изображения, а дискриминатор пытается их обнаружить. Это часто терпит неудачу или останавливается, потому что потеря дискриминатора не говорит ничего полезного о прогрессе. WGAN, представленная Аржовски, Чинталой и Ботту в 2017 году, заменяет дискриминатор «критиком», который оценивает, насколько реально выглядит изображение в непрерывной шкале, а не классифицирует реальное и поддельное. Целью обучения становится расстояние Вассерштейна (землехода) между реальными и сгенерированными распределениями данных. Это расстояние дает более плавные и значимые градиенты, даже когда два распределения едва перекрываются, что значительно уменьшает коллапс мод и делает кривую потерь настоящим сигналом качества.
Создание фотореалистичных лиц и текстур, в которых ванильные GAN схлопываются до нескольких повторяющихся результатов.
Создание синтетических медицинских изображений, таких как МРТ или гистологические изображения, для дополнения дефицитных наборов маркированных данных.
Моделирование событий столкновений частиц в симуляциях физики высоких энергий, где стабильное обучение имеет решающее значение.
Служит базовым эталоном в исследованиях МО, поскольку его потеря отслеживает качество выборки в процессе обучения.
Основная идея WGAN о том, что выбор расстояния распределения формирует качество градиента, до сих пор находит отражение в генеративном моделировании. В то время как модели диффузии сейчас доминируют в синтезе изображений, идеи оптимальной транспортировки из WGAN вновь появляются в сопоставлении потоков, методах моста Шредингера и преобразовании моделей диффузии в быстрые многошаговые генераторы. Ожидайте, что цели в стиле Вассерштейна будут продолжать служить основой для гибридных подходов, в которых важны стабильное обучение и значимые показатели потерь, особенно в научных областях и областях с низким объемом данных.
Бесплатная рассылка
Три проверенных AI-истории каждое утро буднего дня, написанные простым английским. Бесплатно навсегда, без рекламы.
Одно электронное письмо каждый будний день. Отписаться в один клик. Мы никогда не продаем и не передаем ваш адрес.
Проверьте себя
Мгновенная обратная связь по каждому ответу и общий сертификат с проверяемым идентификатором после прохождения курса.
Поддержите бесплатное образование в области искусственного интеллекта. AI Understanding — это некоммерческая организация 501(c)(3). Никакой рекламы и платного доступа. Сделать пожертвование
GAN Вассерштейна (WGAN) — это обновленная версия цели обучения GAN, в которой вместо исходных минимальных и максимальных потерь используется расстояние Вассерштейна. Это делает заведомо нестабильное обучение GAN гораздо более надежным и дает значение потерь, которое фактически коррелирует с качеством изображения.
WGAN заменяет исходную цель, основанную на Дженсене-Шенноне, расстоянием Вассерштейна, которое обеспечивает более плавные градиенты, даже когда распределения едва перекрываются.
Критик оценивает изображения по непрерывной шкале вместо того, чтобы классифицировать настоящие и фальшивые, и именно это заставляет объективность Вассерштейна работать.
Двойственность, которая позволяет WGAN оценивать расстояние Вассерштейна, справедлива только для 1-липшицевых функций, поэтому градиенты критика должны быть ограничены.
В первой статье WGAN использовалось грубое отсечение веса; Позже WGAN-GP заменила его более плавным штрафом за градиент.
Более плавные градиенты WGAN ограничивают коллапс режима и приводят к потерям, которые фактически коррелируют с качеством выборки.
Продолжайте учиться
Другие руководства, выбранные по этой теме
ДалееСледующее руководство
ESRGAN и GAN Super-Resolution
Визуальный ИИ