ДалееСледующее руководство
Поточный вокодер WaveGlow
Аудио ИИ
Техническое РУКОВОДСТВО
Normalizing flows map a simple base distribution to a more complex distribution through invertible, differentiable transformations.
Прослушайте это руководствоОзвучено ИИ · ~2 min
Tractable Jacobian determinants allow these models to generate samples and evaluate probability densities.
A normalizing flow learns a bijective (one-to-one, invertible) mapping between a simple base distribution and a complicated target distribution such as images or audio. You stack many invertible layers; running them forward warps Gaussian noise into a realistic sample, and running them backward maps real data back to noise. The defining trick is the change-of-variables formula, which lets you evaluate tractable model densities by tracking how each transformation stretches or shrinks volume via its Jacobian determinant. Unlike VAEs (which approximate likelihood) or GANs (which give none), flows can offer tractable model densities when the architecture permits the required inverse and Jacobian evaluation. The engineering challenge is designing layers that are expressive yet keep the Jacobian determinant cheap to compute, as in RealNVP, Glow, and autoregressive flows.
A density-estimation team evaluates flow likelihoods as one signal for anomaly detection, then tests whether that signal separates relevant anomalies.
Flow-based audio models such as WaveGlow generate waveforms from a noise distribution.
Inverse Autoregressive Flows make variational posterior approximations more flexible.
Boltzmann generators use invertible transformations to sample molecular configurations.
Чистые нормализующие потоки были несколько затмлены диффузионными моделями качества необработанных изображений, но идеи потоков возрождаются. Формулировки для непрерывного времени (непрерывные нормализующие потоки, нейронные ОДУ) и особенно сопоставление потоков, метод обучения, лежащий в основе таких систем, как Stable Diffusion 3 и многих современных генераторов, превращают генерацию в изучение поля скоростей, которое переносит шум в данные. Ожидайте, что потоки останутся центральными везде, где важны точная вероятность, обратимость или быстрая детерминированная выборка, и будут продолжать концептуально сливаться с диффузией.
Бесплатная рассылка
Три проверенных AI-истории каждое утро буднего дня, написанные простым английским. Бесплатно навсегда, без рекламы.
Одно электронное письмо каждый будний день. Отписаться в один клик. Мы никогда не продаем и не передаем ваш адрес.
Проверьте себя
Мгновенная обратная связь по каждому ответу и общий сертификат с проверяемым идентификатором после прохождения курса.
Поддержите бесплатное образование в области искусственного интеллекта. AI Understanding — это некоммерческая организация 501(c)(3). Никакой рекламы и платного доступа. Сделать пожертвование
Normalizing flows map a simple base distribution to a more complex distribution through invertible, differentiable transformations. Tractable Jacobian determinants allow these models to generate samples and evaluate probability densities.
Потоки основаны на обратимых, дифференцируемых преобразованиях, поэтому данные можно сопоставить с шумом и обратно, и поэтому применяется формула изменения переменных.
журнал p(x) = журнал p(z) + журнал|det(якобиан)| объясняет, как преобразование растягивает или сжимает вероятностный объем, давая точную плотность.
Слои связи преобразуют только часть измерений на основе остальных, создавая треугольный якобиан, определитель которого является просто произведением диагонали, что намного дешевле, чем O (n ^ 3).
An invertible flow with tractable Jacobian calculation can evaluate its model density. This is distinct from proving that likelihood is an adequate anomaly score.
Likelihood can be a useful signal, but generative models can assign unexpectedly high likelihoods to out-of-distribution inputs.
Продолжайте учиться
Другие руководства, выбранные по этой теме
ДалееСледующее руководство
Поточный вокодер WaveGlow
Аудио ИИ