Генеративный ИИ

Generative Models

Генеративные модели

актуальноТекущий рабочий стандарт

Модели, обучающие распределение данных и умеющие порождать новые объекты из него.

Ключевые тезисы

  • Дискриминативные модели учат P(y|x), генеративные — P(x) или P(x,y).
  • Семейства: авторегрессионные, VAE, GAN, диффузионные, flows.
  • Оценка качества генерации — отдельная сложная задача (FID, perplexity, человеческие оценки).

Подробный разбор

2 подтем — раскройте любую, чтобы увидеть объяснение, формулы, примеры и интерактивные графики.

1

Карта генеративных подходов

Пять семейств и их компромиссы.

СемействоПравдоподобиеСкорость генерацииКачество
Авторегрессионныеточноемедленно (по токену)очень высокое
VAEнижняя оценкабыстроразмыто
GANнеточень быстрорезко, но нестабильно
Диффузияоценкамедленно (много шагов)высокое и разнообразное
Normalizing flowsточноебыстросреднее

Дискриминативная модель учит границу , генеративная — само распределение данных . Второе намного сложнее, но позволяет порождать новые объекты и оценивать, насколько объект типичен.

2

Как оценивают генерацию

Метрики, которые хотя бы отчасти работают.

МодальностьМетрики
ИзображенияFID, KID, CLIPScore, человеческая оценка
Текстперплексия, win-rate против эталона, LLM-as-judge
АудиоFAD, MOS
На практике

FID сравнивает статистики признаков реальных и сгенерированных изображений. Он чувствителен к размеру выборки и к используемой сети признаков — сравнивать значения между статьями почти всегда некорректно.

Связанные темы

Генеративные модели

VAE80%

Вариационный автоэнкодер · Глубокое обучение

Вероятностный автоэнкодер: кодирует объект в распределение и учится генерировать из латентного пространства.

GAN80%

Генеративно-состязательные сети · Глубокое обучение

Генератор и дискриминатор обучаются в игре с нулевой суммой, повышая реалистичность выборок.

Diffusion Models80%

Диффузионные модели · Глубокое обучение

Модель учится обращать процесс постепенного зашумления, превращая шум в изображение за серию шагов.

Autoregressive Models80%

Авторегрессионные модели · Генеративный ИИ

Порождают объект по частям, каждый раз предсказывая следующий элемент по предыдущим.

VAE80%

Вариационный автоэнкодер · Генеративный ИИ

Генерация через непрерывное вероятностное латентное пространство.

GAN80%

GAN · Генеративный ИИ

Состязательная пара сетей, дающая резкие и реалистичные изображения.

Diffusion80%

Диффузия · Генеративный ИИ

Итеративное расшумление — текущий стандарт генерации изображений, видео и аудио.

Density Estimation80%

Оценка плотности · Обучение без учителя

Восстановление распределения данных: где объекты встречаются часто, а где почти никогда.