Generative AI (GenAI)

Generative AI (GenAI) — класс систем искусственного интеллекта, предназначенных для создания нового контента (текста, изображений, аудио, видео, программного кода и др.) на основе данных, на которых они обучались. В отличие от discriminative моделей, ориентированных на классификацию, регрессию или прогнозирование, генеративные модели создают ранее не существовавшие в точном виде результаты, опираясь на вероятностное моделирование совместного распределения данных.

Технологической основой большинства современных GenAI-систем являются большие нейронные сети, в первую очередь трансформерные архитектуры. Обучение обычно проходит в несколько этапов: самонаблюдаемое (self-supervised) предобучение на огромных объёмах данных, а затем тонкая настройка (fine-tuning) с использованием supervised-данных и/или методов обучения с подкреплением (RLHF, DPO и др.).

Generative AI применяется для автоматической генерации текстов, синтеза изображений и видео, создания голосовых ассистентов, дизайна интерфейсов, генерации и автодополнения кода и многих других задач. В промышленной эксплуатации такие системы требуют значительных вычислительных ресурсов, тщательно оптимизированных пайплайнов обучения, методов эффективной тонкой настройки (PEFT, LoRA и др.), а также постоянного контроля качества генерации, управления рисками галлюцинаций/искажений и мониторинга для предотвращения деградации модели в продакшене со временем.