Основные типы VAE, используемые в Stable Diffusion, отличаются качеством генерируемых изображений: 1

• EMA. 1 Считается, что это лучший тип VAE для большинства приложений, так как он создаёт более чёткие и реалистичные изображения. 1
• MSE. 1 С его помощью можно получать более гладкие и менее зашумлённые изображения, но они могут быть не такими реалистичными, как созданные EMA. 1

Также авторы новых моделей Stable Diffusion иногда добавляют VAE, заточенные под их модели. 6 Они тренируют модель VAE под себя, тем самым улучшают те детали, на которые была заточена модель (например, космический сет, аниме, аналоговое фото и т. д.). 6