Представлена система синтеза изображений Stable Diffusion 2.0🔥
Компания Stability AI опубликовала вторую редакцию системы машинного обучения Stable Diffusion, способной синтезировать и изменять изображения на основе предложенного шаблона или текстового описания на естественном языке.
▫️Новая модель обучена с использованием коллекции LAION-5B, включающей 5.85 миллиардов изображений с текстовыми описаниями.
▫️Свежая версия также сменила кодировщик и теперь создает изображения более высокого качества.
▫️Также педоставлена возможность использования технологии суперсэмплинга (Super Resolution) для увеличения разрешения исходного изображения без снижения качества, что позволяет формировать изображения с разрешением 2048x2048.📈
▫️Представлена и модель SD2.0-depth2img, учитывающая глубину и пространственное расположение объектов, что например позволяет использовать позу человека на фотографии для формирования другого персонажа в той же позе.
▫️Обновлена модель для модификации изображений - SD 2.0-inpainting, позволяющая при помощи текстовых подсказок заменять и изменять части изображения.🤖
🔻Код инструментов для обучения нейронной сети и генерации опубликован под лицензией MIT.
🔻Уже обученные модели открыты под пермиссивной лицензией Creative ML OpenRAIL-M, допускающей использование в коммерческих целях.