made-something-a Landing on the paper sheet

понедельник, 29 января 2024

Плохая метафора подобна котёнку с дверцей

18:35 Stable Diffusion + InstantID
Сегодня в стейбл ControlNet вкатили InstantID — модель для переноса лица, которая не требует тренировки (как Lora или дообучение модели), но при этом на голову выше по качеству roop/reactor, и практически не оказывает влияния на скорость генерации.

Кроме очевидного применения (а именно генерации дипфейков Тейлор Свифт) я нашел одно менее очевидное — генерация стабильного лица, то, для чего обычно приходится обучать Lora. Но это лучше показать.

Вот дама, которую я сгенерил ранее в высоком разрешении. А дальше фотокарточки с дамой в едином стиле (но точно так же можно и разнообразить и окружение, и одежду, и прическу, но сохранить общие приметы лица)









Работает это дело через ControlNet, понадобится два слота — первый слот определяет донора лица, второй слот определяет геометрическое положение (то есть это как OpenPose-лайт, заимствуется только положение лица)

Это создает определенное ограничение, но Stable Diffusion достаточно гибок, чтобы построить адекватную картинку вокруг фиксированного лица.

В целом я в восторге. Кажется, я все-таки вернусь к идее нарисовать комикс в Stable Diffusion.

@темы: stable diffusion

URL
Сейчас, мне кажется, что голова это большая и очень тяжел...
так много мыслей в голове и учащенно бьется сердце. ужа...
Вооружившись дождем, испытай синеву неба на прочность.
Отличительная особенность всех последних снов заключается...
Стоя на границе жизни и смерти, ты обладаешь великой своб...
Кто-то подсовывает их мне в диком количестве, если плохо ...

29.01.2024 в 23:02

29.01.2024 в 23:02
Выглядит потрясно. Разве что на последней картинке шея непропорционально тонкая. А в целом - круто!
URL

30.01.2024 в 09:38

30.01.2024 в 09:38
Да, бывает еще слишком длинная шея — технология несовершенна. Я подозреваю, это из-за фиксации головы происходит.
URL