В світі GenAI якось на перше місце серед безкоштовних опцій вийшла функція swap face. Іншими словами народ захопився змінювати себе або друзів на селебріті або героїв Marvel. Зрозуміло що це стосується саме обличчя, а не решти тіла, але багатьох і від цього пре.)
В Stable Diffusion в реалізації Automatic1111 спочатку був плаігн ROOP, пізніше потужній SwapLab, в реализації ComfyUI зайшов ReАctor, який використовується і досі. Так, звісно ReАctor зайшов і в Automatic1111(Forge) і став так само популярним, якщо не основним. Нажаль SwapLab здав позиції хоча і мав на старті більший функціонал ніж ReАctor.
Але ці плагіни працювали з готовим зображенням і за допомогою бібліотеки insightface (C++) намагалися вписати ваше обличчя замість існуючого. Тобто результат був тим кращим чим простіший був source. Про стилизацію в цьому випадку можно було тільки мріяти.
Але ось прийшов IP-adapter(ControlNet) з схемою FaceID, де ваш face вже як референс приймав участь в усьому процесі генерації
Потім IP-adapter(ControlNet) оновили і він вже працював за схемою InstantID
Потім винайшли нову схему PulID:
Потім ще одну:
І пішло поїхало. Я вам спеціально надав підбірку відео тільки з одного каналу пана Orex-a, щоб ви на власні очі побачили еволюцію swap face. Ви можете зауважити що деякі відео повторюються на 50% але то нормально, такий вже той світ GenAI коли потрібна монетизація.
Щасти вам.
No comments:
Post a Comment
А что вы думаете по этому поводу?