sfw
nsfw
GuidingHand
GuidingHand
Рейтинг:
22.500 за неделю
Постов: 9
Комментов: 21
C нами с: 2016-09-02

Посты пользователя GuidingHand

Отличный комментарий!

Мля. До этого я с 90% вероятностью отличал нейросети от живых художников...

Насколько просто для ИИ скопировать художника

Недавний бунт против ИИ на artstation заставил меня задуматься. Насколько действительно сложно будет натренировать Stable Diffusion на стиль конкретного художника.
В качестве подопытного я взял Huffslove, потому что гоблинши в платьях его стиль близок к анимешному стилю базовой модели, но при этом отличается достаточно, чтобы прогресс сразу был виден.
Выкачиваем картинки с твиттера, скейлим, обрезаем, прогоняем через нейронку которая проставит теги с danbooru, и запасаемся терпением. Мне понадобилась где-то неделя экспериментов на то, чтобы добиться неплохих результатов.
Замечу, что здесь обучается не вся Stable Diffusion, а небольшая "гиперсеть" поверх нее, которая модифицирует ее выходы. Поэтому то, что она оверфитится и запоминает куски оригинальных изображений работает нам на руку. Это особенно видно если скормить ей те же промпты, которые использовались при обучении:
Чтобы сделать сетку более устойчивой к генерации того, чего не было в тренировочных данных, а также подправить ошибки и шероховатости, помогает добавление в промпт дополнительного стиля, который модель уже знает.
Выводы: если вдруг машины восстанут из пепла и поработят человечество, то по крайней мере они смогут сгенерировать продолжения всех тех комиксов и серий артов, на которые автор забил а тебе так хотелось увидеть.
Одна из наиболее интересных для меня фич Stable Diffusion — это возможность экспериментировать со стилистикой изображения, комбинировать различных художников, и получить какой-то свой оригинальный стиль. А не генерить, кхм, однотипных 3дшных бабищ. Поэтому я решил поделиться набором моих самых любимых стилистических промптов.

by Alphonse Mucha

Очень винтажный стиль, который сильно влияет на контент изображения, особенно на лица, волосы, и одежду. Хорошо работает на длинных промптах, чтобы поправить лица и руки, но скорее всего испортит фон.

by Frank Frazetta

Комиксовый стиль с черными тенями и очень четким лайном. Но если переборщить с влиянием, то сиски и мускулы начинают стремительно увеличиваться. Также единственный художник, на котором пришлось добавить furry в негативный промпт.

by Yoji Shinkawa

Приятный стиль близкий к тому который обычно встречаешь в манге, но добавит на изображение футуристичные элементы.

by Ilya Kuvshinov

Стиль хорош мягкими тенями и цветным лайном, а также красивыми бликами на волосах. Но по моему опыту совершенно не может в мужские лица.

in the style of Darkest Dungeon

Ради интереса решил попробовать какую-нибудь игровую стилистику, и да, NovelAI знает Darkest Dungeon.