Обучение нейросети в стиле Disco Elysium
Концепция
Как гейм-дизайнер я часто при словосочетании «визуальный стиль» вспоминаю игры. И определенно мой любимый и самый запоминающийся образ — портреты в игре Disco Elysium. Стиль несколько грубый, но очень выразительный и запоминающийся, и я решила обучить нейросеть рисовать именно в нем.
Входные данные
В качестве исходного датасета я использовала портреты из игры. Главным художником проекта является Александр Ростов, и ему принадлежит выработанный стиль изображений и большая часть портретов.
Портреты из игры 'Disco Elysium'
На портретах в игре часто разные люди в разных позах и одежде, так что такой небольшой датасет должен был научить нейросеть воспринимать и воспроизводить разные запросы.
Полученный результат
Нейросеть справилась с передачей общих особенностей — грубый покрас и то, как использован лайн на рисунке, однако на мой взгляд изображения все еще имеют характерную «одинаковость» — например черты лица, нос у всех определенно похож. Тем не менее запрос 'art in DISCOELYSIUM style' вполне адекватно передает оригинал, пусть и значительно уступает ему в характере и колоритности изображений, но безошибочно узнается. Также имеются «артефакты» и некоторые смазанности, которые типичны при генерации изображения нейросетью
Также на мой взгляд нейросеть справляется хуже с подбором цветов, и картинки могут немного сливаться или выглядеть слишком грязно — в оригинале все же выдержано соотношение в цвете.
Наконец, несмотря на общую передачу черт покраса, сгенерированные изображения гораздо менее фактурные, чем оригинал, ощущаются более гладкими и не имеют такого количества подтонов и мелких штрихов.
Код
ссылка на гугл диск с блокнотом в формате .ipynb
https://drive.google.com/drive/folders/1Thve5yBtolkypK2LIOZwmR243hZBj_kl?usp=sharing
