Обучение нейросети под стиль аниме «Сейлор Мун (Sailor Moon)»
Идея проекта
Задумкой проекта стало исследование возможностей генеративной нейросети в создании изображений, выдержанных в определённой визуальной стилистике.
В качестве референса был выбран культовое аниме «Сейлор Мун», повлиявший на целое поколение зрителей и оставивший яркий след в визуальной культуре 90-х.
На фоне более современных или стилизованных аниме-проектов, эстетика Сейлор Мун остаётся уникальной — в ней чувствуется искренность и сказочность, которые и стали ориентиром при обучении модели.
Это аниме отличается узнаваемым стилем: нежные цвета, романтичные образы, волшебная тематика и особая атмосфера, сочетающая наивность с героизмом. Именно эта комбинация визуального языка и эмоционального настроя легла в основу концепции проекта.
Коллекция кадров и стиля
Кадры взятые из аниме «Сейлор Мун (Sailor Moon)»
Процесс обучения нейросети
Обучение нейросети и сохранение контрольных точек
Процесс загрузки и сохранения модели
Финальные образцы созданных изображений
Изображения, полученные в результате обучения модели
Нейросеть успешно генерирует узнаваемые образы, что свидетельствует о высоком уровне передачи характерных черт и деталей. Особенно хорошо воспроизведены ключевые элементы стиля, что связано с множеством обучающих примеров, которые позволили модели «запомнить» эти особенности.
Изображения, полученные в результате обучения модели
Лучшие изображения, сгенерированные обученной моделью
Программная часть
Код для генерации с обученной моделью — https://drive.google.com/drive/folders/1tjagicuU-61T6AZFxfzxxrutDAyEeu97?usp=sharing
Заключение
Это был довольно необычный опыт создания персонажей, несмотря на ряд недостатков. Качество изображений и узнаваемость образов оставляют желать лучшего, однако я сознательно оставила их без дополнительной обработки, чтобы объективно оценить исходные возможности модели и наглядно увидеть, на что способны современные бесплатные самодельные нейросети.
Генерация изображений осуществляется на базе модели Stable Diffusion XL (https://stabledifffusion.com), прошедшей дополнительное обучение с помощью LoRA и DreamBooth.
Модель на Hugging Face: https://huggingface.co/vairiaaa/Sailor_moon_LoRA
