Генеративные нейросети: обучение
Концепция
Основная цель проекта — обучить нейросеть, чтобы на основе оригинальных рисунков Хирохико Араки, автора манги «ДжоДжо», она смогла нарисовать обложки для музыкальных групп. Сам мангака для стендов (супер-силы) героев подбирал очень музыкальные имена, которые основывались на названиях известных музыкальных композиций разных времён.
Исходные изображения
Таким образом была загружена база данных из картинок
Далее каждой картинки из базы были сгенерированы «названия»
Был запущен процесс обучения Stable diffusion
Генерация изображений
На основе промтов генерировались изображения
Была попытка генерации и на середине обучения нейросети
Получались более реалистичные и приближенные к реальности картинки, но они не сильно соответствовали стилю мангаки.
Далее идут генерации после полного обучения модели
ABBA/ The Beatles/ ТАТУ
Deep Purple/ KISS
The Prodigy/ AC/DC/ Rammstein
BTS/ Metallica/ Queen
Выводы
Обучение моделей на основе работ известных авторов очень удачная и интересная тема, которая в дальнейшем несомненно получит хорошее развитие. Мои картинки далеки от идеала, но я рада, что индивидуальный стиль автора всё же удалось соблюсти.
Файл с кодом
