Генеративные сети обучаются на терабайтах фотографий и картин реального мира. Они превосходно знают, как падает свет на физические объекты и как устроена человеческая анатомия с медицинской точки зрения. Но как заставить алгоритм оцифровать не физическую реальность, а пророческие сны и духовные видения?
Данный исследовательский проект посвящен оцифровке стиля Уильяма Блейка — гениального английского поэта, мистика и художника-визионера эпохи романтизма. Искусство Блейка уникально: он иллюстрировал Библию, Данте и собственную сложную мифологию, используя изобретенную им технику «иллюминированной печати» (рельефный офорт с ручной акварельной раскраской). Его картины наполнены закрученными вихрями энергии, светящимися красками и гигантскими фигурами божеств.
Обучение генеративной модели на его работах — это концептуальный слом для искусственного интеллекта. Главная проблема кроется в «блейковской анатомии». Его персонажи обладают гипертрофированной, почти микеланджеловской мускулатурой, но при этом они лишены физического веса — они парят в пустоте как чистые духи. Нейросеть, обученная на современных данных, при виде запроса на «мускулистого человека в полете» неминуемо скатывается в генерацию супергероев из современных комиксов (вроде Супермена или Тора). Заставить ИИ соединить эту мощную телесность со светящейся, хрупкой акварелью и первобытным мистицизмом — задача, требующая ювелирного файнтюнинга.
Ниже представлены некоторые работы Уильяма Блейка, вошедшие в базу данных для обучения искусственного интеллекта.
Техническая реализация (Google Colab и LoRA)
В рамках проекта обучение проводилось в облачной среде Google Colab с использованием метода LoRA (Low-Rank Adaptation). Этот подход позволяет дообучить тяжелую базовую модель (например, Stable Diffusion), обновляя лишь небольшую часть алгоритмов, что делает процесс быстрым и эффективным.
Чтобы сделать процесс наглядным, весь технический этап (пайплайн) разбит на четыре ключевых шага:
1. Проверка оборудования (Видеокарта)
Генерация и обучение нейросетей требуют мощных видеокарт (GPU). На этом шаге мы инициализируем сервер и проверяем, какой именно вычислительный ресурс выдал нам облачный сервис Google для работы.
2. Подключение датасета и установка программ
Мы подключаем облачный диск, на котором лежат бережно отобранные нами картины художника (датасет), и скачиваем необходимые библиотеки машинного обучения (такие как diffusers и accelerate). Это дает нашему коду «инструменты» для работы с изображениями.
3. Запуск обучения (Тренировка стиля)
Это кульминация технического процесса. Здесь мы передаем нейросети команду: «Возьми базовую модель, проанализируй картины в нашей папке и найди в них общие стилевые черты». Процесс идет шаг за шагом (steps), пока нейросеть не выучит уникальный почерк художника, связав его со специальным кодовым словом (триггером).
4. Генерация первой картинки (Инференс)
После завершения обучения мы тестируем результат. Пишем текстовый запрос (промпт), используем выученное кодовое слово, и нейросеть «рисует» совершенно новое изображение в только что освоенном стиле.
Работы Уильяма Блейка отличаются ярким, узнаваемым стилем, который характеризуется несколькими ключевыми особенностями:
• Мистическая, гипертрофированная анатомия: сверхмускулистые, но невесомые, парящие фигуры.
• Техника иллюминированной печати: четкий, выразительный контур, заполненный светящейся, прозрачной акварелью.
• Закрученные, вихревые композиции: пространство картины часто закручивается по спирали, символизируя божественную энергию или хаос.
• Яркая, символическая палитра: пылающий красный, золотой, глубокий синий и инфернальный черный.
• Пророческие и библейские сюжеты: ангелы, демоны, божества (Уризен), драконы и души умерших.
Примеры сгенерированных изображений и промпты
Для тестирования модели и раскрытия её потенциала были составлены специальные промты, проверяющие разные аспекты стиля:
Творец Вселенной: "A bearded, hyper-muscular creator god kneeling in a dark void, measuring the glowing universe below him with a giant golden compass, photo in Blake style, visionary watercolor and ink, swirling energy."
Великий Красный Дракон: "A terrifying, massive red dragon with multiple horns and muscular wings standing triumphantly over a pale, glowing woman, photo in Blake style, biblical apocalypse, intense reds and golds, dramatic musculature."
