Интервью с Софьей Мироедовой, писательницей, художницей о создании комиксов с помощью нейросетей
ВЛАДИМИР МАКСИМУШКИН: Сегодня ко мне на сценарную кухню зашла Софья Мироедова, художница и писательница, о существовании которой я узнал совершенно случайно. Дело в том, что я уже не первый год слышу о том, что нейронные сети вот-вот отберут хлеб у художников, монтажеров, операторов, актёров и сценаристов, но о каких-либо серьёзных комиксах, созданных с помощью нейронных сетей я не слышал. А Софья их создаёт. Конечно же, я не мог пройти мимо, и пригласил её на сценарную кухню поговорить.
Итак, Софья, приветствую! Расскажите, пожалуйста, о себе в двух словах.
СОФЬЯ МИРОЕДОВА:
Добрый день, Владимир! Как вы уже заметили, я художник-иллюстратор и писательница. В иллюстрации с 2008 года, пишу лет с 14, а комиксом занимаюсь ситуативно в качестве хобби последние десять лет.
ВМ: На сценарной кухне собираются в основном любители комиксов. Расскажите, какое место комиксы занимают в вашей жизни.
СМ: Мне всегда нравился этот жанр на стыке литературы и изобразительного искусства. В своё время меня сильно разочаровывало, что в России графические романы долго не получали должного внимания. Я коллекционирую комиксы, стараюсь привозить по одному из каждой поездки, охочусь за новыми переводами любимых авторов, например, собираю переводы «Новелл» Серджио Топпи издательства Zangvar. И по мере своих сил стараюсь просвещать аудиторию на предмет комикса наравне с иллюстрацией.
Как автор, я занимаюсь этим ради забавы. Среди моих неизданных официально графических новелл фантастическое «Искривление» – переложенный в картинки рассказ, который я написала лет в 15; серия коротких историй «Господин Калиновский был лисой», чьи приключения получили продолжение в голосовой и настольной игре, и масса коротеньких стрипов, которые я стряпаю для развлечения. На профессиональный рост в этом направлении у меня, к сожалению, категорически не хватает времени.
ВМ: Не буду спрашивать о любимых произведениях, лучше назовите последние три прочитанных комикса.
СМ: «Пантера» Брехта Эвенса, «Terra Incognita» Аскольда Акишина, «Новеллы» Серджио Топпи, 4 том.
ВМ: Теперь, к нейросетям. Что побудило вообще попробовать создать комикс с помощью нейросетей?
СМ: Побудил азарт приручить нейронку, а что может быть лучшим тренажёром, чем серия картинок? Первым подходом было иллюстрирование коротких выдержек из диалогов для открытия глав моей фантастической повести «Амузия». Несмотря на то, что половина изображений была уже отрисована, я не смогла устоять перед пробой новой технологии. Тогда у Midjourney была 3-я версия алгоритма, а потому изображения получались на грани гротеска и абстракции. Меня это очень зацепило, и я продолжила экспериментировать.
ВМ: Расскажите, для чего вы используете нейросети при создании комикса? Только для создания изображений или для написания сценария тоже?
СМ: Когда я собирала «Гипнопедию», я генерировала части реплик с помощью ruGPT3 – это было чистым безумием. На тот момент нейросеть выдавала непоследовательные фантасмагории, что для моей задумки (путешествие по библиотеке снов) идеально подходило.
Недавно я попросила ChatGPT сгенерировать мне альтернативное продолжение комиксу «Вторично», которым занималась в 2023 году. Но идеи и диалоги нейросети показались мне довольно сухими и скудными. Сейчас думаю попробовать ещё раз, загрузив предварительно в неё тексты своих повестей и романов, чтобы оживить стиль и повествование.
В целом я больше использую нейросети для генерации изображений, это уже плавно влилось в мои профессиональные будни иллюстратора.
Последним достаточно большим проектом в жанре графической повести стал комикс «Вторично». Однако я собрала лишь черновик первой его части, до второй руки пока никак не доходят, хотя сценарий написан уже давно. Его я решила собрать с помощью генераций в стиле манги, чтобы набить буду на работе с 5 версией алгоритма Niji.
ВМ: Расскажите, пожалуйста, свой алгоритм работы по созданию одной страницы комикса. Вот прям по пунктам.
СМ: Если мы говорим о рисованном комиксе, то последовательность будет одна, если же о генеративном, то немного другая. Об «аналоговом» процессе у меня есть отдельная статья, а о подходе к использованию генеративного материала могу рассказать здесь:
- Сценарий. Без него дело не пойдёт дальше одной картинки.
- Деление сценария на сцены и полосы.
- Выделение описания героев и окружения.
- Выбор стиля.
- Генерация героев и окружения по ключевым сценарным точкам, учитывая эмоции и атмосферу.
- Ручной коллаж и сборка фреймов из генераций.
- Добавление баблов текста.
- Правки артефактов и цветокоррекция сцен.
- Вычитка и чистка готового комикса.
Примерно так. Вот тут есть небольшой практический мастер-класс на эту тему.
ВМ: Ваш первый комикс «Гипнопедия», был создан в 2022 году, сейчас, как вы уже сказали, работаете над комиксом — «Вторично». Насколько изменился алгоритм работы? Что вы поменяли сами с точки зрения организации процесса, а в чём стало проще технически?
СМ: Для меня ход работы остался прежним, изменилось только время, которое тратится на отбор и редактирование генераций. Например, в 3-й версии Mj было довольно сложно сохранять единую стилистику для всего объёма изображений. Сейчас это стало частью рабочего процесса, продуманного командой нейросети. Плюс появился встроенный инструмент для правок и использования референсов. Да и помощь нейронки в Photoshop тоже непереоценима: можно легко дорисовать края фрейма, почистить артефакты и многое другое.
ВМ: Все мы наслышаны о том, что при создании комикса с помощью нейросетей главная проблема — сложность в генерации одинаковых персонажей. Так ли это? И какие ещё есть сложности в этом процессе.
СМ: Сегодня эта проблема уже не является столь критичной, как это было в том же 2023. Даже тогда можно было генерировать героев по загруженным референсам. Сейчас достоверность получившихся персонажей становится всё выше. Исправлять остаётся лишь небольшие неточности, уверена, скоро и это перестанет быть проблемой. Эмоции у нейросети получаются немного ходульными, но для этих целей у рисующих людей, к счастью, есть собственный опыт и набитая рука.
ВМ: Вот я вообще не умею рисовать, но зато умею писать сценарии. Как вы думаете, смогут ли такие, как я создавать комиксы с помощью нейросетей? Если не сейчас, то в обозримом будущем?
СМ: Думаю, мы в шаге от этой возможности. Я, как писатель-фантаст, и вовсе жду, когда нейросети смогут по клику не только захватывающе озвучить мою книгу, но и сделать яркую достоверную экранизацию. Что касается комикса по готовому сценарию, насколько я знаю, на подобное уже вполне способен ChatGPT, но я ещё не тестировала его в этом ключе.
ВМ: Расскажите, каких возможностей нейросетей не хватает лично вам для создания комиксов?
СМ: Признаться, для создания комиксов хватает всего. Возможностей для творческих проектов настолько много, что для их воплощения уже просто не хватает часов в сутках.
ВМ: Вот вы пишете книги, создаёте комиксы, не боитесь, что через десяток лет нейросети дорастут до такого состояния, что любой человек сможет создавать себе комиксы нажатием одной кнопки. Откроет приложение, скажет в микрофон: «Хочу историю, чтобы как Звёздные войны, но про шпионов и чтобы там были страшные пришельцы со щупальцами». И приложение ему нарисует такой комикс. Я вот боюсь.
СМ: Не совсем понимаю, почему нужно этого бояться? Это невероятный масштаб для расширения возможностей нашего восприятия и творческого роста. Мозг пластичен, так же пластично и общекультурное сознание. Если бы мы в наших технологиях остановились в средневековье, то, вероятно, до сих пор боялись бы тиражирования книг и музыки.
У нас давно есть подобный описанному вами литературный, музыкальный и кинематографический фастфуд. Пусть он не сгенерирован нейросетью, но его качество, количество и суть очень близка к тому, что описано вами. Думаю, идёт процесс преобразования культуры и искусства, и в какой-то мере он схож с изменением производства керамики. Из обычного ремесла ручная лепка превратилась в искусство, освободив творцов от утилитарной функции. Конечно, наш мир изменится и преобразуется, мы что-то безвозвратно потеряем, но нельзя исключать и возможность того, что приобретём мы не меньше.
ВМ: И в конце пожелайте, пожалуйста, что-то создателям комиксов. Особенно сценаристам, которые не умеют рисовать :)
СМ: Как писатель, пожелаю побольше незабываемых идей, времени на их воплощение и несметного множества благодарных читателей!
ВМ: Спасибо за приятную беседу!
СМ: Всегда рада! И вам, Владимир!