Нейросетевые комиксы
По мере развития генеративных нейронных сетей мы наблюдаем применение этой технологии в том числе в создании комиксов. Мы на Авторском Комиксе получаем сообщения от встревоженных этим посетителей, которые просят пояснить позицию портала относительно нейросетевых комиксов и принять какие-то меры. Эта статья — наши рассуждения на тему нейросетевых комиксов и приглашение к дискуссии, поэтому здесь будет больше вопросов, чем ответов.
Какие проблемы создают нейрокомиксы
Мы просмотрели все сообщения в нашей группе от людей, встревоженных наличием на портале нейрокомиксов, и выделили три основные боли:
- Нейросетевые комиксы легче создавать, чем нарисованные от руки, а в каталоге они присутствуют наравне с остальными и отвлекают на себя внимание.
- Нейросети для генерации изображений используют результаты труда художников без их ведома, обучаясь на их картинах.
- Созданные с помощью нейросетей персонажи часто имеют проблемы с анатомией и другие ляпы, отличаются от кадра к кадру, или, наоборот, слишком однотипны.
Все это приводит к идеям как-то выделить нейрокомиксы из всех остальных комиксов, например, поместить их в отдельную секцию каталога или специальным образом помечать.
Определение нейросетевых комиксов
Первый вопрос, который возникает — это способ, по которому комиксы делятся на нейросетевые и обычные. Возможно, для насмотренного художника это не покажется сложным — сгенерированные нейросетью картинки видны ему сразу. Но если углубиться в этот вопрос, то все становится не так очевидно.
Комикс — это синтетический (в хорошем смысле) вид искусства, сочетающий в себе графическое искусство с литературой. Но и литература и графическое искусство достаточно комплексны, чтобы отдать нейросети какой-то из этапов творчества.
Нейросеть может сгенерировать:
- идеи для сюжета,
- основную сюжетную канву,
- неожиданный сюжетный поворот,
- диалоги,
- референсы для персонажей,
- характер персонажа,
- кадр для комикса,
- черновик кадра,
- изображение персонажа,
- фон,
- страницу комикса целиком и многое другое.
Кроме того, результат работы нейросети можно использовать как есть, а можно дорабатывать, дорисовывать и перерабатывать как угодно.
Будет ли считаться нейрокомиксом, если автор попросил нейросеть сгенерировать сюжет и диалоги, а нарисовал все самостоятельно?
Будет ли считаться нейрокомиксом, если автор использовал референсы, которые сгенерировал с помощью нейронной сети?
Будет ли считаться нейрокомиксом, если автор сгенерировал фоны и самостоятельно нарисовал поверх них персонажей?
Будет ли считаться нейрокомиксом, если автор самостоятельно нарисовал, раскрасил все кадры и отдал их нейросети для наложения теней, а потом довел картинку руками?
Более того, сможете ли вы в этих случаях отличить работу нейросетей от ручной?
Разработка и пользовательский опыт
Когда возникает запрос добавить на сайт какую-то функциональность, которой раньше не было, всегда встает вопрос разработки, ее сложности и опасности ухудшить что-то в пользовательском опыте, сделав его более запутанным.
Сейчас на Авторском Комиксе нет возможности скрывать комиксы определенной тематики, категории каталога работают в обратную сторону: показывают комиксы выбранной темы. Работа категорий по принципу исключения — это новая функциональность, которая требует дизайна, проектирования, разработки и тестирования. Поэтому важно понимать, что добавление на портал какого-то раздела или фильтра для нейрокомиксов — это вопрос не только желания, но и приложения определенных ресурсов разработки.
Действительно ли эта проблема вам кажется такой важной, чтобы отложить все остальные задачи в сторону?
Проблема «плохих» комиксов в исторической перспективе
В этом году Авторскому Комиксу исполняется 16 лет, и ситуация, когда определенные комиксы на портале вызывают негатив у определенной аудитории, случилась не впервые.
Сначала это были завирусившиеся в поздние нулевые комикс-генераторы, потом Rage-комиксы, комиксы на Garry’s Mod, яой, фотокомиксы, фурри, комиксы по Undertale. Да простят нас представители отдельных категорий за то, что свалили все в кучу.
За эти 16 лет возможность скрывать определенные категории на портале так и не появилось, но это не значит, что администрация бездействовала:
- Некоторые из категорий (например, Rage-комиксы) не допускались на сайт по общему правилу, принятому на уровне портала.
- Некоторые из категорий (например, комикс-генераторы) подвергались более пристальной проверке при добавлении в каталог и со временем пропали сами собой.
- Система возрастных рейтингов, которую мы ввели, на уровне внутренних правил повышали рейтинг для некоторых типов комиксов.
- Подписки на комиксы, которые мы добавили, помогают следить только за теми комиксами, которые нравятся конкретному человеку.
- Дополнительная ступень каталога «Рекомендации» помогает самым лучшим на наш взгляд комиксам, и обычно спорные категории туда не попадают.
Все эти меры уже есть на портале и они уже помогают фильтровать «плохие» комиксы на уровне администрации, редакции или конкретного читателя, и для их использования не нужно ничего разрабатывать.
Нужно ли сочинять что-то новое или можно обойтись имеющейся функциональностью?
А если новая функциональность все-таки нужна, то она нужна не только для нейрокомиксов, но и для всех других спорных категорий, не так ли?
Масштабы проблемы
Завершить статью хотелось бы оценкой масштаба проблемы. На момент написания статьи в каталоге Авторского Комикса содержится 2916 комиксов, из которых явно нейросетевых всего 4, что является всего 0,13% от каталога (не 13 процентов, а 13 сотых процента). Мы даже можем просто перечислить все нейросетевые комиксы здесь:
Этим мы не хотим преуменьшить проблемы, создаваемые нейронными сетями, которые описали в начале статьи, но просим подходить к вопросу более спокойно и взвешенно. Нашествие нейросетевых комиксов еще не произошло, Авторский Комикс в безопасности, давайте обсудим, какие превентивные меры мы можем принять прямо сейчас или в ближайшем будущем.