Как сейчас выглядит нейрогенеративное искусство и что с ним будет дальше

N+1Hi-Tech

Совместный сновидческий процесс

Как сейчас выглядит нейрогенеративное искусство и что с ним будет дальше

Иван Шунин

Когда работаешь с новостями науки, иллюстрации — это сложно. Ладно еще, когда речь о каком-то наглядном поведенческом эксперименте. Но когда у тебя доказательство математической теоремы или демонстрация тонкого эффекта из области квантовой химии, где в качестве иллюстративного материала в лучшем случае графики — приходится думать. Думать долго и отчаянно. Так что когда разработчики нейросетей начали сначала делиться успехами своих детищ в живописи, а после запустили сервисы нейрогенерации изображений мы, конечно, очень обрадовались. Но простая генерация картинок в ответ на набор слов — это еще не очень интересно. Поэтому мы пошли к Илье Яцкевичу и Алексею Устьянцеву, которые занимаются нейрогенеративным искусством, чтобы они попробовали себя в роли иллюстраторов научных новостей — а потом поговорили с ними о том, как меняют их работу рисующие машины.

[N + 1]: Генерация изображений при помощи нейронки, это что? Уже отдельное художественное направление? Или все люди, которые занимаются изобразительным творчеством, просто сейчас осваивают новый инструмент?

[Илья]: Сейчас в твиттере и инстаграме (соцсеть признана в РФ экстремистской и запрещена) многие стонут: «о боже, нет, они заменяют художников!» [мы говорили с Ильей и Алексеем еще 24 августа — прим. N + 1]. Ну, так-то слава роботам, конечно. И определенные подвижки на рынке труда в связи с этим произойдут. Грубо говоря, если ты не можешь делать что-то подобное — это проблема. Но в любом случае человеческая роль во всем этом остается. Потому что человек делает это с пониманием идеи, контекста. Он корректирует промпты, настраивает их в соответствии со своей задумкой, со своим представлением о предмете — особенно когда мы говорим о весьма абстрактных научных образах. Да и, в конце концов, он потом ретуширует это и собирает вместе.

[N + 1]: А ты можешь всю цепочку описать? Не только применительно к нашей конкретной истории с заголовками, а вообще.

[Илья]: Я, например, работаю сейчас над клипом Дельфина и мы используем нейросетки для того, чтобы дать какие-то общие референсы, направление, настроение. То, ради чего я раньше ковырял бы пинтерест на протяжении многих часов. Сейчас на это уже не уходит так много времени. Получается где-то конкретнее, где-то интереснее.

[N + 1]: То есть ты начинаешь предпочитать такую технику всем остальным сценариям, она заменяет прошлые привычки?

[Илья]: Ну, я по-прежнему смотрю пинтерест, я по-прежнему люблю рисовать руками, но это все удачно дополняет мою практику.

[Алексей]: Давай я добавлю. Нейросетки очень полезны, в первую очередь, когда тебе нужно очень быстро получить очень большое количество материала. То есть у тебя появилась идея, ты забиваешь два предложения и получаешь кучу всего. За это время ты раньше успел бы только пинтерест открыть и первые две картинки полайкать. А когда тебе нужно что-то человеку показать и объяснить, это очень удобно.

[N + 1]: Ага, плюс это ровный результат — получаешь много и оно все какого-то одного качества.

[Алексей]: Ну, одного стиля... Насчет качества не уверен.

[Илья]: Во-первых — да, конечно, в среднем по больнице качество абсолютно ровное. Но помимо этого есть еще прекрасные случайности, которые происходят достаточно часто. Картинки, которые выбиваются из ряда себе подобных. Как правило, именно такие случайности я и предпочитаю использовать. То есть у тебя помимо массы качественного материала есть еще какие-то классные штуки, которые в процессе возникают.

Смотри, вот мы с Лешей придумали историю про планету после многих техногенных катастроф, где вдобавок ко всему появился какой-то загадочный красный туман, который придал людям необычные возможности — в общем, у нас есть сеттинг. В рамках этого сеттинга у нас появляются персонажи: они всплывают из вопросов о том, как выглядит это, как выглядит то. У меня есть представление о том, как это выглядит, какой-то [общий] силуэт:

Eli Jackiewicz

И я иду с ним в одну нейросетку, пробую его сгенерировать там, может быть рисую вручную:

Eli Jackiewicz

Потом иду в другую — и быстро генерирую большое количество деталей, которые позволяют мне описать форму этого силуэта максимально выразительно и насытить его деталями.

И вот на стыке такого человеческого и машинного творчества получаются прикольные вещи:

[N + 1]: Хорошо. Давай к следующему. Вот есть новый инструмент, плюс какие-то навыки, необходимые для того, чтобы им пользоваться. Есть ли уже какая-то базовая матчасть, которую нужно освоить, чтобы всерьез стать таким нейроартистом?

[Илья]: Когда это все начиналось, это было просто быстро развивающееся сообщество. Люди учились друг у друга, анализировали промпты друг друга и получали что-то новое. Сейчас уже есть коллосальное количество материалов, которые описывают эту всю промпт-инженерию как дисциплину своего рода. Есть синтаксис, есть ключи, которые позволяют влиять на стилистику изображения. И так далее. Более того, у меня в одной из коллаб запущена отдельная нейросетка, которая разбирает картинки на промпты.

[N + 1]: То есть ты кормишь ей картинку, а она тебе говорит, каким промптом ее можно получить?

[Илья]: Да. Реверс-инжиниринг уже есть. Словари промптов уже есть. Какие-то интерфейсы на эту тему, кроме текстовых, уже появляются. Все это развивается очень быстро.

[N + 1]: А ты в целом себе представляешь, что у нее под капотом там? Или ты просто как артист с этой штукой взаимодействуешь?

[Илья]: Нет, я с ней взаимодействую чисто как чувак, который кнопочки нажимает. У меня есть примерное представление о том, как это работает. Я понимаю, что в ней там два логических модуля, один занимается этим, второй тем. Я понимаю, как происходит диффузия, как картинка восстанавливается из шумов. Я могу запустить какой-нибудь код в какой-нибудь коллабе. Немножко его подправить — тоже могу. Хотя не очень люблю.

[N + 1]: И тебе это, в общем, не надо? То есть ты не оказываешься в ситуации, когда ты такой — блин, ну тут с кодом надо работать, я мимо? Просто вот работающий черный ящик и все хорошо, я умею с ним взаимодействовать на уровне промптов, я осваиваю и развиваю искусство взаимодействия с этими машинами.

[Илья]: В принципе, да. Но есть отдельные инструменты, которые все еще требуют работы с кодом. Сейчас я участвую в альфа-тестах еще одного такого сервиса. Они делают классное рабочее пространство с многоуровневой структурой. Ты перетаскиваешь в свое рабочее пространство разные нейросетки, подключаешь их друг к другу, как в DaVinci или Blender. И скармливаешь результат одной генерации в другую. Это дает кучу неожиданных и интересных результатов.

[N + 1]: А, они атакуют продукт друг друга?

[Илья]: Ну можно и так сказать. Я могу взять своего персонажа, при помощи одной нейросетки убрать у него фон, при помощи второй преобразовать его в 3D и потом при помощи третьей его как-то стилизовать.

[N + 1]: Окей. Давай теперь вдоль галереи с нашими заголовками пойдем. Что там происходило и как? Вот у тебя был список, что ты пошел с ним делать?

Мы отправили Илье с Алексеем список типичных новостей, с иллюстрацией к которым, на наш взгляд, человеку не так просто справиться:

  • Бозе-конденсат из атомов рубидия в оптическом резонаторе
  • Оптогенетический инструмент для управления экспрессией белков
  • Новый путь синтеза пребиотических кислот
  • Углеродный ремень закрутился в ленту Мебиуса
  • Веселящий газ позволил получать фенолы каталитически
  • Топологически хиральный молекулярный узел
  • Кластерные полиоксометаллаты собрались в двумерные пористые структуры
  • Астрономы отыскали первый затменный промежуточный поляр с потоковой подпиткой
  • Поражение миндалины не дало людям принести одного в жертву ради спасения многих
  • Спиннер превратили в экспресс-тест для диагностики инфекций мочевых путей
  • Обучение страхом вызвало у мышей пластичность в дендритах
  • Гаплонедостаточность уличили в развитии тяжелой формы стафилококковой инфекции
  • Контактные линзы доставили лекарство в переднюю камеру глаза с помощью ионофореза
  • Бегающие и кусающиеся собаки поддержали эпидемию бешенства в Танзании
  • Пересадка фекальной микробиоты снизила тягу к алкоголю
  • Дифференцировку моноцитов в толстой кишке у мышей связали с регуляторным фактором интерферона 5
  • Клоны флуоресцирующей макаки помогли оценить безопасность точечного редактирования генома
  • Вирусы заставили мышей привлечь комаров-переносчиков запахом черемухи

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Секс без обязательств: большой разбор с психологами — изучите все плюсы и минусы Секс без обязательств: большой разбор с психологами — изучите все плюсы и минусы

Мы говорим: «Это же просто секс, ничего серьезного», но так ли это?

Psychologies
Доктор Пихто Доктор Пихто

«Час дьявола»: «Твин-Пикс» с британским акцентом

Weekend
3 признака пищевой аллергии, о которых вы не знали раньше 3 признака пищевой аллергии, о которых вы не знали раньше

По каким симптомам можно вычислить аллергию?

Psychologies
Груз прошлого: что следует понимать под имперским и колониальным мышлением Груз прошлого: что следует понимать под имперским и колониальным мышлением

Что такое имперское и колониальное мышление? Как оно проявляется?

Forbes
«Наблюдатель»: стоит ли смотреть новый сериал Райана Мерфи о таинственном сталкере «Наблюдатель»: стоит ли смотреть новый сериал Райана Мерфи о таинственном сталкере

Мини-сериал «Наблюдатель» — проект Райна Мерфи, основанный на реальных событиях

Forbes
Что делать, если ребенка обижают в школе: пошаговая инструкция Что делать, если ребенка обижают в школе: пошаговая инструкция

Как правильно реагировать, если вы узнали, что ребенка притесняют?

Psychologies
Актриса Светлана Устинова: «Я никогда не думала, что создам полнометражную картину о деменции» Актриса Светлана Устинова: «Я никогда не думала, что создам полнометражную картину о деменции»

Интервью со Светланой Устиновой о ее режиссерском дебюте «Время года зима»

СНОБ
Постоянные привычки знаменитых актеров, которые не все замечают Постоянные привычки знаменитых актеров, которые не все замечают

После этой статьи ты совсем иначе посмотришь на знаменитых актеров

Maxim
Тайны личного архива Лили Брик: переписка с Маяковским Тайны личного архива Лили Брик: переписка с Маяковским

Пожалуй, никто не причинил Маяковскому столько боли, сколько она

Коллекция. Караван историй
За что мы действительно ответственны: вина в контексте политики, морали и культуры За что мы действительно ответственны: вина в контексте политики, морали и культуры

Отрывок из книги «Вопрос о виновности. О политической ответственности Германии»

Psychologies
Легкое знакомство Легкое знакомство

Фильм Александра Крестникова, снятый в Сочи, призывает задуматься о смысле жизни

Отдых в России
Как принимать решения в стрессовой ситуации: 3 подсказки Как принимать решения в стрессовой ситуации: 3 подсказки

Как научиться делать выбор в стрессовых ситуациях?

Psychologies
Искусство изящного ухода от неудобных вопросов: как его освоить Искусство изящного ухода от неудобных вопросов: как его освоить

Рассказываем о самых действенных способах словесной рокировки

Psychologies
«Ненавижу и скучаю»: почему мы испытываем смешанные чувства к тем, с кем больше не хотим быть «Ненавижу и скучаю»: почему мы испытываем смешанные чувства к тем, с кем больше не хотим быть

Почему расставание с человеком вызывает у нас противоречивые чувства?

Psychologies
Идея о белом спасителе: как «Врачи без границ» уже полвека спасают тысячи жизней Идея о белом спасителе: как «Врачи без границ» уже полвека спасают тысячи жизней

Как появилась организация «Врачи без границ»

Forbes
10 булгаковских адресов в Москве 10 булгаковских адресов в Москве

Какой театр стал прототипом Варьете и где располагалась резиденция Воланда?

Культура.РФ
Апельсины могут улучшить зрение - факт или миф? Вся правда об этом удивительно полезном фрукте Апельсины могут улучшить зрение - факт или миф? Вся правда об этом удивительно полезном фрукте

Факты об апельсинах, после которых вам непременно захочется сходить в магазин

ТехИнсайдер
«Мы ни разу не поцеловались»: как вырваться из сети френдзоны «Мы ни разу не поцеловались»: как вырваться из сети френдзоны

Что делать, если вы попали в унылое место под названием «френдзона»?

Psychologies
Родитель года: почему вставать на сторону ребенка нужно не всегда Родитель года: почему вставать на сторону ребенка нужно не всегда

Все родители любят своих детей. Хорошо, почти все. Очень и очень многие

Maxim
5 закусок, которые помогут сохранить остроту ума 5 закусок, которые помогут сохранить остроту ума

Что стоит есть, чтобы помочь своему мозгу лучше работать?

ТехИнсайдер
Штамповка или литьё? Проверьте, правильно ли вы выбрали колёса на зиму Штамповка или литьё? Проверьте, правильно ли вы выбрали колёса на зиму

Зимой и летом на выбор дисков влияют разные факторы

ТехИнсайдер
Основатели Sound Up — о новой академической музыке и интересе к ней Основатели Sound Up — о новой академической музыке и интересе к ней

Основатели фестиваля Sound Up — о шуме времени и его контекстах

РБК
Пять полезных аксессуаров, которые избавят вас от висящих проводов Пять полезных аксессуаров, которые избавят вас от висящих проводов

Как справиться с вездесущими проводами от электроники?

CHIP
Как в СССР копировали автомобили капиталистического автопрома: не хуже оригинала Как в СССР копировали автомобили капиталистического автопрома: не хуже оригинала

Автопром в Советском Союзе всегда был как хромая лошадь

ТехИнсайдер
«Пора заводить собаку!»: что нужно знать до появления питомца — взвесьте за и против «Пора заводить собаку!»: что нужно знать до появления питомца — взвесьте за и против

Как понять, что пора завести щенка? И когда этого делать категорически не нужно?

Psychologies
Вроде не против: как вынужденное согласие становится опорой для порно-индустрии Вроде не против: как вынужденное согласие становится опорой для порно-индустрии

Отрывок из книги «Темная сторона сексуальной революции»

Forbes
Турция, Испания, Индия, Япония, Корея: cекреты роскошных волос из разных стран Турция, Испания, Индия, Япония, Корея: cекреты роскошных волос из разных стран

На какие только ухищрения не идут заморские красавицы ради роскошных волос

Лиза
10 фактов о пылевых клещах, которые надо знать 10 фактов о пылевых клещах, которые надо знать

Эти микроорганизмы обитают там, где есть пыль

CHIP
Как прожить долгую и счастливую жизнь: 20 шагов к хорошему самочувствию — воспользуйтесь нашими советами Как прожить долгую и счастливую жизнь: 20 шагов к хорошему самочувствию — воспользуйтесь нашими советами

Делимся простыми советами, которые принесут вам здоровье и удовольствие

Psychologies
На фото люкс, а в номере кушетка и тумбочка: 5 советов, как грамотно отстаивать права в отелях На фото люкс, а в номере кушетка и тумбочка: 5 советов, как грамотно отстаивать права в отелях

Что делать, если при заселении в гостиницу что-то пошло не так?

Вокруг света
Открыть в приложении