Превратите историю в комикс с помощью Lore Machine

Двенадцать лет назад писатель Уилл Дуглас Хевен в свободное время написал юмористический рассказ о человеке, страстно увлеченном элитным кормом для кошек. А теперь появилась платформа генеративного искусственного интеллекта под названием Lore Machine, которая помогла превратить эту интересную историю в комикс.

Автор вставляет свою историю в текстовое поле и получает сообщение: « Мы определяем сцены, места, персонажей и эмоции. Это может занять до 2 минут ». Lore Machine проанализировала текст, извлекла описания упомянутых людей и мест, а затем передала эту информацию в модель генерации изображений.

На экране появляется иллюстрированная раскадровка. Когда автор просматривает яркие комические иллюстрации своих почти забытых персонажей, события принимают неожиданный поворот.

После более чем года разработки Машина знаний наконец-то дебютировала на публике. За 10 долларов в месяц вы можете загрузить до 100 000 слов (до 30 000 слов за одну загрузку) и создать 80 изображений для коротких рассказов, сценариев, стенограмм подкастов и многого другого. Также предусмотрены тарифные планы для опытных пользователей, включая корпоративный план стоимостью 160 долларов в месяц с 2,24 млн слов и 1792 изображениями. Иллюстрации представлены в различных встроенных стилях: от манги до акварели и телешоу 80-х.

Зак Райдер — основатель креативного агентства Modern Arts — использует раннюю версию инструмента с тех пор, как основатель Lore Machine Тоби Кэмпион впервые показал Райдеру, на что он способен. Райдер отправил в систему сценарий короткометражного фильма, и Lore Machine за одну ночь превратила его в 16-страничный комикс.

«Я помню, как Тоби делился своим экраном. Мы все были совершенно ошеломлены», — сказал Райдер. «Дело не только в визуальной составляющей, но и в повествовании: от сюжетной линии до эмоций персонажей — все было идеально с самого начала».

В настоящее время Modern Arts использует Lore Machine для разработки вымышленной вселенной для серии комиксов — работы, основанной на сценарии, написанном создателем сериала Netflix « Любовь, смерть и роботы» .

Lore Machine сделана из знакомых компонентов:

• Большая языковая модель (LLM) сканирует ваш текст, выявляя описания людей, мест, а также общие настроения.
• Версия Stable Diffusion сгенерирует изображение.

Однако Lore Machine отличается тем, насколько легко ей пользоваться. Загрузка контента истории и скачивание результатов занимает всего несколько кликов.

Это делает Lore Machine ярким примером новой волны инструментов: удобных в использовании, но скрывающих невероятную мощь за невероятно простым веб-интерфейсом.

«Предстоит проделать большую работу по обновлению новых инструментов ИИ, а интерфейсы и рабочие процессы для каждого инструмента различны », — сказал Бен Палмер, генеральный директор New Computer Corporation, компании по созданию контента. «Использование одного большого инструмента с последовательным пользовательским интерфейсом очень привлекательно. Мне кажется, что именно здесь отрасль найдет свою опору».

Два года назад Кэмпион основал компанию Lore Machine для разработки блокчейн-версии Википедии. Но когда он увидел, как люди применяют генеративные модели, Кэмпион изменил направление. Кэмпион использовал бесплатную модель преобразования текста в изображение Midjourney для создания комикс-версии повести Сэмюэла Тейлора Кольриджа «Сказание о старом мореходе» . По его словам, работа стала вирусной, но процесс ее создания был не из приятных.

«Моя жена ненавидела этот проект », — сказал Кэмпион. «Каждую ночь я не сплю до 4 утра, пытаясь сделать фотографии идеальными ». Проблема в том, что модели преобразования текста в изображение, такие как Midjourney, генерируют изображения по одному за раз. Это затрудняет поддержание согласованности между различными изображениями одного и того же персонажа. Даже фиксация определенного стиля для нескольких изображений может оказаться сложной задачей.

Этот опыт помог ему осознать, что технология должна быть намного проще в использовании. Кэмпион не рассказывает, как именно Lore Machine удается сохранять единообразие образов и стиля на протяжении всей серии иллюстраций. Он довольно хорош, но не идеален: в одной из сцен рассказа автора у персонажа с короткими волосами внезапно появляется челка, а также есть сцена, где персонаж появляется дважды — в разных местах.

Иллюстрации также постепенно приобретают обобщенный характер. Автор был разочарован тем, что многие описания персонажей были весьма конкретными, но не были показаны на иллюстрациях. Тем не менее, по сравнению с созданием каждого кадра вручную, Lore Machine стала огромным шагом вперед.

«Последовательность поразительная», — говорит Райдер . Это придало компании Райдера Modern Arts достаточно уверенности, чтобы использовать Lore Machine в проекте с клиентом. « Если нам постоянно приходится возвращаться и устранять неполадки, мы не сможем выполнить работу вовремя » .

Как и все другие генеративные модели, технология, лежащая в основе Lore Machine, может генерировать вредоносный контент по запросу. Кэмпион заявил, что они пытаются предотвратить создание изображений, изображающих насилие или ненависть, но в то же время не хотят ограничивать творческое самовыражение художников.

Первоначальный интерес к Lore Machine во многом исходил от маркетинговых фирм. Однако Кэмпион надеется, что широкое распространение приложения побудит больше пользователей попробовать его. Кэмпион рассказал, что полгода назад ему позвонил директор школы для детей-инвалидов на Манхэттене. Директор хотел пропустить свои учебники через этот инструмент, чтобы дети могли увидеть изображения. « Я даже не думал об этом. Я был настолько застрял в голливудском мышлении », — сказал Кэмпион.