Программисту, ставшему режиссером короткометражных фильмов с искусственным интеллектом, потребовалось три месяца, чтобы выиграть золотую медаль на международном кинофестивале «Новый талант в области искусственного интеллекта» |

Как может работа ИИ, созданная непрофессионалами кино и телевидения, выделиться после конкуренции с обычными короткометражными фильмами?

В феврале 2023 года Джим, программист игровой индустрии, стал художником по искусственному интеллекту.

В декабре 2024 года короткометражный анимационный фильм Джима с искусственным интеллектом «Диета призраков» получил золотую награду за лучший анимационный короткометражный фильм на церемонии вручения наград Independent Shorts Awards.

Это влиятельный международный фестиваль короткометражных фильмов в независимой киноиндустрии. Он не предназначен специально для работ ИИ, поэтому имеет большое значение для Джима: «Я рад, что судьи могут игнорировать ярлык ИИ и сосредоточиться на ИИ. сама история».

Джим отвечал за большую часть создания «Диеты призраков». Фильм длится 10 минут и состоит из 242 кадров. На его создание ушло почти три месяца и не менее 200 часов работы. В среднем это было более 2 часов. день.

После 90 дней создания Джим, казалось, боролся против ума и смелости ИИ, приближаясь к пределам ИИ и обходя его ограничения. Когда пользователи сети после просмотра «Диеты призраков» пожаловались, что «ИИ уже начал работать над анимацией», Джим ответил: «Создатели побуждают ИИ создавать анимацию».

3 месяца, 10 минут

«Диета призраков» — криминальный фильм в стиле нуар, который был важным жанром в Голливуде в прошлом веке. В то же время его сюжет локализован. Термин «Диета призраков» пришел из юго-западного региона и относится к закускам, которые до сих пор популярны. открытые на улицах рано утром ларьки.

Главный герой Сюй Ся — молодой человек, который поздно ночью ест на улице. Чтобы лечить своего отца, ему пришлось сделать несправедливый выбор, но он также сохранил неприкосновенную прибыль. В конце концов, он оказывается вовлеченным в насилие и убийства, попав в ловушку судьбы.

Вместо «анимации искусственного интеллекта», возможно, было бы более уместно описать «призрачную диету» как «анимацию, созданную с помощью инструментов искусственного интеллекта».

За генерацию изображений отвечает ИИ, а все остальное, включая сценарии, монтаж, озвучку, музыку, звуковые эффекты и т. д., — все делается вручную. Текст на картинке тоже был добавлен позже.

С точки зрения графики, Джим представляет собой «жанр, созданный исключительно искусственным интеллектом». «Призрачная диета» не имеет реальной визуализации и в основном опирается на изображения и видео. Изображения создаются Midjourney, а видео создаются. от Keling, Pika, Jimeng, PixVerse и Runway.

Вопрос о создании ИИ неясен, но использование ИИ для рассказа связных историй должно быть стабильным. С самого начала разработки персонажей Джим думал о том, как добиться единообразия персонажей.

При создании персонажей Джим придерживается двух принципов. Во-первых, общее изображение лаконичное, а внешний вид можно описать несколькими ключевыми словами. Во-вторых, в нем есть знаковые элементы. Даже если оно не полностью соответствует до и после, оно очень узнаваемо и зрители могут узнать его с первого взгляда.

Наиболее представительными из них являются Ван Гэ и Ли Цзяцзя. Ван Гэ лысый, в спортивной одежде и солнцезащитных очках выглядит как ретро-девушка из 1990-х годов, в красном платье и с волнистыми волосами.

На первый взгляд нежный мистер Чжу носит очки, костюм и не имеет бороды. Кажется, у него нет каких-либо черт, отличающихся от обычных людей. Это персонаж, которого Джим повторил больше всего.

Джим обнаружил, что ИИ может легко создавать персонажей с темпераментом «старых денег». ИИ трудно измерить индивидуальных предпринимателей, таких как г-н Чжу, которые богаты, но не элитны, опасны, но не гангстеры.

«Живое действие, но с анимационным фильтром», — так Джим описывает свой стиль анимации. Зрители могут представить, что было бы, если бы это играл реальный человек.

После того, как каждый персонаж будет определен с помощью метода рисования Винсента, будет создана окончательная фотография фильма с макияжем. Затем Джим использовал эти изображения в качестве материала для создания новых изображений, дополняя изображения и записывая подсказки. Ракурсы и сцены были другими, но персонажи остались прежними.

Когда изображений достаточно, пришло время создать видео. Видео с искусственным интеллектом обновляются быстро, и «Призрачная диета» использует версию с августа по сентябрь 2024 года.

Для технически сложных кадров Джим пробовал все доступные видеоинструменты. При этом каждый инструмент имеет и свои сильные стороны. Джимэн, Келинг и Пика составляют тройку лидеров по уровню использования.

В то время Цзи Мэн хорошо справлялся с некоторыми боевыми кадрами, Пика был хорош в съемках сцен и простой анимации разговоров, а Кэ Лин обладал сильными комплексными способностями. Большинство кадров были хороши, но при определенных обстоятельствах они могли быть излишними.

Однако многие кадры в «Диете призраков» по-прежнему сложно сделать даже с помощью современных инструментов. Предоставляя относительно естественные результаты, он неотделим от традиционных методов.

Например, для синхронизации губ, когда персонаж не находится полностью фронтально или это не снимок крупным планом, который легко распознать ИИ, а движения, выражения лица и камера все движутся, преподавателю дубляжа необходимо дублировать на основе синхронизации губ в видео. По мнению Джима, новые возможности не означают простоту использования. Старый метод «может быть, немного неуклюж, но он надежен».

нишевый, разнообразный

История «Призрачной диеты» разворачивается в юго-западном округе, и все персонажи говорят на сычуаньском диалекте с местным акцентом. Это эгоистическое намерение Джима. Стиль рисования «Диеты призраков» также очень уникален. Пользователи сети, посмотревшие его, сказали, что это похоже на определенный эпизод «Любви, смерти и роботов».

В своей игровой индустрии Джим видел слишком много однородного, проверенного контента.

Творение на основе ИИ можно персонализировать. Высококачественные работы по-прежнему требуют от крупных компаний вложения большого количества ресурсов, но Джим видит больше возможностей в создании «базовых работ».

Начиная играть в Midjourney, Джим ясно дал понять, что не хочет создавать «всеобщий» стиль. Он активно использует Midjourney и знает стиль, который может легко создать ИИ. В то же время это еще и его минные поля.

Его любимый стиль – с первого взгляда сложно определить, какой это жанр, в нем чувствуется ретро, ​​но это не совсем старомодная анимация. Короче говоря, она «одновременно знакомая и новая».

Для стиля рисования «Призрачной диеты» Джим использовал идеи режиссера анимации Масааки Юасы и художника манги Ёсихару Такусие.

Сначала он использовал функцию Describe Midjourney, чтобы понять ключевые слова их стиля, а затем продолжил писать подсказки и повторять итерации, пытаясь сгенерировать изображения, соответствующие требованиям.

Мировоззрение «Призрачной диеты» в основном основано на регионах и элементах, с которыми Джим знаком.

В 2019 году Джим посмотрел «Вечеринку на Южном вокзале» режиссера Дяо Инаня с Ху Гэ в главной роли и был глубоко шокирован: «У него очень приземленная обстановка, но эстетика и суть очень нуарные». Он осознал, что традиционные жанровые фильмы еще не доработаны и что все еще существует новая жизненная сила, основанная на местных повествованиях.

В 2021 году Джим начал писать сценарий, и сценарий по сути имел прототип «Диеты призраков», включая небольшой округ, отчаявшегося молодого человека и жизненную дилемму.

В 2023 году Джим начал использовать Midjourney для изучения концепт-арта ИИ.

Однако до 2024 года Джим никогда не думал о создании фильма об искусственном интеллекте. Он самостоятельно учился фотографии, сценариям и языку объективов, но на этом остановился. Видео использует линзы, чтобы рассказывать истории, но создавать собственные кадры он пока не умеет.

В начале 2024 года Джим использовал серию самых ранних видеороликов с искусственным интеллектом, таких как Пика. Он внезапно обнаружил, что может, наконец, управлять изображением, чтобы завершить действие, корректировать и изменять изображение, а также соединять изображения вместе, чтобы создать короткометражный фильм. . Желание творить стало сильнее, чем когда-либо.

Материал уже готов, а затем идет монтаж, звуковые эффекты, дубляж и озвучка. Джим все глубже и глубже погружается в традиционный процесс производства фильма. Он одновременно старался и учился и постепенно загрузил на Станцию ​​Б несколько стилизованных работ с выдающимися личными характеристиками.

Другой короткометражный фильм Джима с искусственным интеллектом «Hard Pop Gunner» отсылает к стилю старомодных американских комиксов и форме немого кино. Позже он выиграл творческий конкурс по поиску изображений с использованием искусственного интеллекта, организованный 1905 Movie Network, Bilibili и другими. платформы. Премия Тао за выдающиеся достижения.

ИИ пока не может разрушить статус-кво многих отраслей с тяжелыми активами, но для небольших команд и отдельных авторов стоимость создания стала приемлемой, а разнообразный контент имеет возможность быть увиденным аудиторией.

Джим сказал, что он несколько «намеренно» установил фон Сычуани и Чунцина для «Диеты призраков». Он доказал, что при создании нишевого контента вам больше не нужно слишком беспокоиться о традиционном слове «слишком рискованно».

Ограничено, также может быть уникальным

10-минутную «Диету призраков» нельзя считать длинным видео о Билибили. Но в кругу ИИ 10 минут — редкий срок, не говоря уже о том, что «Призрачная диета» рассказывает полную историю.

Чтобы завершить эти 10 минут, Джим почти довел себя и ИИ до предела.

Сцена в ресторане с горячими блюдами в «Диете призраков» стоила Джиму много размышлений. Каждый кадр был продуман, но конечный эффект составил лишь менее 40%.

Джим признал, что боевые сцены ИИ действительно были не очень хороши: удары не ощущались и не соответствовали логике физики. Это было похоже на удар в воздухе. С помощью ИИ сложно добиться не только боевых сцен, но и сцен с немного более крупными движениями, таких как ущемление шеи, метание молотков и ударов камнями.

По опыту Джима, если вам нужно спроектировать сцену действия для ИИ, не используйте холодное оружие, а используйте огнестрельное. По крайней мере, ИИ может стрелять. «Я хотел бы поблагодарить. старые гонконгские фильмы за то, что спасли меня».

Если настоящие актеры не умеют играть, они также могут использовать заменители, но яркая экспрессия – это основное мастерство актера. Однако это также слабое место ИИ: либо он использует слишком много силы, либо не проявляет никакого выражения.

В октябре 2024 года Runway запустила функцию Act-One, которая заставляет ИИ-персонажей изображать одинаковые выражения на основе видеороликов с выступлениями реальных людей. Джим считает, что это признак того, что если все больше и больше продуктов реализуют схожие функции, это означает, что у ИИ действительно есть узкое место в производительности.

Персонажи «Призрачной диеты» часто появляются крупными и поясными планами, скрывая еще одну слабость ИИ: многообъектные кадры. Когда Джим создавал кадры, он старался избегать кадров с участием нескольких человек, потому что еще не нашел хорошего решения.

Даже если вы просто генерируете картинки в Midjourney, при генерации более 2-х персонажей скорее всего будут проблемы с лицами. Если поместить это в AI-видео для взаимодействия, сцена станет еще более хаотичной.

Изображения, создаваемые ИИ, очень ограничены, поэтому на более позднем этапе Джим будет использовать крупные планы, символические снимки, быстрое редактирование и другие методы, чтобы компенсировать визуальные недостатки. Примером являются повторяющиеся изображения животных в «Диете призраков». .

Метафоры и символические приемы также широко используются в некоторых старомодных американских фильмах в стиле нуар. В 1940-х и 1950-х годах технологии были недостаточными, и такие правила, как Кодекс Хейса, ограничивали выражение изображений насилия. Ситуация в чем-то похожа на видео с искусственным интеллектом. 2024.

Отголоски спустя десятилетия заставили Джима найти этот метод очень интересным: «Может быть, это немного устаревший метод, но он очень хорошо работает, если использовать его в фильмах об искусственном интеллекте».

Но аудитория честна и будет давать такие комментарии, как «плавное объединение PPT» и «улучшенная динамическая анимация». Джим согласился с этим, поэтому решил создавать анимацию с использованием ИИ.

По сравнению со стилем живого действия с гладкой кожей и странными движениями анимация, по крайней мере, «не заставит зрителей думать: ух ты, эта твоя штука слишком фальшивая». Движения персонажей немного тусклые и скованные и более приемлемы в анимациях, не основанных на реальности.

Не гонитесь слепо за продолжительностью, а в первую очередь обеспечьте качество. В некоторой степени это связано с тем, что цель Джима — обычные фильмы. Он подписался на Independent Shorts Awards, конкурс, не связанный с искусственным интеллектом, чтобы заставить судей игнорировать ярлык искусственного интеллекта и сосредоточиться на самой истории.

Джим надеется, что при просмотре его работ зрители смогут осознать существование ИИ, но не для ИИ, и не проявлять толерантности в системе оценки фильмов с ИИ «Сообщество ИИ слишком дружелюбно. Очень неудобно. услышать несколько резких слов. «Это необходимо».

Продолжайте создавать и преодолевать тревогу

В новостях AI всегда пишут, что «небо меняется в одночасье». На создание короткометражного фильма ушло 3 месяца, а это уже большой срок.

ИИ совершенствуется с каждым днем. В 2023 году Джим еще сможет следить за ежедневной информацией ИИ, но с начала 2024 года уловить горячие точки уже будет невозможно. Он также может тревожиться, но не слепо, как многие люди.

Несмотря на то, что технологии сильны, людям еще предстоит проделать много работы. Что сложно и интересно в творчестве, так это то, что некоторые проблемы приходится решать самому творцу.

В «Вечеринке на Южном вокзале» была сцена перестрелки, которая очень сильно впечатлила Джима: все танцевали на площади, полицейские в штатском носили светящиеся туфли, преступники стреляли, а полицейские гонялись за ними, идя по светящимся кровь, а потом еще и стреляли.

Контраст между нервозностью и игривостью тронул Джима. Без этой сцены, когда все думают о кадрили, их первая реакция была бы «безвкусной».

Он считает, что во многих случаях знакомые публике элементы не устарели, но не имеют глубокой проработки создателями.

Напротив, вещи, которые были тщательно выражены старыми инструментами, не могут быть устранены новыми технологиями.

Видео с искусственным интеллектом были обновлены во многих версиях, но Джим не намерен переделывать предыдущие короткометражки с искусственным интеллектом.

Дизайн и компромиссы всего короткометражного фильма основывались на ограничениях искусственного интеллекта того времени и были автономными. Оглядываясь назад, спустя несколько лет, я вижу, что все еще есть интересные аспекты, в которых заключается ценность работы.

ИИ может помочь Джиму провести больше подобных экспериментов и переосмыслить некоторые интересные вещи. Он не любит, чтобы ИИ напрямую сообщал ему ответ. Ему нравится решать проблемы самостоятельно и использовать ИИ как инструмент, похожий на калькулятор.

Вместо того, чтобы использовать ИИ для создания рекламных роликов и видеороликов, Джим по-прежнему хочет использовать ИИ для рассказывания историй, «по его мнению, основной целью создания фильмов является акцент на повествовании».

Несколько лет назад, когда Джим научился писать сценарии, он помимо чтения книг также настаивал на том, чтобы практиковаться, писать сценарии и писать их полностью: «Если ты не закончишь это, это не будет означать. много."

При этом он смотрит много фильмов, постоянно просматривает новые фильмы, разбирает интересные сцены, а также смотрит чужие пояснения и рисунки. Он говорил, что у него «нет прочной основы», но она у него есть относительно. высокая чувствительность к изображениям. Он хорошо соединяет схожие объекты и умеет использовать язык линз, чтобы точно передать эмоции и чувства.

Сейчас Джим берет перерыв, планирует поделиться некоторыми творениями ИИ, готовить следующий проект ИИ и посещать занятия, чтобы следить за последним статусом каждого видеоинструмента ИИ. По его мнению, независимо от того, сколько инструментов искусственного интеллекта существует, ресурсы, которые каждый может инвестировать, равны и не могут быть упущены. Количество не имеет значения, важнее найти тот путь, который подходит именно вам.

В комментариях на станции Джима B пользователь сети так описал свои впечатления от просмотра: «Бездушный инструмент, душевное творение». Он ответил: «Это предложение слишком весомое».

Лучший способ борьбы с тревогой – это творить. В будущем Джим не хочет предполагать, что еще сможет сделать ИИ и кого он заменит. Он предпочитает верить, что постоянное рождение новых произведений в собственных руках является сильным барьером для человека.

# Добро пожаловать на официальную общедоступную учетную запись WeChat Aifaner: Aifaner (идентификатор WeChat: ifanr). Более интересный контент будет предоставлен вам как можно скорее.

Ай Фанер | Исходная ссылка · Посмотреть комментарии · Sina Weibo