Telegram Web
This media is not supported in your browser
VIEW IN TELEGRAM
Таким будет виртуальное шоу-производство?

До телека пока долго, а вот на ютубчик вполне себе. Главное же концепция и идея. Думаю уже в следующем году уровень стилизации примитивов качественно вырастит. И с липсинком (движение губ), точно, что-то уже решится — видел разработки от Алибабы
АЙ клип полностью на нейронках — Kenan Belzner & BAЯAZER - The City

Срежиссировал его талантливый и креативный David Tamayo из Франции

Сложная, последовательная работа, исключительно через промптинг. Очень нравится.

Вижу тут такие ИИ инструменты:
анимация AnimationDiff, липсинк Wav2lip

#вдохновение
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
То, чего мне не хватало в эйай моушене

В Runway Gen 2 тестируется мульти контроль движения
То есть в рамках одной генерации можно поднять руку, отвести взгляд и улыбнуться, например

Кайф!
This media is not supported in your browser
VIEW IN TELEGRAM
Что эти нейросети себе позволяют вообще?!

Что, если манипулировать объектами в изображении можно было бы мышкой?
А что, если это лучший способ раскадровки для ИИ кино?
А что, если ручное движение можно было записывать и получать шот видео с нужным движением?

Бета-тест tldraw+llm
Музыка musiclm by google
This media is not supported in your browser
VIEW IN TELEGRAM
Начало — это один из моих фаворитов у Кристофера Нолана

И теперь мы можем воссоздать с помощью эйай одну из эффектных сцен из этого фильма

Вау!

Runway / Multi Motion Brush
This media is not supported in your browser
VIEW IN TELEGRAM
Способ создавать кадры для видео созданного с помощью ИИ, где будут специфические движения камеры, например, когда нужно передать вид из глаз и движение головы в разные стороны

В Midjourney пишем промпт:
equirectangular photo [of a restaurant room with different people seated] --ar 2:1 --tile --style raw --stylize 50 --v 6.0

Тут обязателен параметр --tile и указание в промпте "equirectangular photo"

Дальше, очень желательно сделать апскейл, сначала встроенный в midjourney, а потом увеличить разрешение до 6-8x и проявить детали апскейлером, который догенерирует и проявит мелкие детали на изображении (kreaai или magnific)

И чтобы просмотреть панораму идем в любой плеер:
https://renderstuff.com/tools/360-panorama-web-viewer/
https://www.blockadelabs.com/

Конечно, круто было бы панорому в видеоформате просматривать, где уже есть моушен от нейросети, а пока чисто монтажем можно закрывать задачу, то есть сначала сделать моушен на нужной части и во время движения подставить кадр с моушеном
Добавление реалистичного движения на разных уровнях глубины в изображении

Нужно сделать так, чтобы объекты, расположенные ближе к камере, двигались быстрее, чем объекты, находящиеся на расстоянии. Чтобы определить, что ближе, что дальше поможет карта глубины изображения

С помощью Motion Brush в Runway и выбора разных кистей я настроил разным объектам различное движение: машине — свое движение на отдаление, а объектам, которые должны просто двигаться в зависимости от их расположения, — различное движение

В комментариях скрины с настройками
Please open Telegram to view this post
VIEW IN TELEGRAM
В Дубае подходит к концу движуха по эйай фильммейкингу AIFF, которая вся прошла мимо меня. Это был полугодовой фестиваль с разными выступлениями, сессиями, в том числе и конкурс фильмов созданных с помощью ИИ

Я собрал 10 работ финалистов, сделал дубляж на русский с помощью Elevenlabs (оригиналы на английском будут в комментариях). Когда создавались эти работы, многих возможностей у инструментов с ИИ еще не было — не было высококачественного midjourney v6 и супер апскейлера и детализатора magnific, не было гибкого управления моушеном в Runway, не было улучшенной Pika

Если посмотреть все 10 работ, можно понять в целом, какой уровень повествования сейчас создается с помощью ИИ, какие жанры выбирают создататели, чему отдают предпочтение жюри и тд. Мое мнение не меняется — очень важна идея, форма вторична

В составе жюри креативные и арт деректора разных междунарожных компаний из разных сфер

Сейчас идет голосование за приз зрительских симпатий, до 9 февраля можно голосовать — https://aifilmfest.ae/#vote

А вот ближайшие важные конкурсы в эйай фильммейкинге, оба от Runway, оба с хорошими призовыми:
https://gen48.runwayml.com (будет проходить 3-5 февраля, условия озвучат 3 февраля)
https://aiff.runwayml.com (уже можно сдавать работы, до конца сдачи - 37 дней)
2025/06/29 13:03:18
Back to Top
HTML Embed Code: