Я СНЯЛСЯ В ТРЕТЬЕМ ТРЕЙЛЕРЕ НАШЕГО ПРОЕКТА ПРО БЕЗУСЛОВНЫЙ БАЗОВЫЙ ДОХОД

вот смотрите, третий — финальный перед выпуском — трейлак нашего AR-долгостроя про ББД. самый важный, самый мощный и самый красивый. собран в юнити. кто ещё делает контент к театральным/перформативным проектам в юнити? ну никто. он поразительный не ток поэтому, там внутри рассказывается отчасти, как он сделан, но я тут подробнее напишу про один охуительный аспект.

вот мы видим робота, он уже был в первом трейлере — можно думать про него как символ грядущей автоматизации, которая делает ББД необходимым, но на самом деле просто дефолтный персонаж юнити, оч мне нравится. вот он анимирован. как анимируют 3D-персонажей? либо руками через ключевые кадры, либо берут готовые секвенции с Mixamo или откуда-то ещё, либо, если задача сложная, делают motion capture. вот Лёня Именных записал трек, где он под арфу (!) напевает три предложения из первой главы «капитала» (!!). звучит охуительно. и мне под этот звук надо анимировать персонажа, чтобы он хотя бы уместно махал руками. найти готовую секвенцию невозможно. анимировать руками такое — заебёшься. я начал смотреть в сторону мокапа.

как обычно делают 3D-мокап? покупают smartsuit от rokoko за $2.5к, или любой другой костюм с сенсорами; либо приходят в студию, обвешанную камерами по кругу. либо совсем бюджетный варик — купить kinect, заебаться, подключая его к маку и настраивая. есть конечно решения на основе CV, когда нейронка распознаёт движение в предзаписанном видео, но их полторы штуки и за бешеные деньги. а вот мне надо просто сделать анимацию на две минуты и не хочется делать ничего из вышеперечисленного. у меня в распоряжении только айфон 11про и айпад с лидаром. что я делаю?

я делаю рисёрч. и обнаруживаю, что есть бесплатный плагин для cinema 4d — moves by maxon, который вышел полгода назад, который загрузило три калеки. он работает на основе ARKit — фреймворка дополненной реальности от Apple (он — часть AR Foundation, на котором работает наше приложение целиком). в этот фреймворк в прошлой версии добавили технологию human segmentation — когда компьютерное зрение при помощи true depth камеры может отделять тело человека в движении от бэкграунда. а если может отделять, значит может и фиксировать его движение. и вот это приложение в рантайме (!!) делает полный body capture тупо на айфоне.

охуительно!

ну так и что: я поставил айфон на стаб, включил лёнин трек и две минуты двигался как мне надо! всё. потом было много еботни с переносом raw-даты движения на готовую модель в c4d, в которой я никогда не работал. а потом мне пришлось почистить анимацию буквально по ключевым кадрам, что тоже особенный пиздец. но блин, это работает как раз-два. и вот теперь это часть вот этого прекрасного трейлера.

как и сам наш проект целиком, этот видос не мог появиться ещё полгода назад вот так, как он сейчас сделан. я не могу описать, какое удовольствие я испытываю от того, что мы собираем публичный проект с замахом на аудиторию почти полностью на экспериментальном стеке. это прямо захватывающе. как и написано в трейлере, это имеет прямое отношение к базовому доходу. его противники говорят, что это безумный эксперимент, утопия, непроверенная идея. мне кажца очевидным, что если не вооружаться проактивный принципом, радикальным воображением и не практиковать экспериментальные идеи, то мы так и будем жить в мире, где целыми государствами могут управлять колхозные ебанаты с мозгами уровня глистов.

поделитесь этим видео! здесь говорят правду!!

нормально так https://about.fb.com/realitylabs/projectaria/

напишу и в этом канале про мою десятидневную лабораторию перформанса и современного танца на бывшем подшипниковом заводе, которая начинается послезавтра в краснодаре. ещё есть шанс вскочить в последний вагон, билеты стоят копейки. тут детали — https://www.tgoop.com/apollonia/3565

пока у меня получается по 1-2 лаборатории в год, так что редчайшее и всегда потрясающее событие, такие извините ворота в неизведанное. иногородним скидка на хостел. вообще будет очень хорошо.

хорошая новость, чтобы начать потихоньку снимать с холда этот канал: позавчера прошла ежегодная большая конференция Adobe MAX, и среди прочего они 1) анонсировали вторую версию aero для iOS; 2) выпустили в публичную бетку aero для десктопов. и вот вторая новость конечно самая крутая, я как юзер закрытой беты с марта оч рекомендую; скачать можно тут.

что это такое коротко: настольный 3d-редактор экспириенсов в дополненной реальности. с ним гораздо удобнее собрать сцену с моделями на компе, отправить в мобильный aero и дальше кидать её в какой угодно локации и вообще делать что нужно (а во второй версии для мобилок анонсировали возможность наконец-то паблишинга: делаете баркод, по которому любой человек может посмотреть вашу сцену в любой локации и шэрите его).

ПЕРВЫЙ ЛЕТСПЛЕЙ НАШЕГО ПРОЕКТА ПРО ББД

SITTING IN A ROOM. I AM. — наш долгострой, который сейчас будет релизиться, — это вообще иммерсивный сториттелинг, то есть большую часть времени там рассказывается история на базе документальных свидетельств и рисёрча. Но из 15 сцен одна — игровая. После прекрасных трейлеров, я выкладываю первое летсплей-видео этой игровой сцены (видео с айпада: да, у нас есть и версия для планшетов 😎). Она простенькая и без привычных бонусных игровых механик, но красивая и самое главное изъёбисто сделана. Сам геймплей построен на сюжете, о котором рассказывается в перформансе, не буду спойлерить, пока просто посмотрите, как это работает. Техника игры основана на распознавании жестов руки перед камерой. Рекогнишн работает на основе tensorflow, чтобы поддерживать и android, и ios, даже самые слабенькие. В рамках игры ML чекает два жеста — приветственный и неприветственный. Каждый из них запускает цепочку анимационных таймлайнов. Внутри — скрипты с математическими расчётами расстояния мента от героини и разного другого. Конечно, это скорее шоукейс, но очень весёлый. Сцена появилась чисто из нашего желания а) включить в проект игровые механики; б) поработать с компьютерным зрением и распознаванием жестов. Видели где-то ещё в театральных/перформативных проектах такое? Отправьте мне факс 🙂

а пока ждёте релиз, можете пройти мой курс дополненной реальности — 21 видеоурок + куча ссылок и приложений — и всё в одном телеграм-боте.

мощно — https://pikabu.ru/story/kulturnyiy_raspil_kak_myi_stolknulis_s_korruptsiey_v_goszakupkakh_minkulturyi_i_ne_tolko_myi_7850734

из книжки про диджитал арт узнал про художника майкла риса, ещё один пример в копилочку того, как музейные проекты используют AR (из текущей перспективы так себе, но в целом интересно).

и в подкасте dialogues вышел выпуск с художником KAWS, рассказывает о том, как работает с дополненной реальностью на примере коллаба с приложением ACUTE ART. вообще этот апп какой-то странный, сначала они пытались in-app продавать копии AR-работ за какие-то совсем блядские деньги, потом сделали всё бесплатным и теперь катаются с выставками, вот на прошлой неделе очередная открылась в пекине. вообще скачайте приложение, там внутри две мощные работы нины шанель эбни и марко брамбилла, я их в пятницу показывал на большом AR-воркшопе в перми, остальное такое себе.

Ольга Милованова работала в команде Microsoft HoloLens, а недавно устроилась в Facebook Oculus. Это — две главные команды в области виртуальной и дополненной реальности — VR и AR.

Как работает VR? Что в нем есть кроме игр? Как устроены очки и контроллеры? Почему нас в них тошнит и как это исправить? Почему разработать VR-игру сложнее, чем обычный шутер и как начать заниматься виртуальной реальностью — всё в этом эпизоде.

Слушайте и подписывайтесь: Apple, Google, Castbox, Яндекс, Spotify, Overcast, ютуб и веб-версия.

сегодня начинается Lens Fest от снэпчата, продлится до 10-го числа. зарегаться тут. не могу сказать, что суперинтересно, но тем кто работает прицельно с lens studio мне кажца будет полезно.

я прямо сейчас веду две группы в лаборатории цифрового перформанса, поэтому сил ничего писать особо нет, даж не знал как сюда про это сказать, скажу как есть — мы вчера выпустили такой перформанс в дополненной реальности, каких никто никогда не делал.

ios | android

спасибо интернет

#sundance21
четвёртый день идёт фестиваль независимого кино и смежных штук sundance. в этом году они для онлайн-программы сделали универсальный тикет за $25 и XR-платформу для типа экспериментальных проектов — new frontier. сделаю серию постов о том, что посмотрел/прошёл.

пока про сам спейс. на видео всё подробно можно рассмотреть, в спейсе 4 пространства, одно личное и три общественных, одно из которых открывается только во время лайв-ивентов. в эту платформу можно зайти и с десктопа/мобилки, походить там. главное пространство — галерея. она разделена на четыре зоны — AR, VR, MR и WebXR/Computer experience, всего 15-16 проектов. каким-то чудом в углу дополненной реальности у них размещено сферическое видео (отличное, ниже расскажу), а в mixed reality зачем-то разместили чисто VR-мультик (кринжовый). для 3д в вебе всё работает оч гладко, но в гарнитуре (я пасусь через oculus quest 2) навигация так себе, только телепорт, который может отправлять или на метр вперед или сразу метров на 20; при переходах в общие зоны автоматически оказываешься в чат-кружочке, если у кого-то идёт беседа; это неловко и все на тебя поворачиваются. вообще social-смысл платформы оч сомнительный, сколько я не заходил, там всегда оч мало людей (но может часовой пояс конечно).

большинство проектов из new frontier хостятся на своих отдельных платформах, поэтому из галереи тебя всё время куда-то перебрасывает. все VR-опыты приходится загружать (суперстрёмное решение: ты в окулусе тыкаешь go to experience и тебя выкидывает из XR, открывается вкладка дропбокса и начинается загрузка 4.5гб архива с exe-файлом для винды 🤯). где-то нужно регистрироваться и вводить заново все те данные, которые ты вводил покупая тикет на сандэнс. если проекты показывают в рамках феста, почему так трудно засинхронить хотя бы идентификацию — хз. на один VR-проект от baobab вообще нужно регаться целиком, подтверждать ссылку через мейл и потом ещё раз чекать письмо с кодом и уже потом возвращаться в гарнитуру. в общем от платформы ощущение lack of integrity, жанры перемешаны, про юзер-флоу внутри самой платформы придумано нормально, но вообще неадекватно относительно проектов в расписании. дальше буду рассказывать про проекты, которые смотрел.

#sundance21
первым делом посмотрел фильм 4 Feet High. это сферическое видео, идёт 36 минут. проект уже показывали на венецианской биеннале; в рамках сандэнса он существует в виде 360° видео и ещё полуторачасового 2D-фильма. последний я не успел посмотреть. сферическое видео начал, думал что брошу, но минуте на пятой прям затянуло. вот трейлер и вот сайт проекта.

фильм так просто и натурально сделан, что я сначала не понял, что это фикшн. ну как минимум главная героиня — действительно пользовательница инвалидного кресла, неходячая; все ведут себя оч естественно, хотя герои прям молоденькие, и сюжет незамысловатый, как будто док. история в том, что вот эта 17-летняя девушка хочет исследовать свою сексуальность, но у неё естественно препятствие в виде инвалидности. параллельно с этим в её классе активисты разворачивают борьбу за уроки сексуального образования в школе.

это бы осталось такой подростковой драмедией, если бы не откровенный тейк в сексуальность; например вполне фронтально показывают сцену секса главной героини с парнем, который её заносит в микроавтобус, отцепляя деликатно все её ремни. а в самом конце они с одноклассниками оккупируют школу на ночь и в актовом зале, все раздетые до трусов предоргиастически ласкаются, тут даже я бровь поднял. я не в теме инклюзивного кино и вообще контента, не могу сказать — прорыв это с точки зрения репрезентации disability+sexuality или нет, но мне смотрелось вполне как прорыв. что особо ценно — это картины поддерживающего и понимающего женского общества в этом фильме, вот от этого прям мощное ощущение.

внутри фильма рисованные от руки визуальные эффекты, на протяжении всего времени не дают заскучать за реалистичной картинкой. + английские субтитры прямо внутри пространства видео. не знаю есть ли 2д-версия фильма на стримингах, но если наткнетесь, посмотрите обязательно, прям круто.