Українці створюють бюджетну альтернативу волюметричному відео

В Україні розробляють ALTstage — технологію використання доповненої реальності разом з живими подіями або відеоконтентом. Вона має потенціал стати масовою, адже пропонує нові та дешевші способи створення волюметричного відео.

В основі — два принципи. По-перше, в ALTstage використовують спеціальні камери, обладнані датчиками глибини. Кілька таких приладів замінюють собою десятки камер, необхідних сьогодні для запису волюметричного відео. По-друге, у проєкті використовується технологія Depthkit для обробки відео — завдяки спеціальним алгоритмам вдається значно зменшити розмір даних, які передаються на смартфон.

Волюметричне відео — це техніка створення тривимірного зображення об’єкту, наприклад, актора у кіно. Сьогодні для цього потрібні великі студії з дуже дорогим обладнанням. Зазвичай волюметричне відео дає повну просторову свободу при роботі з об’єктами — їх можна роздивитися з будь-якого кута. ALTstage на початковому етапі дозволяє оглядати предмети з кута 20-30 градусів. Цього вже достатньо для створення у глядача відчуття тривимірності. Але кінцева мета розробників — відтворювати об’єкти, які можна роздивлятися з будь-якого кута, яким можна буквально зазирнути за спину.

Одночасна зйомка кількома Azure Kinect утворить відео, яке можна дивитись з будь-якого кута

Волюметрична відеозйомка перформансу Ірини Башук

Друга проблема — об’єм даних. Для передачі волюметричного відео на смартфон потрібні, як мінімум, пропускна здатність 5G та потужний процесор. За допомогою алгоритмів Depthkit потік даних стискається так, що його можна передавати у стандарті 4G (LTE).

Сфера використання технології ALTstage — дуже широка: культура, мистецтво, освіта, бізнес, мода. Це можуть бути танцювальні перформанси, вистави, презентації, лекції тощо. Мобільний застосунок та сайт, де можна буде дивитися відеоконтент з доповненою реальністю разом утворюють «Платформу ALTstage». Презентують ще небачену технологію наприкінці травня у Києві, а згодом — у Харкові та Дніпрі. Розробкою проєкту займаються митці — українська Платформа сучасного танцю та німецький Post Theater — спільно з IT-компанією WeAR Studio. Проєкт реалізується за підтримки Дому Європи (програма Європейського Союзу) та Українського культурного фонду (УКФ). Тому першими цей інструмент випробують танцівники.

Менторка ALTstage Марія Пяткова і хореограф Ярослав Кайнар

«ALTstage — це технологія, що дозволяє перетворити будь-який стіл з ноутбуком чи планшетом на ваш персональний театр», — говорить Макс Шумахер, автор ідеї, режисер та драматург Post Theater.

Технологія, за задумом розробників, працюватиме наживо і вдома. Наприклад, у театрі частину вистави можна буде подивитися у доповненій реальності прямо на сцені через смартфон. Застосунок повідомить глядача, коли до живих артистів доєднаються танцівники або актори на екрані мобільного пристрою. Вдома для перегляду знадобиться будь-який пристрій з екраном, а додаткові елементи можна побачити через той же смартфон — все виглядатиме так, ніби люди виходять з екрану й з’являються буквально на столі.

«Головна проблема у „важкості“ такої технології для мобільних пристроїв. Це простіше з намальованими 3D-моделями, які є просто кодом у смартфоні — застосунок просто малює динозавра у вас у кімнаті, немовби накладає фільтр на фото. Ми ж хочемо, щоб на екрані було відео реальних людей та предметів. Уявіть, що під час відеопрезентації з екрану на стіл виїзжає автівка, і виникає ілюзія, що вона є прямо тут, у приміщенні. А це потребує дуже великих потужностей від смартфону. Схоже на завдання встановити двигун від океанського лайнера під капот „Ланосу“. Наші програмісти знайшли можливість це зробити» — пояснює Ярослав Муха, маркетинг-спеціаліст з компанії WeAR Studio.

«Сучасний танець постійно у пошуках нових засобів творчого вираження — від застосування законів фізики й людської анатомії до використання простору й технологій. Доповнена реальність, де глядач отримує ілюзію присутності об’єктів, яких тут немає, може надати новий вимір для мистецтва танцю», — вважає креативний продюсер ALTstage, хореограф, співзасновник та президент «Платформи сучасного танцю» Антон Овчінніков.

«Втім, для нас цей проєкт — не тільки розробка нового творчого інструменту, але й можливість розширити аудиторію, привернути до сучасного танцю увагу тих, хто захоплюється цифровими технологіями», — додає менеджер проєкту Олександр Маншилін.

Менеджер проекту ALTstage Олександр Маншилін, хореограф і танцівник Ярослав Кайнар

Спеціально для ALTstage розробляється сайт, на якому можна буде все це поєднати та викладати й дивитися відео з доповненою реальністю. Спочатку, в якості експерименту, буде створено кілька невеликих вистав сучасного танцю.

«Ви просто завантажуєте застосунок перед початком перегляду в театрі, лекторії, або вдома, зчитуєте QR-код і ваш смартфон буде синхронізований з подією. В потрібний момент він підкаже: «Подивись-но на сцену через екран, там буде щось цікаве», — пояснює Святослав Криворучко, менеджер проекту з компанії WeAR Studio.

Фінальною метою команда ALTstage бачить створення загальнодоступної платформи. Дивитися зможе будь-хто, якщо має достатньо потужний смартфон (iPhone 7 або новіший чи смартфон на Android 8.0 або новіший з підтримкою ARCore). А ось для створення відео доповненої реальності буде потрібна студія волюметричного відеозапису з камерами Azure Kinect. Сьогодні таких студій в Україні немає — її створюють спеціально для ALTstage.

Зараз, завдяки УКФ та House of Europe, в інфраструктуру проєкту вкладають кошти платників податків з України та ЄС. Наступний крок у його розвитку — монетизація платформи, адже комерційний потенціал тут є очевидним, вважають розробники. Зароблені кошти буде реінвестовано: «Ми хочемо, щоб технологія стала доступною для українських мистецьких проєктів», — наголошують в ALTstage.