Из говна, палок и труда студентов: как делали дополненную реальность для Евроигр

Помните, на открытии II Европейских игр в центре стадиона “Динамо” вдруг появилось огромное гнездо, вокруг которого кружились аисты? Оказалось, эту часть шоу буквально “из говна и палок” делали студенты из Санкт-Петербурга, это был их первый крупный проект. О том, как это было, в подкасте MIXR Talks, рассказал сотрудник Национального центра когнитивных разработок питерского университета ИТМО Андрей Карсаков.

“Ну я в голове покрутил — вроде можем”

Тендер на открытие и закрытие II Европейских игр выиграла российская компания “АРТ Сити-5”. Постановкой шоу с российской стороны занимался режиссёр Алексей Сеченов. 

“Команда Sechenov.com обеспечила полное сценарное, техническое и музыкальное сопровождение Церемонии открытия, а также производство графического и видеоконтента, — сказано на сайте Sechenov.com. — Специально к церемонии было разработано приложение дополненной реальности Opening Ceremony AR Experience, позволившее максимально вовлечь зрителей в действие”.

Как же получилось, что разработку дополненной реальности для II Европейских игр отдали в руки студентов ИТМО? Андрей Карсаков рассказывает, что с сотрудниками Sechenov.com он познакомился случайно: на Science Fest в Санкт-Петербурге. Было это так: 

“Ребята шоукейсили [показывали. — Еврорадио] наш VR-проект. Наши студенты делали курсовик, выставлялись в зоне нашего университета. В какой-то момент подошли ребята — как выяснилось потом, технический директор Sechenov.com и, по-моему, исполнительный продюсер. Подошли, посмотрели на всё это дело. И говорят: “Вы в виртуальную реальность умеете? В дополненную реальность умеете?” Да, что там особо? Ничего особо сложного нет. Они говорят: “Нам необычное надо, нам для телика”. Ну я в голове покрутил — вроде можем”.

Science Fest 2018 прошёл 22–23 сентября. Интересно, что тендер на организацию и проведение церемоний открытия и закрытия II Европейских игр к тому времени ещё не был завершён. Что не мешало исполнительному продюсеру “АРТ Сити-5” Евгению Тимащуку (кстати, в компании Sechenov.com он также фигурирует как исполнительный продюсер) присматриваться к потенциальным исполнителям. В итоге контракт действительно достался “АРТ Сити-5”, его сумма составила 25,1 млн белорусских рублей.

Вилка ограничений

Перед командой Андрея Карсакова стояли две непростые задачи. Во-первых, обеспечить спецэффектами прямой эфир с церемонии открытия. Сложность в том, что разработчики хоть и знают заранее расположение камер — не представляют себе, как они будут двигаться во время шоу и какие планы будет брать оператор.

“Это зачастую очень дорого [такой вид услуг. — Еврорадио]. По стоимости как мост чугуниевый или крыло “Боинга”. Для тех, кто может это себе реально позволить, — говорит Карсаков. — Но у нас была задача попробовать это сделать... назовём это достаточно бюджетными средствами”.

“Из говна, палок и опенсорса?” — уточняет ведущий подкаста.

“Из говна, палок и труда студентов”, — смеётся в ответ Карсаков. Предложенные его команде условия он называет “вилкой ограничений по техническим возможностям”:

“Всё это работает на специфическом “железе”. Это, например, NVIDIA Quadro [линейка видеокарт для создания визуального контента. — Еврорадио], которая стоит как первоначальный взнос в ипотеку. Различные карточки видеозахвата, которые стоят от 250 до 300 тысяч российских рублей за штуку [$4000 — 4800. — Еврорадио], которых может понадобиться и парочка. И много всего ещё: ценник начинает возрастать за рабочее место просто космический. Но у нас было ограничение “сверху”: “Вот у вас, ребята, есть карточки Black Magic, которые стоят 50 тысяч [российских рублей, то есть $800. — Еврорадио], они, в принципе, такую функцию выполняют. Вот на них это нужно всё “завести”, — рассказывает Карсаков.

Shazam для стадиона

Во-вторых, нужно было интегрировать дополненную реальность в шоу на стадионе, не перегрузив при этом сотовые сети. Для этого было разработано автономное приложение.

“Когда у тебя стадион на 20 тысяч человек, возникают трудности. Нас сразу предупредили: “Ребята, на мобильную связь, то есть на внешний интернет, не рассчитывайте. Ищите варианты, как вы будете синхронизироваться оффлайн”. Были дурные идеи раскидать wi-fi-точки по всему стадиону, чтобы люди подключались по локальной сети. Но потом [мы] поняли: чтобы развернуть такую инфраструктуру, понадобятся большие траты”.

Сделать приложение полностью автономным помогли разработчики из Ижевска. Синхронизация с действием на сцене происходила по микрофону смартфона. Треки церемоний были “прописаны” в мобильном приложении: программа распознавала музыку и включала на экран нужный эпизод с эффектами дополненной реальности.

“На костылях”, но всё заработало, признаётся Карсаков. Результаты работы в Минске он оценивает как хорошие: “Прошло не идеально. Возможно, не так, как нам бы хотелось. Мы поняли, где были наши “косяки” и “факапы”. 

Церемонии открытия и закрытия II Европейских игр стали полигоном для похожего мероприятия в Казани. В августе 2019 года там прошёл чемпионат WorldSkills. Во время церемонии открытия команда Карсакова также использовала технологию дополненной реальности. Получилось “практически идеально”: “Делали по тем же самым рельсам, но уже в полную мощь”.

II Европейские игры проходили в Минске с 21 по 30 июня. Они обошлись в 540 миллионов рублей ($265 млн) — такую сумму после мероприятия озвучил министр финансов Максим Ермолович. 266 миллионов были позаимствованы из бюджета Беларуси, остальное — спонсорская помощь, кредиты Банка развития и средства от продажи билетов.
 

Чтобы следить за главными новостями, подпишитесь на канал Еврорадио в Telegram.

Мы ежедневно публикуем видео о жизни в Беларуси на Youtube-канале. Подписаться можно здесь.