😉 Интерактивная проекция на льду — как в таких условиях работает оптический трекинг мультимедиа.

Хорошим тоном в современных мультимедиа-решениях является интерактив. И без интерактивной проекции мы бы не могли назвать свой каток "по-настоящему мультимедийным".

Многие пробовали, и многие отказывались делать трекинг мультимедиа для проекции на общественных катках. Почему?

▶️ раздавать всем датчики трекинга слишком накладно и ненадежно;
▶️ привычные многим инфракрасные камеры глубины на льду не работают, т.к. ИК-свет отражается ото льда и всё портит «ложными срабатываниями»;
▶️ «системы прерывания» и другие триггеры не дадут эффекта управления контентом.

Вот тут наше кредо #пионерыневозможного и выходит на первый план, и мы находим отличное решение.

В качестве камер глубины для определения положения людей на льду мы использовали стереокамеры ZED, которые работают по принципу человеческих глаз, определяя положение объектов путём сравнения изображений с правой и левой камер.

В итоге, используя ряд камер, обозревающих «площадь интерактива», в режиме реального времени мы получаем черно-белую видео-маску, где белым отмечено: «на льду что-то есть». Эти данные стали источником переменных в TouchDesigner, где для интерактива мы создали 23 сценария (патча), по итогу оставив 6, которые лучше всего подошли.

"Мне больше всего нравится достаточно простенький, но все равно классный сценарий: имитация кругов и волн на воде, как будто катаются по водной глади."

- Генриетта, инженер-разработчик Smartlight.

Из приятного: ограничений на количество участников интерактива в таких условиях нет, и сколько бы человек ни появилось в зоне 128 м², каждый вносит свой генеративный вклад.

Не обошлось без неожиданностей:

▶️ все камеры, оказалось, невозможно завести на один сервер. Каждая соединялась сперва со своим сервером, и уже потом всё результировалось в TouchDesigner;
▶️ камеры, как и человеческий глаз, плохо видят в темноте. Пришлось, несмотря на видео-проекцию, заливать пространство светом, хоть и на несколько процентов от мощности световых приборов;
▶️ особо крупные снежные хлопья и человеческие глаза приводят в замешательство, вот и камеры при таком снегопаде спотыкаются с трекингом;
▶️ камер в России нет, и их доставка на Алтай превратилась в настоящее шпионское приключение.

⚡️У нас всё получилось. Приезжайте посмотреть, протестировать трекинг и насладиться алтайским гостеприимством на курорте Манжерок. Каток будет работать до конца зимнего сезона.

А мы продолжим делиться отснятыми материалами и интересными историями с места событий по тегу #медиакаток@smartlightpro.

#кейс@smartlightpro