Почему AR-сервисы плохо работают на смартфонах

Эксперименты с телефонами выявили основные ошибки, которые возникают при работе с AR-приложениями. Рассказываем, какие преграды «ломают» дополненную реальность на смартфонах.

Приложения с опциями дополненной реальности можно установить на многие современные телефоны. Подобные сервисы помогают увидеть, как будет выглядеть новая мебель в доме до ее покупки. Еще AR-функции нужны, чтобы лучше ориентироваться в картах или играть в интерактивные игры. Ученые из Университета Осаки выяснили, в каких ситуациях подобные приложения могут работать нестабильно, пишет Tech Xplore. 

Ученые провели серию экспериментов со смартфонами и определили основные проблемы, которые возникают при использовании приложений с дополненной реальностью на мобильных устройствах. Шунпей Ямагучи, ведущий автор исследования, объясняет: «Чтобы дополнить реальность, смартфону нужно знать две вещи. А именно, где он находится, что называется локализацией, и как он движется, что называется отслеживанием».

Смартфон использует две основные системы для работы с дополненной реальностью: визуальные датчики (камеру и LiDAR) для поиска ориентиров, таких как QR-коды или AprilTags в окружающей среде, и инерциальный измерительный блок (IMU) — небольшой датчик внутри телефона, который измеряет движение.

Чтобы лучше разобраться в особенностях работы систем, группа ученых провела 113 часов экспериментов и тематических исследований. В ходе тестов, в которых нужно было расставить определенные предметы в режиме дополненной реальности, они отключали часть датчиков смартфонов, а также изменяли особенности среды и освещения.