Инженеры Университета Нортвестерн разработали новую систему захвата движений всего тела под названием MobilePoser. В отличие от современных устройств, эта система не требует специализированных помещений, дорогостоящего оборудования, громоздких камер или дополнительных сенсоров. Это достижение делает захват движений доступным и повсеместным, так как приложение для смартфона MobilePoser использует встроенные сенсоры в мобильных устройствах, таких как смартфоны, смарт-часы и беспроводные наушники.
"Убирая необходимость в внешней инфраструктуре или специализированном оборудовании, MobilePoser делает захват движений по-настоящему повсеместным и доступным", объяснил Карен Ахуджа, профессор компьютерных наук в Университете Нортвестерн и руководитель исследования.
Для достижения захвата движений команда Ахуджи использовала инерциальные измерительные устройства (IMU), система, уже присутствующая в устройствах, таких как смартфоны, но ее точности было недостаточно для точных приложений. Чтобы улучшить ее работу, они добавили разработанный на заказ многоступенчатый алгоритм искусственного интеллекта, который оценивал позиции и вращения суставов, а также скорость и направление движений.
MobilePoser способен реконструировать позы всего тела и глобальную трансляцию в реальном времени, используя подмножество устройств пользователя, динамически адаптируясь к настройкам ввода. Это приложение предлагает различные возможности использования, такие как погружающий опыт в играх, анализ движений в области здоровья и благополучия, а также точное определение местоположения в помещениях без необходимости во внешней инфраструктуре.
По словам Карана Ахуджи, цель на будущее - продвинуться в захвате движений на мобильных устройствах с помощью продвинутых методов калибровки с использованием машинного обучения. Адаптивная архитектура MobilePoser позволяет использовать ее с разными комбинациями устройств, от единственного телефона до нескольких устройств на разных частях тела, с конечной целью сделать отслеживание движений таким же распространенным, как навигация GPS в настоящее время.
