Как отмечает Apple Insider, существенная часть заявки посвящена тому, как Vision Pro распознаёт жесты. Большое внимание уделяется шагам, необходимым для правильного распознавания жеста и отклонения ложных срабатываний, например, если пользователь почесал нос. Для этого устройство будет определять, соответствует ли движение руки «набору критериев» (например, может ли оно привести к изменению положения курсора). Если система определяет, что жест не соответствует набору критериев, жест игнорируется.
В феврале Apple запатентовала специальные датчики на руки, которые позволят прикасаться к предметам в дополненной и виртуальной реальности, а также получать обратную связь в виде ощущений.
В июле стало известно, что компания получила патент на датчики мозговых волн для гарнитуры Vision Pro, который призваны улучшать психическое здоровье, помогать в тренировках и повышать внимательность.
Также Apple разрабатывает технологию для носимых устройств, включая гарнитуру смешанной реальности Vision Pro, которая измеряет и отслеживает биометрические данные и местоположение для предоставления жизненно важных медицинских консультаций. Устройства будут способны обнаружить, что пользователь забыл принять лекарство, и направить его к рецептурным препаратам. Аналогичным образом гаджет сможет определить уровень обезвоженности и предложить пользователю выпить воды.
Обсудить