Vision Pro не имеет контроллеров. Вместо этого вы будете полагаться на различные жесты рук для управления гарнитурой. Вы можете узнать о них все здесь.
Vision Pro меняет представление о том, как люди перемещаются и взаимодействуют с программным обеспечением в смешанной реальности. Вместо громоздких физических контроллеров гарнитура Apple AR/VR опирается на сложные механизмы ввода, с которыми мы все рождаемся, — наши руки и глаза.
Делайте выбор, прокручивайте, масштабируйте, вращайте, перемещайте объекты и выполняйте другие действия, просто глядя на объекты и выполняя простые жесты рук, напоминающие Multi-Touch на iPhone.
Следуйте инструкциям, чтобы изучить шесть основных жестов рук, используемых в visionOS, и узнайте, как ваш взгляд и руки делают использование пространственного компьютера Apple плавным и легким.
Как работают жесты рук в Vision Pro?
Жесты рук в visionOS работают в паре с отслеживанием взгляда. Ваши глаза определяют цель и намерение, а жесты запускают определенные действия.
Возможности Вижн Про передние, боковые и нижние камеры для отслеживания рук, а инфракрасные датчики внутри гарнитуры отслеживают ваши глаза.Вы смотрите на элемент на экране, например на кнопку, чтобы выделить его, или задерживаете взгляд, чтобы развернуть основное контекстное меню или открыть всплывающую подсказку. Сделав выбор, выполните жест, например, пощипывание, чтобы воздействовать на него. Поскольку внешние камеры охватывают широкое поле зрения, вы можете выполнять жесты, удобно положив руку на колени, чтобы избежать напряжения.
Apple наметила шесть распространенных типов жестов рук для visionOS в Выступление разработчиков на WWDC23 о разработке взаимодействия рук и глаз для пространственного ввода. В сочетании с глазами для наведения эти жесты рук позволяют вам управлять приложениями и взаимодействиями в системе.
Кран
Сведение пальцев вместе выполнит действие по умолчанию для выбранного элемента. Подумайте о щипке с точки зрения касания экрана iPhone или щелчка мышью или трекпадом вашего Mac. Некоторые функции visionOS, такие как ввод текста на виртуальной клавиатуре, не требуют касания.
Двойное нажатие
Дважды быстро сведите вместе большой и указательный пальцы, чтобы выполнить эквивалент жеста двойного касания в сенсорных операционных системах, таких как iOS и iPadOS.
Сожмите и удерживайте
Соедините большой и указательный пальцы вместе и задержите их на мгновение, чтобы активировать этот жест. Сжатие и удержание в visionOS работает аналогично долгому нажатию (нажмите и удерживайте). жест на вашем iPhone для выделения текста или вызова контекстного меню.
Двигайте зажатыми пальцами, чтобы перемещать окна и другие элементы пользовательского интерфейса в visionOS. Если Safari находится перед вами, вы также можете поднять руку в воздух и просто щелкнуть пальцем для прокрутки.
Зажмите и перетащите
Жест сжатия и перетаскивания используется для прокрутки. Просто сведите пальцы вместе и щелкните запястьем. Вы можете прокручивать вверх, вниз, влево или вправо, перетаскивая руку в любом направлении.
Чем быстрее вы двигаете рукой, тем быстрее вы будете прокручивать. Вы можете прокручивать веб-страницы в Safari, электронные письма в Mail, документы в Pages, электронные таблицы в Excel и т. д. Вы можете использовать жест сжатия и перетаскивания для прокрутки содержимого в любом окне на visionOS, которая поддерживает прокрутку.
Увеличить
Для увеличения в Safari, Фото и других приложениях сведите вместе большой и указательный пальцы на обеих руках, а затем отведите каждый наружу. Вы можете использовать этот жест, чтобы приблизить или приблизить окно в visionOS, увеличить изображения и т. д. В приложении «Фотографии» вы можете посмотреть на определенную часть изображения при выполнении жеста масштабирования, чтобы увеличить его.
Повернуть
Чтобы повернуть объект, сведите пальцы обеих рук вместе, затем переместите одну руку вверх, а другую вниз. Вы можете использовать этот жест для поворота 3D-объектов в Quick Look, изображений в приложении «Фотографии», иллюстраций в документах и т. д.
Отслеживание глаз и рук «Просто работает» на Vision Pro
Как и на iPhone, Apple предоставляет базовый язык жестов для навигации по всему пользовательскому интерфейсу visionOS и приложениям дополненной реальности. Сторонние разработчики могут использовать официальные API-интерфейсы Apple для visionOS для создания и добавления жестов в свои приложения.
Apple не рекомендует создавать собственные жесты, конфликтующие с системными или непростые для понимания, выполнения или запоминания.
Отслеживание глаз и рук в приложениях виртуальной, дополненной и смешанной реальности не являются новыми функциями. Однако гарнитура Vision Pro реализует эти функции фирменным способом Apple. В результате навигация в visionOS глазами и руками становится плавной и легкой.