Включение и использование жестов и голосовых команд на Meta Quest 2

Важное замечание: не все приложения поддерживают трекинг рук — в таких случаях Quest 2 попросит включить контроллеры.

Что такое трекинг рук и голосовые команды

Трекинг рук — это распознавание движений и поз рук камерой шлема для навигации без контроллеров. Голосовые команды — короткие фразы, которые Quest 2 распознаёт и выполняет (например, открытие приложений или регулировка громкости).

Как включить трекинг рук для меню и некоторых приложений

1. Откройте домашний экран Quest и нажмите на значок сетки справа на панели инструментов, чтобы открыть App Library.
2. Выберите Settings.
3. В разделе Movement Tracking найдите соответствующий блок и включите первый переключатель, чтобы активировать трекинг рук.

Внутри Movement Tracking вы увидите дополнительные параметры:

• Автоматический переход между контроллерами и трекингом рук в зависимости от наличия контроллеров в зоне видимости камер.
• Включение запуска трекинга рук через ввод с контроллера (например, длинное нажатие кнопки).

Совет: если хотите всегда использовать руки для базовой навигации, отключите автоматический переход и оставьте трекинг включённым.

Как пользоваться трекингом рук

1. Когда трекинг рук включён, наведите руки в поле зрения внешних камер шлема.
2. Самый распространённый жест — «пинч» (сжатие большого и указательного пальцев). Пинч означает «выбрать» или «схватить».
3. Пинч для выбора пунктов меню, для прокрутки экранов и перетаскивания краёв виртуальных окон.
4. Зажатый пинч часто рисует луч (ray), который используют для создания границ Guardian или для входа в дополнительную учётную запись.

Поведение изменения размера виртуального экрана зависит от приложения: в одних приложениях нужно схватить противоположные углы и растянуть, в других — захватить одну сторону и потянуть её к центру или от центра.

Ограничения

• Не все игры и приложения поддерживают трекинг рук. Если приложение требует контроллеры, появится диалог с предложением включить контроллеры или перейти в Passthrough для их поиска.
• Яркое или слишком тусклое освещение, а также замусоренный фон ухудшают распознавание рук.

Как включить голосовые команды

1. В Settings откройте Experimental Features.
2. Переключите Say “Hey Facebook” в положение On.

После включения говорите: «Hey Facebook» + команда. Устройство начнёт слушать и попытается выполнить одну из распознанных команд.

Частые голосовые команды

• «Hey Facebook, find puzzle games» — поиск в магазине Quest Store.
• «Hey Facebook, open a browser page» — открыть браузер.
• «Hey Facebook, [название приложения]» — попытка запустить приложение; если имя введено неточно, происходит поиск в магазине.
• «Hey Facebook, adjust the volume to five» — регулировка громкости по уровню.
• «Hey Facebook, start recording» / «stop recording» — начать/остановить запись.
• «Hey Facebook, take a photo» — сделать скриншот.
• «Hey Facebook, shut down» — выключение шлема.

Совет: произносите названия приложений максимально близко к официальному имени в магазине, чтобы избежать ложных поисков.

Когда стоит использовать руки, а когда — контроллеры

• Трекинг рук удобен для: навигации по меню, просмотра медиа, регулировки размеров окон, быстрого перехода между элементами UI.
• Контроллеры необходимы для: большинства игр, точного позиционирования и сложных взаимодействий с виртуальной средой.

Ментальная модель: думайте о трекинге рук как о «касании и листании», а о контроллерах — как о «инструментах и манипуляторах».

Технические советы и устранение неполадок

• Если Quest 2 «не видит» ваши руки:
  • Проверьте освещение и фон (избегайте ярких источников света позади вас).
  • Очистите внешние камеры от отпечатков.
  • Убедитесь, что руки находятся в поле зрения камер и не закрыты одеждой.
• Если голосовые команды не распознаются правильно:
  • Говорите чётко, не шёпотом.
  • Убедитесь, что в помещении не слишком шумно.
  • Проверьте, включено ли Experimental Features → Say “Hey Facebook”.

Важно: при проблемах с распознаванием попробуйте перезапустить шлем и повторно откалибровать Guardian.

Примеры неудачного применения (когда это не сработает)

• В быстрых экшен-играх и шутерах трекинг рук почти никогда не заменит контроллеры из-за необходимости точного позиционирования и скоростных действий.
• В плохо освещённых комнатах или при одновременном использовании внешних источников света (например, солнечный блик) трекинг рук может давать ложные срабатывания.
• Если у вас перчатки или длинные рукава, которые закрывают кисти — трекинг не будет работать.

Альтернативные подходы

• Использовать контроллеры в режиме пасстру: быстро найти и подключить контроллеры через Passthrough.
• Подключить совместимые Bluetooth-устройства (если приложение поддерживает) для управления воспроизведением.
• Использовать мобильное приложение Meta Quest как дополнительный пульт управления для некоторых функций.

Роли и чек-листы

Пользователь — быстрый чек-лист:

• Включить Settings → Movement Tracking.
• Убедиться, что камеры чистые, освещение подходящее.
• Попробовать пинч и зажатый пинч в домашнем меню.

Разработчик VR-приложений:

• Тестировать приложение с трекингом рук на всех уровнях яркости и с разными фонами.
• Реализовать fallback-поток для пользователей с включёнными только рукaми.
• Поддерживать голосовые команды, если логика приложения предполагает простые действия.

Специалист по доступности:

• Убедиться, что критические функции доступны как через контроллер, так и голос/жесты.
• Предоставить опции для увеличения шрифтов и элементов UI при использовании трекинга рук.

Mini-методология: как протестировать трекинг рук за 5 минут

1. Включите Movement Tracking.
2. Встаньте в нейтрально освещённой зоне, очистите камеры.
3. Сделайте пинч у центрального элемента меню — проверьте отклик.
4. Попробуйте растянуть виртуальное окно двумя пинчами (если доступно).
5. Запустите приложение, которое, как вы знаете, поддерживает трекинг рук, и пройдите базовый сценарий.

Потенциальные риски и замечания по конфиденциальности

• Голосовые команды активируются по ключевой фразе «Hey Facebook». Проверьте политику конфиденциальности Meta, чтобы понять, как обрабатываются ваши голосовые данные.
• Не используйте голосовые команды для ввода конфиденциальной информации без проверки настроек приватности.

Диаграмма выбора: рука или контроллер

flowchart TD
  A[Нужно выполнить действие?] --> B{Это игра с быстрыми реакциями?}
  B -- Да --> C[Использовать контроллеры]
  B -- Нет --> D{Это простая навигация/просмотр медиа?}
  D -- Да --> E[Использовать трекинг рук]
  D -- Нет --> C
  C --> F[Контроллеры: точность и скорость]
  E --> G[Руки: удобство и естественность]

Быстрый чек-лист при проблемах

• Проверить включён ли Movement Tracking.
• Проверить Experimental Features → Say “Hey Facebook”.
• Очистить объективы камер.
• Попробовать перезапуск устройства.
• Подключить контроллеры, если приложение требует их.

Краткое резюме

Трекинг рук и голосовые команды в Meta Quest 2 значительно упрощают базовое взаимодействие с интерфейсом: навигацию по меню, управление воспроизведением и записью. Однако они не заменяют контроллеры в полноценных играх и зависят от условий освещения и поддержки приложений. Перед активным использованием стоит протестировать оба режима и настроить автоматический переход или фиксировать один из режимов в настройках.

Ключевые действия:

• Включите Movement Tracking в Settings.
• Включите Say “Hey Facebook” в Experimental Features для голосового управления.
• Тестируйте в спокойном освещении и проверяйте совместимость приложений.

Полезный совет: если голосовые команды ошибочно запускают поиск вместо открытия уже установленного приложения, попробуйте быстро открыть приложение вручную и добавить его в избранное, чтобы ускорить доступ.