Знакомство
Mixed Reality Toolkit позволяет использовать входные данные из различных источников, таких как контроллеры, артикулированные руки или речь. Выбор модели взаимодействия, оптимально подходящей для взаимодействия с смешанной реальностью, требует идентификации пользователя, определения своих целей и рассмотрения любых ситуационных или экологических факторов, которые могут повлиять на их опыт.
Предположим, вы разрабатываете игру, которая требует большого количества взаимодействий. Пользователи немного обеспокоены методом взаимодействия, так как это будет утомительно использовать контроллеры в течение длительного периода. Поэтому вам нужно придумать альтернативные методы ввода для успешного выполнения приложения.
В этом модуле показано, как с помощью MRTK использовать отслеживание взгляда и голосовые команды на модели голограммы марсохода Curiosity NASA. Здесь вы узнаете:
- Как включить отслеживание глаз для HoloLens 2.
- Узнайте, как использовать отслеживание глаз для активации действия.
- Создание речевых команд.
- Узнайте, как управлять речевыми командами глобально и локально.
В конце модуля вы можете добавить в проект команды отслеживания глаз и голосовой связи с помощью MRTK.
Полный пример этого руководства можно найти здесь.