Что такое смешанная реальность?

  • 5 мин

Первым шагом в любом процессе обучения является простое определение основной концепции в простых терминах. Ниже приведено то, что смешанной реальности означает на самом базовом уровне:

Смешанная реальность — это спектр иммерсивных взаимодействий, соединяющий и смешивающий физический и цифровой миры в приложениях дополненной и виртуальной реальности.

Визуально можно представить смешанную реальность как творческое пространство, существующее между полюсами физического и цифрового мира. Возможности этого пространства практически безграничны — от наложения виртуального контента на объекты в физическом мире, как в приложениях дополненной реальности, до полного эффекта погружения, когда пользователь не получает никаких данных из реального мира, как в среде виртуальной реальности.

Схема спектра смешанной реальности с физическим миром слева и цифровым миром справа.

Так как смешанная реальность охватывает настолько широкий спектр возможных взаимодействий с пользователем, она обладает целым рядом совершенно уникальных типов взаимодействия. Эти типы взаимодействия включают в себя, но не ограничиваются:

  • Входные данные окружающей среды — определение расположения пользователя в мире, сопоставление поверхностей и границ в этой области.
  • Пространственный звук — трехмерный звук с позицией и глубиной в виртуальном пространстве, как в реальном мире.
  • Расположения, позиции и сохраняемость объектов в реальном и виртуальном пространствах.

Эти функции являются частью связи между человеческим и компьютерным вводом, известным как взаимодействие с человеком и компьютером (HCI). Человеческие входные данные охватывают более привычные способы взаимодействия с технологиями, такие как использование клавиатуры, мыши, сенсорной панели или собственного голоса. Со временем количество датчиков и вычислительная мощность наших компьютеров выросли настолько, что появилась новая область — компьютерные входные данные из окружающей среды. Взаимодействие между компьютерами и окружающей средой называется восприятием.

Пересечение компьютерной обработки, человеческих входных данных и интерпретации окружающей среды — это та область, где проявляются мощь, творческий потенциал и новые возможности смешанной реальности. Перемещение по физическому миру может преобразовываться в движение в цифровом мире. Границы физического мира могут повлиять на работу приложений в цифровом мире, например игр. Без ввода через окружающую среду невозможно сочетать взаимодействия с физическим и цифровым мирами.

Диаграмма Венна, где круги обозначают взаимодействие человека, компьютера и окружающей среды со смешанной реальностью, которая находится в области, где эти круги пересекаются.

Историческая заметка: термин смешанная реальность впервые был употреблен в статье Пола Милграма (Paul Milgram) и Фумио Кисино (Fumio Kishino) Таксономия визуальных отображений смешанной реальности, опубликованной в 1994 году. Эта статья не описывает версию смешанной реальности, которую люди имеют сегодня. Авторы изучают концепцию континуума виртуальности и классификацию таксономии, примененной к отображениям. Ссылка на эту статью дана в конце модуля.