Modelos de interação

Concluído

O Kit de Ferramentas de Realidade Misturada permite que você consuma dados de várias fontes de entrada, como controladores 6DoF (seis graus de liberdade), mãos articuladas ou fala. Para determinar o melhor modelo de interação para seu aplicativo, pense nas metas dos usuários e considere os fatores ambientais que possam afetar a experiência deles.

Há três modelos de interação principais que se adaptam à maioria das experiências de realidade misturada. Embora você possa combinar partes de vários modelos de interação no aplicativo, pense bem antes de fazê-lo. Isso cria o risco de entradas de usuário concorrentes, como comandos simultâneos de raios com as mãos e cursor de confirmação com a cabeça, o que pode sobrecarregar e confundir os usuários.

Modelo de controladores de mãos e de movimento

O modelo de controladores de mãos e movimento exige que os usuários usem uma ou as duas mãos para interagir com o mundo holográfico. Esse modelo remove a fronteira entre virtual e físico.

Alguns cenários específicos incluem:

  • Fornecimento de telas virtuais 2D a profissionais da informação, com funcionalidades de UI (interface do usuário) para exibir e controlar o conteúdo
  • Fornecer tutoriais e guias para trabalhadores de linha de frente/ linhas de montagem de fábrica
  • Desenvolvimento de ferramentas profissionais para auxiliar e orientar profissionais médicos
  • Uso de objetos virtuais 3D para decorar o mundo real ou criar um outro mundo
  • Criação de serviços e jogos baseados em localização usando o mundo real como tela de fundo

Há três modalidades de controladores de mão e de movimento:

  • Manipulação direta com as mãos
  • Apontar e confirmar com as mãos
  • Controladores de movimento

Modelo de mãos livres

Como o nome indica, o modelo de mãos livres permite que os usuários interajam com o conteúdo holográfico sem usar as mãos. Em vez disso, eles podem usar entrada de voz ou "focar e permanecer".

Alguns cenários específicos incluem:

  • Ser guiado para realizar uma tarefa enquanto o usuário está com as mãos ocupadas
  • Consulta de materiais enquanto as mãos do usuário estão ocupadas
  • Descanso das mãos em caso de fadiga
  • Uso de luvas que não podem ser rastreadas
  • Usuário carregando algo com as mãos
  • Estranhamento social devido a grandes gestos com as mãos
  • Espaços apertados

Focar e confirmar

A melhor alternativa é usar focar e confirmar ao interagir com conteúdo holográfico que está fora do alcance. O usuário olha para um objeto ou elemento de interface do usuário e o seleciona ("faz commit" dele) usando uma entrada secundária. Os métodos de confirmação incluem comandos de voz, pressionamento de botão ou gesto de mão.

Existem dois tipos de entrada de foco — foco na cabeça e foco nos olhos — e ambas têm ações de commit diferentes.