Diseño para XR inmersiva: Interacción
Recursos y orientación para dispositivos inmersivos de realidad extendida (XR)
Las interacciones de XR deben ser flexibles, cómodas e intuitivas. Las personas esperan interactuar con objetos digitales como lo hacen con los objetos físicos.
Interacciones naturales
Las interacciones naturales, como los gestos, permiten a las personas navegar, seleccionar y mover contenido con las manos. Los gestos deben ser:
- Fáciles de aprender
- Basados en patrones conocidos, como pulsar, hacer pinza y deslizar en el móvil
- Cómodos de usar repetidamente
Admitir interacciones con una sola mano para las acciones esenciales y no exigir movimientos amplios y repetitivos de los brazos, ya que pueden causar fatiga.
Más información sobre los gestos de Android XR
Navegación del sistema
Las personas deben poder abrir un menú de navegación en cualquier lugar y en cualquier momento.
En Android XR, el menú de navegación del sistema incluye:
- Atrás: funciona igual que el gesto Atrás en los teléfonos Android
- Launcher: lleva a la pantalla de inicio
- Recientes: permite abrir, cerrar y cambiar entre aplicaciones
Entradas multimodales
Las aplicaciones de XR deben ofrecer compatibilidad con entradas multimodales flexibles, como el seguimiento de manos y ojos, la voz, el teclado y el ratón, y los mandos.
Más información sobre las entradas multimodales de Android XR
Seguimiento de manos y ojos
El seguimiento permite a las personas interactuar con el mundo virtual sin un mando.
Seguimiento de manos
- Interacción directa: las personas pueden tocar, agarrar o empujar objetos virtuales que estén al alcance de la mano
- Mediante rayo: se proyecta un rayo, como un puntero láser, desde la mano para apuntar a elementos distantes; después, un gesto de pinza selecciona el elemento
Seguimiento ocular
- Permite interacciones basadas en la mirada y la fijación prolongada (dwell)
- Mirar un objeto activa su estado de hover
Entradas de voz, teclado, ratón y mandos
Las aplicaciones de XR también deben ofrecer compatibilidad con entradas de voz y físicas, como:
- Voz para introducir texto sin necesidad de usar las manos en teclados virtuales
- Comandos de voz para acciones habituales como Abrir ajustes o Volver atrás
- Entradas de ratón y teclado para tareas que requieren precisión y manejo intensivo de texto
- Mandos de seis grados de libertad (6DoF) para juegos o manipulación 3D compleja
Movimiento
En XR, el mareo por movimiento puede aparecer cuando las señales visuales no coinciden con la sensación de equilibrio del oído interno.
Para mantener la comodidad:
- Usar tokens de movimiento con suavizado estándar y duración larga
- Mantener estable la línea del horizonte
- Limitar el movimiento continuo. Para cambiar de ubicación, usar la teletransportación o el salto instantáneo.
- Usar efecto túnel o viñeteado para reducir el campo de visión durante el movimiento
Retroalimentación
Dado que los objetos virtuales no ofrecen resistencia física, usar retroalimentación visual, auditiva y sensorial para confirmar las interacciones.
Señales visuales
Usar iconos de hover, indicadores de foco, efectos de onda, etiquetas de texto y cambios de elevación para mostrar el estado de interacción de un objeto.
Para indicar que se está apuntando a un elemento, usar elevación espacial o un estado de resaltado.
Audio espacial
Los emisores de sonido pueden posicionarse en el espacio 3D y proporcionar confirmación auditiva de una acción; por ejemplo, añadir un sonido de clic al pulsar un botón.
Respuesta háptica
En los mandos, permitir activar o desactivar la vibración para simular la sensación de tocar o agarrar un objeto.