Projektowanie interakcji w immersyjnym XR
Materiały i wytyczne dotyczące immersyjnych urządzeń rzeczywistości rozszerzonej (XR)
Interakcje w XR powinny być elastyczne, wygodne i intuicyjne. Użytkownicy oczekują, że interakcja z obiektami cyfrowymi będzie przypominała interakcję z obiektami fizycznymi.
Naturalne interakcje
Naturalne interakcje, takie jak gesty, pozwalają użytkownikom nawigować, wybierać i przenosić treści za pomocą rąk. Gesty powinny być:
- Łatwe do opanowania
- Zgodne z dobrze znanymi wzorcami, takimi jak naciśnięcie, uszczypnięcie i przesunięcie palcem na urządzeniach mobilnych
- Wygodne nawet podczas wielokrotnego powtarzania
Zapewnij obsługę jedną ręką w przypadku podstawowych czynności. Nie wymagaj wykonywania szerokich, powtarzalnych ruchów ramion, ponieważ mogą one powodować zmęczenie.
Więcej informacji o gestach w Android XR
Nawigacja systemowa
Użytkownicy powinni mieć możliwość otwarcia menu nawigacji w dowolnym miejscu i w dowolnym momencie.
Systemowe menu nawigacji w Android XR obejmuje:
- Wstecz: Działa identycznie jak gest wstecz na telefonach z Androidem
- Launcher: Umożliwia przejście do ekranu głównego
- Ostatnie aplikacje: Umożliwia otwieranie, zamykanie i przełączanie między aplikacjami
Multimodalne metody wprowadzania danych
Aplikacje XR powinny obsługiwać elastyczne, multimodalne metody wprowadzania danych, takie jak śledzenie dłoni i wzroku, wprowadzanie głosowe, klawiatura, mysz i kontrolery.
Więcej informacji o obsłudze multimodalnej w Android XR
Śledzenie dłoni i wzroku
Śledzenie umożliwia interakcję ze światem wirtualnym bez użycia kontrolerów.
Śledzenie dłoni
- Interakcja bezpośrednia: Użytkownicy mogą dotykać, chwytać lub popychać wirtualne obiekty znajdujące się w zasięgu ręki
- Interakcja z użyciem promienia: Promień, podobny do wskaźnika laserowego, rozciąga się od dłoni w kierunku odległych elementów, a uszczypnięcie palcami wybiera wskazany element
Śledzenie wzroku
- Umożliwia interakcje oparte na spojrzeniu i dłuższym zatrzymaniu wzroku
- Spojrzenie na obiekt uruchamia stan najechania (hover)
Wprowadzanie danych głosem, klawiaturą, myszą i kontrolerami
Aplikacje XR powinny również obsługiwać metody wprowadzania danych głosem oraz za pomocą urządzeń fizycznych, w tym:
- Wprowadzanie tekstu głosem bez użycia rąk na klawiaturach wirtualnych
- Polecenia głosowe do typowych czynności, takich jak Otwórz ustawienia lub Wstecz
- Obsługa myszy i klawiatury zapewniająca precyzję przydatną w zadaniach wymagających intensywnego wprowadzania tekstu
- Kontrolery o sześciu stopniach swobody (6DoF) do gier lub złożonej manipulacji obiektami 3D
Ruch
W XR choroba lokomocyjna może wystąpić, gdy sygnały wzrokowe są niezgodne z sygnałami pochodzącymi z narządu równowagi ucha wewnętrznego.
Aby zapewnić użytkownikom komfort:
- Stosuj tokeny ruchu ze standardowym wygładzaniem (easing) i długim czasem trwania
- Utrzymuj stabilną linię horyzontu
- Ogranicz ciągły ruch. Aby zmienić umiejscowienie, użyj teleportacji lub natychmiastowego przeskoku.
- Stosuj efekt widzenia tunelowego lub winietowanie, aby zawęzić pole widzenia podczas ruchu
Informacje zwrotne
Ponieważ wirtualne obiekty nie stawiają fizycznego oporu, używaj wizualnych, dźwiękowych i dotykowych sygnałów zwrotnych do potwierdzania interakcji.
Wizualne sygnały
Używaj ikon stanu najechania, wskaźników fokusu, efektów fali, etykiet tekstowych i zmian wysokości, aby pokazać stan interakcji obiektu.
Aby wskazać, że element jest aktualnie wskazywany, użyj wysokości przestrzennej lub stanu podświetlenia.
Dźwięk przestrzenny
Emitery dźwięku można umieszczać w przestrzeni 3D, aby zapewnić dźwiękowe potwierdzenie akcji. Na przykład dodaj dźwięk kliknięcia po wciśnięciu przycisku.
Haptyka
W przypadku kontrolerów umożliw użytkownikom włączanie i wyłączanie wibracji, aby symulować wrażenie dotykania lub chwytania obiektu.