沉浸式 XR 設計:互動
沉浸式延展實境(XR)裝置的資源與指南
XR 互動應靈活、舒適且直觀。使用者期望與數位物件互動時,能像與實體物件互動般自然。
自然互動
手勢等自然互動讓使用者能運用手部瀏覽、選取及移動內容。手勢應:
- 易於學習
- 沿用熟悉模式,例如行動裝置上的點按、捏合與滑動
- 重複使用時仍保持舒適
必要操作應支援單手互動;並應避免要求使用者做出大幅度且重複的手臂動作,以免造成疲勞。
系統導覽
使用者應能隨時隨地開啟導覽選單。
在 Android XR 上,系統層級的導覽選單包含:
- 返回:操作方式與 Android 手機上的返回手勢相同
- 啟動器:可前往主畫面
- 最近使用的應用程式:使用者可開啟、關閉及切換應用程式
多模態輸入
XR 應用程式應支援靈活的多模態輸入,例如手部與眼動追蹤、語音、鍵盤與滑鼠,以及控制器。
手部與眼動追蹤
追蹤功能讓使用者無需控制器,即可與虛擬世界互動。
手部追蹤:
- 直接操作:使用者可觸碰、抓取或推動伸手可及的虛擬物件
- 射線式:如雷射筆般的射線會從手部延伸,以瞄準遠方項目,再以捏合手勢選取
眼動追蹤:
- 支援凝視與駐留互動
- 注視物件會觸發懸停狀態
語音、鍵盤、滑鼠與控制器輸入
XR 應用程式也應支援語音與實體裝置輸入,包括:
- 語音輸入:可在虛擬鍵盤上以語音輸入文字,無需手動操作
- 語音指令:用於常見操作,例如 開啟設定 或 返回
- 滑鼠與鍵盤輸入:適用於需要精確操作或以文字為主的工作流程
- 六自由度(6DoF)控制器:適用於遊戲或複雜的 3D 操作
動態效果
在 XR 中,當視覺提示與內耳平衡感不一致時,可能會引發動暈症。
為了讓使用者保持舒適:
回饋
由於虛擬物件缺乏實體阻力,請使用視覺、音訊與感官回饋來確認互動操作。
空間音訊
音源可置於 3D 空間中,並為操作提供音訊確認。例如,按下按鈕時播放 點擊 音效。
觸覺回饋
針對控制器,應允許使用者開啟或關閉振動,以模擬觸碰或抓取物件時的觸感。