面向沉浸式 XR 的设计:交互
面向沉浸式扩展现实(XR)设备的资源与指南
XR 交互应灵活、舒适且直观。用户期望像操作实体对象一样操作数字对象。
自然交互
自然交互(如手势)让用户能够用手导航、选择并移动内容。手势应:
- 易于学习
- 遵循熟悉的模式,例如移动端的按压、捏合和滑动
- 重复使用仍保持舒适
关键操作应支持单手完成。避免要求用户频繁做出幅度大、重复性的手臂动作,否则容易导致疲劳。
多模态输入
XR 应用应支持灵活的多模态输入,包括手部追踪、眼动追踪、语音、键盘、鼠标和控制器。
手部与眼动追踪
手部和眼动追踪可让用户无需控制器即可与虚拟世界交互。
手部追踪
- 直接交互:用户可以触摸、抓取或推动手臂可及范围内的虚拟对象
- 射线式交互:射线像激光笔一样从手部发出并指向远处条目,用户再通过捏合手势选中该条目
眼动追踪
- 支持通过注视和停留进行交互
- 当用户注视某一对象时,会触发悬停状态
语音、键盘、鼠标和控制器输入
XR 应用还应支持语音输入和物理输入,包括:
- 语音:无需动手,即可在虚拟键盘上输入文本
- 语音命令:用于执行常见操作,例如打开设置或返回
- 鼠标和键盘:适用于需要精确操作和大量文本输入的场景
- 六自由度(6DoF)控制器:适用于游戏或复杂的 3D 操控
动态效果
在 XR 中,当视觉运动提示与内耳感知到的平衡状态不一致时,可能引发晕动症。
为确保用户舒适:
反馈
由于虚拟对象缺乏物理阻力,请使用视觉、音频和触觉反馈来确认交互操作。
空间音频
声源可置于 3D 空间中的特定位置,并使用音频反馈确认操作。例如,按下按钮时播放点击音效。
触觉反馈
使用控制器时,应允许用户开启或关闭振动,以便模拟触摸或抓取对象的感觉。