时间
2022年1月-4月
行业
混合现实
团队
Haoran Xu, Carina Geng,
Duoning Zheng, Zoe Zhang
角色
MR设计师
MR手势库简述...
问题
当前的混合现实交互缺乏直观、一致和高效的手势控制，导致学习成本高且可用性有限。
解决方案
MR手势库引入了一套针对MR环境的自然、通用手势，通过提高直观性、效率和跨应用的一致性来增强用户体验。
如果...
...在混合现实中用手进行操作？
人们希望能够选择和多选
人们想要分组和取消分组
人们想要复制和粘贴
人们想要删除
人们希望撤销
在我们看来，元宇宙和混合现实意味着什么？
为什么元宇宙会成为现实，
为什么混合现实是进入点？
目前，很多虚拟现实交互都专注于人们熟悉的手势和行为。然而，元宇宙可以超越这一点。如果我能突破传统的互动方式，提升虚拟现实的交互体验呢？
元宇宙中的交互障碍有哪些？（MR交互）
根据我们对XR交互的研究，我发现用户体验不足，并将其总结为以下要点。
因此
我旨在探索普适性手势界面的可能性，以使互动更加直观、实用且高效。
用户可以像发送表情符号一样简单地随处应用交互。
目标用户
我研究了当前的VR/AR/MR用户，并根据调查结果设计了一个角色模型。
概念
我制作了一款游戏，帮助游戏设计师试用我们的手势库，并在沉浸式环境中体验它们。
用户需要使用各种互动来逃出两个房间。
场景 1 房间
（进入互动）
场景 2 工厂
（高级交互）
设计原则
根据唐·诺曼的文章《手势界面：可用性的一次倒退》，我设定了设计原则。
可见性
显而易见的标识符。
即时反馈
立即，无论是状态变化还是显示交互结果。
无损操作
因此“撤销”的重要性
可发现性
通过系统地浏览菜单或使用引导功能可以发现所有操作
可靠性
操作应该稳定运行。事件不应随机发生。
一致性
逻辑和系统化的界面。在整个系统中应一致地应用手势，以减少认知负担。
开发
手势库
建立设计原则，灵感来源于当前操作系统的交互，并将其适用于虚拟现实。
自然手势
选择
旋转
移动
删除
在空间中拖动
编辑手势
多项选择
多项已选
分组/取消分组
筛选器
选择
扫描
虚拟工具的手势
菜单
选择器/吸管
存储
使互动更加直观
我领导了一项研究，观察人们在实际任务完成过程中的行为，并分析他们的反应，以识别出指导我们最终手势集创建的主题。
提高手势的效率
为了提高手势的效率，我研究了当前界面中的交互，并改进了XR中每个手势的效率。因此，我与团队合作开发了以下手势。
我的学习与影响
元宇宙需要一个基础设施来支持无缝交互。就像当前的基于屏幕的操作系统一样，我希望这项工作能够激发创建适用于所有XR应用程序的通用交互标准。