新现实：VR、AR、MR 和设计的未来

人工智能、增强现实和虚拟现实的进步为设计师带来了新的设计机会。

数字和技术领域在不断变化，并且在许多方面都在加速。 负责提出创新想法的设计师必须跟踪趋势和创意机会在哪里。 认识到行业正在发生的变化将有助于设计师进行更智能的设计并做出更明智的创意决策。

在技​​术采用生命周期中，“创新者”是最小的群体，但却是最成功的群体。 紧随其后的是“早期采用者”，然后是“早期多数”，然后是“多数”或其他所有人。 作为创新者，伟大的设计师通常属于“早期采用者”类别——未知领域的大冒险者。 一个伟大的设计师也是一个有远见的人，能够战略性地思考和分析趋势，以设计更好的产品或服务。

让我们看看一些创造性的机会和新兴技术，以及为什么为了设计未来，设计师需要超越屏幕思考新的现实。

新技术格局：人工辅助人工智能、增强现实、虚拟现实和混合现实

什么是人工智能？

人工智能 (AI) 赋予计算机或计算机控制设备执行智能任务的能力，例如推理或从经验中学习。 认知计算是十年前开始使用的术语——即面对认知超载，我们将需要帮助来做出决策。 引用当前使用的人工智能的明显优势，我们已经在依靠 Siri 和 Alexa（以及其他）等人工智能数字助理来帮助我们做出简单的决定。

产品设计师将拥有越来越多的数据信息来为他们的设计决策提供信息。 人工智能专家利用人工智能技术创建动态用户界面，通过分析应用程序或网站中的每次交互来个性化每个用户体验。 未来，计算机将在做出基于数据的决策方面做得更好，以改进自动化任务和我们的人类决策过程。

随着 IBM 的 Watson 引领通用汽车、康泰纳仕、葛兰素史克、花旗集团和安德玛等公司的发展，人工智能的未来将全在于高效地做出复杂而重要的决策。

作为创意专业人士，我们可以在多个垂直行业中使用这些想法。 例如，The North Face 使用 Watson 帮助创建直观的电子商务界面，帮助客户做出最佳购买决策。

虚拟助手——人工智能技术在行动

Siri、Alexa、Cortana、Watson 等虚拟助手依靠人工智能来帮助完成从寻找餐厅到发送电子邮件或安排会议的所有工作。 其中许多是通过语音操作的，对于人类来说，这是一种比传统的窗口和按钮视觉 UI 更自然的界面。 这些技术可能会重塑搜索引擎的当前设计。

对于人类来说，说话是一种自然而直接的互动方式。 因此，语音控制的虚拟助手在我们家中获得了良好的采用率也就不足为奇了。 用户可以简单地与系统交谈，而不是用手或手势“操作”它。 例如，在 iPhone 上，只使用一个快速请求，Siri 就允许我们通过 PayPal 向另一个人转账。

随着人工智能被集成到应用程序中，它将帮助智能虚拟助理（IVA）变得越来越智能。 然而，无论 IVA 变得多么聪明，视力不佳或其他身体残疾的用户（使用屏幕阅读器和其他辅助技术）仍可能面临重大挑战。 这将取决于用户体验设计师与用户体验研究人员合作来弥合这些关键的可访问性差距。

机器智能如何为无人驾驶世界提供动力

未来的交通系统将使交通顺畅高效地通过我们的街道。 模块化、可拆卸巴士、飞行出租车和悬挂式磁吊舱网络等设计创新将使动态、无人驾驶世界的梦想成为现实。

几年前的科幻新闻现在正在成为现实。 Wheelys 的 Moby-Mart 是一家拥有全息售货员的自动驾驶商店，可能会改变电子商务设计的世界。

下一代电子商务设计师将需要物理和数字空间的多专业化。 未来的设计师将需要设计一种体验，其中许多熟悉的人类元素被移除或远程。

Amazon Go，一家没有收银员的商店，是设计未来外观和感觉的一个很好的例子。 他们设计了一种购物体验，任何人都可以手持产品进入商店、浏览、购物和离开，没有任何摩擦。 收银台没有排队。

每辆自动驾驶汽车内置的智能使其能够为我们做出所有正确的决定——从最佳路线到人类安全问题。 此类复杂设计系统的创建正在创建一个产品模板，该模板将启动在运输垂直领域之外设计的新一轮产品浪潮。

汽车内饰设计师有必要创造出使内部空间舒适和适应性强的设计。 界面需要直观且令人放心，以鼓励乘客信任，同时关注共享旅程的人之间的人际互动。

增强现实

增强现实 (AR) 作为您面前世界顶部的虚拟层，处于发现和创新的新时代。 虽然早期的 AR 应用依赖于智能手机或平板电脑，但它们很快将扩展到智能眼镜等可穿戴设备，需要不同类型的 UX 和设计流程——在更小的屏幕范围之外进行思考。

虽然关于 AR、VR 和 MR 的争论仍在继续，但增强现实是设计师使用图像、对象和颜色识别创建应用程序的独特机会。 就像人工智能利用数据做出决策一样，增强现实利用对给定空间内关键“锚”对象和点的识别。

AI 和 AR 完美结合的一个很好的例子是 Apple 的 Animoji，它是 iPhone X 的动画表情符号。根据 Apple 的说法，Animoji 是“使用您的声音并反映您的面部表情的自定义动画消息”。 得益于 iPhone X ace-scanning 功能，渲染和动画实时工作。

Meta – 打造沉浸式 AR 体验

未来五年，AR 将更好地融入我们的日常生活，将我们的物理世界和数字世界与新的可穿戴产品融合在一起。 像 Meta 眼镜这样将增强现实叠加在用户现实之上的产品很可能会成为游戏设计师的流行媒介。

Meta眼镜基于全息技术，可以识别用户的手势，让他们操纵物体的3D投影。 有这么多基于手势的设备，标准化和文化差距可能成为该领域设计师的主要挑战。

“生产力的未来是空间的，”Meta 在介绍他们的 AR 工作区时说。 未来，可穿戴硬件将使员工能够免提工作。 未来的设备可以处理语音命令或手势。 AR 体验的日益成功可能预示着物理控制器（例如鼠标光标或键盘）的终结。

在增强现实中，自然手势可能是体验的关键驱动因素。 例如，用手指模拟按钮的点击会触发与虚拟链接或按钮的交互。 谷歌推出了 Soli 项目，该项目更进了一步——他们创造了一种只专注于非接触式交互的传感技术。 为了保持用户友好，这样的体验需要一个最小的界面，几乎没有视觉过载。

一些著名的增强现实设计和开发资源：

• Facebook Frame 和 AR 工作室
• 苹果 ARkit

AR增强生活

作为其概念厨房的一部分，宜家正在开发一款智能餐桌，可根据放置在上面的食材推荐食谱。 这是 AR 技术在现实世界中发挥作用的一个很好的例子。 交互式桌子有一个配备摄像头的投影仪，可以在其表面显示食谱并识别成分，让您了解如何用手头的东西制作什么。

这种身临其境的体验与移动应用程序直接竞争，移动应用程序由于功能受限，很快就会显得过时。 移动应用程序设计师将很快创建与物理空间集成的增强应用程序，以提供一种新的、令人兴奋的与我们的物理环境交互的方式。

使用 AR 工作的未来

增强现实也可用于知识转移，例如工业环境中的培训。 想象一下，通过上下文视频向员工展示如何完成特定任务，而不是解释。 这为电子学习领域的设计师打开了创建下一代 AR 界面的大门。

波音公司使用由 Skylight 提供支持的 AR 眼镜来指导技术人员每年为数百架飞机接线。 可穿戴显示器可帮助技术人员识别并准确连接数百条电线，仅使用他们的视觉和声音来控制应用程序。 结果，波音公司将生产时间缩短了 25%，并将错误率降低到几乎为零。

在操作 AR 应用程序时，简单的语音控制系统可降低执行复杂任务的交互成本。 最小化界面元素可以减少用户的认知负担、最小化干扰并减少分心。

增强现实技术可以改变客户和员工接受新信息培训和介绍的方式。 想象一下培训模块，例如如何在汽车中更换机油，或其他“如何”培训视频，使用 AR 将指示叠加到现实生活中。

从可用性的角度来看，设计师不仅需要考虑系统在视觉上呈现给用户的内容，还需要考虑大脑如何解释与实际现实重叠的复杂信息。

虚拟现实和混合现实

虚拟现实 (VR) 让您完全沉浸在虚拟世界中，而混合现实 (MR)，有时也称为混合现实，是真实世界和虚拟世界的融合。 VR 可用于虚拟办公室、产品、2017 年青少年选择奖等活动等。 借助 VR，设计师及其客户将能够在进入生产阶段之前预览缩放到真实、真人大小的环境和深度的设计。

2017 年初，福布斯观察到“围绕虚拟现实的炒作正在消退”。 明显的限制 VR 面部是头显的高价、过度使用带来的不适、视觉质量差等等。 因此，与“可能在短期内表现更好”的 AR 相比，VR 技术的大众市场采用缓慢。

虚拟现实应用

虚拟现实内容的新颖性为吸引大量观众提供了独特的机会，正如国家地理的 VR 纪录片所展示的那样：保护者，穿上护林员的鞋子。 与其他自然主题纪录片相比，它受到了更多关注。

除了将观众带到新的地方之外，设计师的下一个机会是帮助他们体验另一个人的生活。 提供第一人称视角可以创建独特而有效的活动，例如以同理心为中心的“痴呆症之旅”。

VR 设计师最终会出现一套新的设计模式，但扁平化设计方法不太可能成功。 在 VR 中，我们的大脑使用时空定位和解决问题的能力； 因此，必须使用纹理、照明和更精细的细节来获得更可信和身临其境的体验。

VR 让用户能够近距离接触虚拟物体，也可以远离它们。 由于眼睛非常擅长挑选深度信息，因此设计师对物体的渲染需要真实而细致。 声音和音乐是 VR 设计师的其他重要考虑因素。

MR – 混合现实和虚拟现实

Microsoft HoloLens 混合现实将 3D​​ 全息内容与物理世界融合在一起，为全息图提供真实世界的上下文和规模。 MR 技术将人的物理环境与来自物理世界和数字世界的物体混合在一起。 使用这种 MR 技术，我们可以与数字内容和我们周围的世界进行交互，也可以与 3D 全息投影进行交互。

MR 和 VR 应用程序为设计师提供了新的创作自由。 我们可以创造体验，让用户可以与产品进行虚拟交互并访问遥远的环境、历史事件、音乐会等等。 在我们创造的虚拟或混合现实中，我们可以以无限的可能性弯曲物理定律，以前所未有的方式体验世界。

从设计和可用性的角度来看，要牢记的一个关键原则是让用户放心，并通过让他们在现实世界中扎根来避免不舒服的感觉。 为此，我们可以利用声音、运动和良好的规模感——我们创建的虚拟环境和交互应该感觉自然且符合人体工程学，而不一定是真实的。

在设计使用头戴式设备并需要仔细检查 VR 器官等物体的视觉界面时，我们必须记住，人们在佩戴 VR 头戴式设备时比看电脑屏幕时更容易出现晕动病。

虚拟现实中的品牌体验

VR 为公司创造了一个机会，可以为客户提供更身临其境的品牌体验。 这是品牌内容和讲故事的新领域。 奥迪使用虚拟现实技术，因此他们甚至可以在亲身接触之前体验新车型。 通过使用特殊的 3-D 摄像头捕捉车辆的整个内部，它们可以让客户在上市前看到每一个细节。

虚拟现实设计和营销的有效利用使品牌能够利用以下设计组件：

1. 深思熟虑的创意策略
2. 可用性最佳实践的应用
3. 强大的叙事和讲故事
4. 人体工学信息展示
5. 引人注目的视觉设计和模拟

对于设计师来说，可用性的定义将大大扩展，涵盖各个方面，包括环境的舒适度。 设计师需要了解在某些情况下潜在的不适程度，例如高度、小空间（幽闭恐惧症）、大空间（广场恐惧症）、规模、速度、碰撞物体、用户疲劳、人体工程学等。

为了传达车辆在困难情况下的可靠性和安全性，丰田让客户沉浸在叙事 VR 体验中。 他们可以在不同的环境中体验品牌以及独特的定制内容。 这为公司向客户展示他们以前从未见过的品牌的一面打开了大门。

作为深度参与创造此类体验的设计师，我们必须质疑我们的创意和解决方案对品牌的有用性，并确保我们真正解决了特定的业务问题。 我们应该扪心自问，VR 体验是否符合公司的基本价值主张。

VR 应用的正当理由

为了产生更多的同理心并让需要捐赠者的人的生活背景化，一些非营利组织正在使用 VR 将游客带入难民营内的生活。 这增加了参与度和支持他们倡议的更多意愿。 像这样的想法可以将大品牌所做的 VR 设计工作转变为非营利空间。

作为另一个例子，马克扎克伯格向世界展示了一场飓风袭击波多黎各的 VR 之旅，以提高人们对这种情况的认识。 这些想法和用例是“几乎无限的”——双关语。

使用虚拟现实耳机和遥控器，用户可以通过移动头部来探索环境，并用手与物体互动。 HTC Vive 或 Oculus Rift 等高端 VR 系统使用传感器在物理空间中定位用户，因此，设计师可以利用用户的整个身体在现实世界中打造更完整、更增强的感官体验。

未来是 AI、AR、VR 和 MR 之间的平衡组合

人工智能的最新发展，特别是深度学习，促进了实时图像和语音识别，有助于将 VR 和人工智能结合起来用于新的应用程序。 产品设计的未来将需要考虑所有这三种技术的结合。 值得注意的例子是 Eolian 应用程序，它使用 AI 技术通过 AR 和 VR 模拟危险任务来降低人为错误率。

Virtualitics 通过机器学习和人工智能在 VR 和 AR 环境中提供数据可视化。 这些技术是帮助我们以前所未有的方式讲述故事和分享信息的工具。 它们可以用作非常强大的情感参与工具，使我们能够建立同理心并与观众建立联系——这超出了电视、电脑或互联网过去所能提供的范围。

这是使用这些技术的激动人心的时刻； 大多数问题都是新的，旧的指导方针通常不适用。 麻省理工学院等机构正在引领新思想的激进实验。 例如，麻省理工学院游戏实验室正在创建 Play Labs，以加速 AR、VR 和 AI 领域的初创公司。 这无疑会激励许多创新者。

未来可能被称为超现实——人工智能、增强现实、虚拟现实和混合现实的结合。 一项有趣的创新是 EscapeLabs，它使用增强现实和混合现实 (AR/MR) 为逃生室、团队建设练习和房间规模的益智游戏创造全息体验。 可以想象，不再需要笨重的耳机和连接静态计算机的要求。 虚拟世界和现实世界之间的过渡将变得更容易和更快——超沉浸感。

在我们发现社交分享是推动参与的关键之前，互联网已经存在了很多年。 同样，预计这些技术的组合将出现类似的增长，设计师的就业机会在未来几年内呈爆炸式增长。

新技术带来了许多未知因素，因此需要建立最佳实践、标准和设计模式。 假设这就是用户体验设计师在未来几年将拥有长期工作保障的原因。 设计师总是需要采用以用户为中心的设计技术来为产品注入温暖。 这些技术最好的部分是我们仍处于起步阶段，我们的创意社区需要解决很多问题。 未来激动人心的时刻！

• • •

进一步阅读 Toptal 设计博客：

• UI 设计最佳实践和常见错误
• 空状态——用户体验中最容易被忽视的方面
• 简单是关键——探索最小的网页设计
• 移动界面的启发式原则
• 可读性设计——网页排版指南