新現實：VR、AR、MR 和設計的未來

人工智能、增強現實和虛擬現實的進步為設計師帶來了新的設計機會。

數字和技術領域在不斷變化，並且在許多方面都在加速。 負責提出創新想法的設計師必須跟踪趨勢和創意機會在哪裡。 認識到行業正在發生的變化將有助於設計師進行更智能的設計並做出更明智的創意決策。

在技​​術採用生命週期中，“創新者”是最小的群體，但卻是最成功的群體。 緊隨其後的是“早期採用者”，然後是“早期多數”，然後是“多數”或其他所有人。 作為創新者，偉大的設計師通常屬於“早期採用者”類別——未知領域的大冒險者。 一個偉大的設計師也是一個有遠見的人，能夠戰略性地思考和分析趨勢，以設計更好的產品或服務。

讓我們看看一些創造性的機會和新興技術，以及為什麼為了設計未來，設計師需要超越屏幕思考新的現實。

新技術格局：人工輔助人工智能、增強現實、虛擬現實和混合現實

什麼是人工智能？

人工智能 (AI) 賦予計算機或計算機控制設備執行智能任務的能力，例如推理或從經驗中學習。 認知計算是十年前開始使用的術語——即面對認知超載，我們將需要幫助來做出決策。 引用當前使用的人工智能的明顯優勢，我們已經在依靠 Siri 和 Alexa（以及其他）等人工智能數字助理來幫助我們做出簡單的決定。

產品設計師將擁有越來越多的數據信息來為他們的設計決策提供信息。 人工智能專家利用人工智能技術創建動態用戶界面，通過分析應用程序或網站中的每次交互來個性化每個用戶體驗。 未來，計算機將在做出基於數據的決策方面做得更好，以改進自動化任務和我們的人類決策過程。

隨著 IBM 的 Watson 引領通用汽車、康泰納仕、葛蘭素史克、花旗集團和安德瑪等公司的發展，人工智能的未來將全在於高效地做出複雜而重要的決策。

作為創意專業人士，我們可以在多個垂直行業中使用這些想法。 例如，The North Face 使用 Watson 幫助創建直觀的電子商務界面，幫助客戶做出最佳購買決策。

虛擬助手——人工智能技術在行動

Siri、Alexa、Cortana、Watson 等虛擬助手依靠人工智能來幫助完成從尋找餐廳到發送電子郵件或安排會議的所有工作。 其中許多是通過語音操作的，對於人類來說，這是一種比傳統的窗口和按鈕視覺 UI 更自然的界面。 這些技術可能會重塑搜索引擎的當前設計。

對於人類來說，說話是一種自然而直接的互動方式。 因此，語音控制的虛擬助手在我們家中獲得了良好的採用率也就不足為奇了。 用戶可以簡單地與系統交談，而不是用手或手勢“操作”它。 例如，在 iPhone 上，只使用一個快速請求，Siri 就允許我們通過 PayPal 向另一個人轉賬。

隨著人工智能被集成到應用程序中，它將幫助智能虛擬助理（IVA）變得越來越智能。 然而，無論 IVA 變得多麼聰明，視力不佳或其他身體殘疾的用戶（使用屏幕閱讀器和其他輔助技術）仍可能面臨重大挑戰。 這將取決於用戶體驗設計師與用戶體驗研究人員合作來彌合這些關鍵的可訪問性差距。

機器智能如何為無人駕駛世界提供動力

未來的交通系統將使交通順暢高效地通過我們的街道。 模塊化、可拆卸巴士、飛行出租車和懸掛式磁吊艙網絡等設計創新將使動態、無人駕駛世界的夢想成為現實。

幾年前的科幻新聞現在正在成為現實。 Wheelys 的 Moby-Mart 是一家擁有全息售貨員的自動駕駛商店，可能會改變電子商務設計的世界。

下一代電子商務設計師將需要物理和數字空間的多專業化。 未來的設計師將需要設計一種體驗，其中許多熟悉的人類元素被移除或遠程。

Amazon Go，一家沒有收銀員的商店，是設計未來外觀和感覺的一個很好的例子。 他們設計了一種購物體驗，任何人都可以手持產品進入商店、瀏覽、購物和離開，沒有任何摩擦。 收銀台沒有排隊。

每輛自動駕駛汽車內置的智能使其能夠為我們做出所有正確的決定——從最佳路線到人類安全問題。 此類複雜設計系統的創建正在創建一個產品模板，該模板將啟動在運輸垂直領域之外設計的新一輪產品浪潮。

汽車內飾設計師有必要創造出使內部空間舒適和適應性強的設計。 界面需要直觀且令人放心，以鼓勵乘客信任，同時關注共享旅程的人之間的人際互動。

增強現實

增強現實 (AR) 作為您面前世界頂部的虛擬層，處於發現和創新的新時代。 雖然早期的 AR 應用依賴於智能手機或平板電腦，但它們很快將擴展到智能眼鏡等可穿戴設備，需要不同類型的 UX 和設計流程——在更小的屏幕範圍之外進行思考。

雖然關於 AR、VR 和 MR 的爭論仍在繼續，但增強現實是設計師使用圖像、對象和顏色識別創建應用程序的獨特機會。 就像人工智能利用數據做出決策一樣，增強現實利用對給定空間內關鍵“錨”對象和點的識別。

AI 和 AR 完美結合的一個很好的例子是 Apple 的 Animoji，它是 iPhone X 的動畫表情符號。根據 Apple 的說法，Animoji 是“使用您的聲音並反映您的面部表情的自定義動畫消息”。 得益於 iPhone X ace-scanning 功能，渲染和動畫實時工作。

Meta – 打造沉浸式 AR 體驗

未來五年，AR 將更好地融入我們的日常生活，將我們的物理世界和數字世界與新的可穿戴產品融合在一起。 像 Meta 眼鏡這樣將增強現實疊加在用戶現實之上的產品很可能會成為遊戲設計師的流行媒介。

Meta眼鏡基於全息技術，可以識別用戶的手勢，讓他們操縱物體的3D投影。 有這麼多基於手勢的設備，標準化和文化差距可能成為該領域設計師的主要挑戰。

“生產力的未來是空間的，”Meta 在介紹他們的 AR 工作區時說。 未來，可穿戴硬件將使員工能夠免提工作。 未來的設備可以處理語音命令或手勢。 AR 體驗的日益成功可能預示著物理控制器（例如鼠標光標或鍵盤）的終結。

在增強現實中，自然手勢可能是體驗的關鍵驅動因素。 例如，用手指模擬按鈕的點擊會觸發與虛擬鏈接或按鈕的交互。 谷歌推出了 Soli 項目，該項目更進了一步——他們創造了一種只專注於非接觸式交互的傳感技術。 為了保持用戶友好，這樣的體驗需要一個最小的界面，幾乎沒有視覺過載。

一些著名的增強現實設計和開發資源：

• Facebook Frame 和 AR 工作室
• 蘋果 ARkit

AR增強生活

作為其概念廚房的一部分，宜家正在開發一款智能餐桌，可根據放置在上面的食材推薦食譜。 這是 AR 技術在現實世界中發揮作用的一個很好的例子。 交互式桌子有一個配備攝像頭的投影儀，可以在其表面顯示食譜並識別成分，讓您了解如何用手頭的東西製作什麼。

這種身臨其境的體驗與移動應用程序直接競爭，移動應用程序由於功能受限，很快就會顯得過時。 移動應用程序設計師將很快創建與物理空間集成的增強應用程序，以提供一種新的、令人興奮的與我們的物理環境交互的方式。

使用 AR 工作的未來

增強現實也可用於知識轉移，例如工業環境中的培訓。 想像一下，通過上下文視頻向員工展示如何完成特定任務，而不是解釋。 這為電子學習領域的設計師打開了創建下一代 AR 界面的大門。

波音公司使用由 Skylight 提供支持的 AR 眼鏡來指導技術人員每年為數百架飛機接線。 可穿戴顯示器可幫助技術人員識別並準確連接數百條電線，僅使用他們的視覺和聲音來控制應用程序。 結果，波音公司將生產時間縮短了 25%，並將錯誤率降低到幾乎為零。

在操作 AR 應用程序時，簡單的語音控制系統可降低執行複雜任務的交互成本。 最小化界面元素可以減少用戶的認知負擔、最小化干擾並減少分心。

增強現實技術可以改變客戶和員工接受新信息培訓和介紹的方式。 想像一下培訓模塊，例如如何在汽車中更換機油，或其他“如何”培訓視頻，使用 AR 將指示疊加到現實生活中。

從可用性的角度來看，設計師不僅需要考慮系統在視覺上呈現給用戶的內容，還需要考慮大腦如何解釋與實際現實重疊的複雜信息。

虛擬現實和混合現實

虛擬現實 (VR) 讓您完全沉浸在虛擬世界中，而混合現實 (MR)，有時也稱為混合現實，是真實世界和虛擬世界的融合。 VR 可用於虛擬辦公室、產品、2017 年青少年選擇獎等活動等。 借助 VR，設計師及其客戶將能夠在進入生產階段之前預覽縮放到真實、真人大小的環境和深度的設計。

2017 年初，福布斯觀察到“圍繞虛擬現實的炒作正在消退”。 明顯的限制 VR 面部是頭顯的高價、過度使用帶來的不適、視覺質量差等等。 因此，與“可能在短期內表現更好”的 AR 相比，VR 技術的大眾市場採用緩慢。

虛擬現實應用

虛擬現實內容的新穎性為吸引大量觀眾提供了獨特的機會，正如國家地理的 VR 紀錄片所展示的那樣：保護者，穿上護林員的鞋子。 與其他自然主題紀錄片相比，它受到了更多關注。

除了將觀眾帶到新的地方之外，設計師的下一個機會是幫助他們體驗另一個人的生活。 提供第一人稱視角可以創建獨特而有效的活動，例如以同理心為中心的“癡呆症之旅”。

VR 設計師最終會出現一套新的設計模式，但扁平化設計方法不太可能成功。 在 VR 中，我們的大腦使用時空定位和解決問題的能力； 因此，必須使用紋理、照明和更精細的細節來獲得更可信和身臨其境的體驗。

VR 讓用戶能夠近距離接觸虛擬物體，也可以遠離它們。 由於眼睛非常擅長挑選深度信息，因此設計師對物體的渲染需要真實而細緻。 聲音和音樂是 VR 設計師的其他重要考慮因素。

MR – 混合現實和虛擬現實

Microsoft HoloLens 混合現實將 3D 全息內容與物理世界融合在一起，為全息圖提供真實世界的上下文和規模。 MR 技術將人的物理環境與來自物理世界和數字世界的物體混合在一起。 使用這種 MR 技術，我們可以與數字內容和我們周圍的世界進行交互，也可以與 3D 全息投影進行交互。

MR 和 VR 應用程序為設計師提供了新的創作自由。 我們可以創造體驗，讓用戶可以與產品進行虛擬交互並訪問遙遠的環境、歷史事件、音樂會等等。 在我們創造的虛擬或混合現實中，我們可以以無限的可能性彎曲物理定律，以前所未有的方式體驗世界。

從設計和可用性的角度來看，要牢記的一個關鍵原則是讓用戶放心，並通過讓他們在現實世界中紮根來避免不舒服的感覺。 為此，我們可以利用聲音、運動和良好的規模感——我們創建的虛擬環境和交互應該感覺自然且符合人體工程學，而不一定是真實的。

在設計使用頭戴式設備並需要仔細檢查 VR 器官等物體的視覺界面時，我們必須記住，人們在佩戴 VR 頭戴式設備時比看電腦屏幕時更容易出現暈動病。

虛擬現實中的品牌體驗

VR 為公司創造了一個機會，可以為客戶提供更身臨其境的品牌體驗。 這是品牌內容和講故事的新領域。 奧迪使用虛擬現實技術，因此他們甚至可以在親身接觸之前體驗新車型。 通過使用特殊的 3-D 攝像頭捕捉車輛的整個內部，它們可以讓客戶在上市前看到每一個細節。

虛擬現實設計和營銷的有效利用使品牌能夠利用以下設計組件：

1. 深思熟慮的創意策略
2. 可用性最佳實踐的應用
3. 強大的敘事和講故事
4. 人體工學信息展示
5. 引人注目的視覺設計和模擬

對於設計師來說，可用性的定義將大大擴展，涵蓋各個方面，包括環境的舒適度。 設計師需要了解在某些情況下潛在的不適程度，例如高度、小空間（幽閉恐懼症）、大空間（廣場恐懼症）、規模、速度、碰撞物體、用戶疲勞、人體工程學等。

為了傳達車輛在困難情況下的可靠性和安全性，豐田讓客戶沉浸在敘事 VR 體驗中。 他們可以在不同的環境中體驗品牌以及獨特的定制內容。 這為公司向客戶展示他們以前從未見過的品牌的一面打開了大門。

作為深入參與創造此類體驗的設計師，我們必須質疑我們的創意和解決方案對品牌的有用性，並確保我們真正解決了特定的業務問題。 我們應該捫心自問，VR 體驗是否符合公司的基本價值主張。

VR 應用的正當理由

為了產生更多的同理心並讓需要捐贈者的人的生活背景化，一些非營利組織正在使用 VR 將游客帶入難民營內的生活。 這增加了參與度和支持他們倡議的更多意願。 像這樣的想法可以將大品牌所做的 VR 設計工作轉變為非營利空間。

作為另一個例子，馬克扎克伯格向世界展示了一場颶風襲擊波多黎各的 VR 之旅，以提高人們對這種情況的認識。 這些想法和用例是“幾乎無限的”——雙關語。

使用虛擬現實耳機和遙控器，用戶可以通過移動頭部來探索環境，並用手與物體互動。 HTC Vive 或 Oculus Rift 等高端 VR 系統使用傳感器在物理空間中定位用戶，因此，設計師可以利用用戶的整個身體在現實世界中打造更全面、更增強的感官體驗。

未來是 AI、AR、VR 和 MR 之間的平衡組合

人工智能的最新發展，特別是深度學習，促進了實時圖像和語音識別，有助於將 VR 和人工智能結合起來用於新的應用程序。 產品設計的未來將需要考慮所有這三種技術的結合。 值得注意的例子是 Eolian 應用程序，它使用 AI 技術通過 AR 和 VR 模擬危險任務來降低人為錯誤率。

Virtualitics 通過機器學習和人工智能在 VR 和 AR 環境中提供數據可視化。 這些技術是幫助我們以前所未有的方式講述故事和分享信息的工具。 它們可以用作非常強大的情感參與工具，使我們能夠建立同理心並與觀眾建立聯繫——這超出了電視、電腦或互聯網過去所能提供的範圍。

這是使用這些技術的激動人心的時刻； 大多數問題都是新的，舊的指導方針通常不適用。 麻省理工學院等機構正在引領新思想的激進實驗。 例如，麻省理工學院遊戲實驗室正在創建 Play Labs，以加速 AR、VR 和 AI 領域的初創公司。 這無疑會激勵許多創新者。

未來可能被稱為超現實——人工智能、增強現實、虛擬現實和混合現實的結合。 一項有趣的創新是 EscapeLabs，它使用增強現實和混合現實 (AR/MR) 為逃生室、團隊建設練習和房間規模的益智遊戲創造全息體驗。 可以想像，不再需要笨重的耳機和連接靜態計算機的要求。 虛擬世界和現實世界之間的過渡將變得更容易和更快——超沉浸感。

在我們發現社交分享是推動參與的關鍵之前，互聯網已經存在了很多年。 同樣，預計這些技術的組合將出現類似的增長，設計師的就業機會在未來幾年內呈爆炸式增長。

新技術帶來了許多未知因素，因此需要建立最佳實踐、標準和設計模式。 假設這就是用戶體驗設計師在未來幾年將擁有長期工作保障的原因。 設計師總是需要採用以用戶為中心的設計技術來為產品注入溫暖。 這些技術最好的部分是我們仍處於起步階段，我們的創意社區需要解決很多問題。 未來激動人心的時刻！

• • •

進一步閱讀 Toptal 設計博客：

• UI 設計最佳實踐和常見錯誤
• 空狀態——用戶體驗中最容易被忽視的方面
• 簡單是關鍵——探索最小的網頁設計
• 移動界面的啟發式原則
• 可讀性設計——網頁排版指南