새로운 현실: VR, AR, MR 및 디자인의 미래

인공 지능, 증강 현실 및 가상 현실의 발전은 디자이너에게 새로운 디자인 기회를 의미합니다.

디지털 및 기술 환경은 끊임없이 변화하고 있으며 여러 면에서 가속화되고 있습니다. 혁신적인 아이디어를 내놓는 임무를 맡은 디자이너는 트렌드와 창의적인 기회가 어디에 있는지 추적해야 합니다. 업계에서 일어나고 있는 변화를 인식하는 것은 디자이너가 더 똑똑하게 디자인하고 보다 정보에 입각한 창의적인 결정을 내리는 데 도움이 될 것입니다.

기술 채택 수명 주기에서 "혁신가"는 가장 작지만 가장 성공적인 그룹입니다. 그 다음에는 "얼리 어답터", "조기 다수", 나중에 "다수 다수" 또는 기타 모든 사람이 따릅니다. 혁신가로서 훌륭한 디자이너는 일반적으로 미지의 영역에서 큰 위험을 감수하는 "얼리 어댑터" 범주에 속합니다. 훌륭한 디자이너는 또한 더 나은 제품이나 서비스를 디자인하기 위해 전략적으로 사고하고 트렌드를 분석하는 능력을 가진 선견지명입니다.

창의적인 기회와 새로운 기술, 그리고 미래를 디자인하기 위해 디자이너가 화면 너머에서 새로운 현실을 생각해야 하는 이유를 살펴보겠습니다.

새로운 기술 환경: 인간 지원 AI, 증강 현실, 가상 현실 및 혼합 현실

인공 지능이란 무엇입니까?

인공 지능(AI)은 컴퓨터 또는 컴퓨터 제어 장치에 추론 또는 경험을 통한 학습과 같은 지능적 작업을 수행할 수 있는 능력을 부여합니다. 인지 컴퓨팅 은 10년 전에 시작되었을 때 사용된 용어였습니다. 인지 과부하에 직면하여 결정을 내리는 데 도움이 필요하다는 생각이었습니다. 현재 사용 중인 인공 지능의 명백한 장점을 인용하면서 우리는 이미 Siri 및 Alexa와 같은 AI 디지털 비서에 의존하여 간단한 결정을 내리고 있습니다.

제품 설계자는 설계 결정을 알리는 데 사용할 데이터 정보의 양이 증가할 것입니다. 인공 지능 전문가는 AI 기술을 활용하여 앱 또는 웹 사이트 내의 모든 상호 작용을 분석하여 각 사용자 경험을 개인화하고 동적 사용자 인터페이스를 생성합니다. 미래에 컴퓨터는 자동화된 작업과 인간의 의사 결정 프로세스를 개선하기 위해 데이터 기반 의사 결정을 훨씬 더 잘 할 것입니다.

IBM의 Watson이 General Motors, Conde Nast, GSK, Citigroup 및 Under Armour와 같은 회사를 이끌고 있는 가운데 AI의 미래는 복잡하고 중요한 결정을 효율적으로 내리는 것이 전부가 될 것입니다.

창의적인 전문가로서 우리는 다양한 산업 분야에서 이러한 아이디어를 사용할 수 있습니다. 예를 들어 The North Face는 Watson을 사용하여 고객이 최적의 구매 결정을 내리는 데 도움이 되는 직관적인 전자 상거래 인터페이스를 만들었습니다.

가상 비서 – 실행 중인 AI 기술

Siri, Alexa, Cortana, Watson 등과 같은 가상 비서는 인공 지능을 사용하여 식당 찾기에서 이메일 보내기 또는 회의 예약에 이르기까지 모든 작업을 지원합니다. 이들 중 다수는 창과 버튼의 전통적인 시각적 UI보다 인간에게 더 자연스러운 인터페이스인 음성으로 작동됩니다. 이러한 기술은 검색 엔진의 현재 디자인을 재편할 가능성이 높습니다.

말하기는 인간에게 자연스럽고 직접적인 상호작용 방법입니다. 따라서 음성 제어 가상 비서가 가정에서 좋은 채택률을 받은 것은 놀라운 일이 아닙니다. 사용자는 손이나 제스처로 시스템을 "조작"하지 않고 단순히 시스템에 말할 수 있습니다. 예를 들어 iPhone의 경우 빠른 요청을 한 번만 사용하면 Siri를 통해 PayPal을 통해 다른 사람에게 돈을 이체할 수 있습니다.

AI가 앱에 통합됨에 따라 지능형 가상 비서(IVA)가 점점 더 지능화되는 데 도움이 될 것입니다. 그럼에도 불구하고 IVA가 얼마나 똑똑해졌는지에 상관없이 시력이 좋지 않거나 기타 신체 장애가 있는 사용자(스크린 리더 및 기타 보조 기술을 사용하는 사용자)는 여전히 심각한 문제에 직면할 수 있습니다. 사용자 경험 연구원과 협력하여 이러한 중요한 접근성 격차를 해소하는 것은 UX 디자이너에게 달려 있습니다.

기계 지능이 무인 세상을 이끄는 방법

미래의 대중 교통 시스템은 우리 거리의 교통 흐름을 원활하고 효율적으로 만들 것입니다. 모듈식 분리형 버스, 하늘을 나는 택시, 매달린 마그네틱 포드 네트워크와 같은 설계 혁신은 역동적이고 무인 세상의 꿈을 현실로 만들 것입니다.

몇 년 전 SF 뉴스였던 것이 이제 현실이 되고 있습니다. Wheelys의 Moby-Mart는 전자 상거래 디자인의 세계를 바꿀 가능성이 있는 홀로그램 매장 도우미가 있는 자율 주행 매장입니다.

차세대 전자 상거래 디자이너는 물리적 공간과 디지털 공간 모두에서 다중 전문화가 필요합니다. 미래의 디자이너는 친숙한 인간 요소가 많이 제거되거나 멀리 있는 경험을 디자인해야 합니다.

계산원이 없는 매장인 Amazon Go는 미래를 디자인하는 것이 어떤 것인지 보여주는 좋은 예입니다. 그들은 누구나 제품을 손에 들고 마찰 없이 매장에 입장하고, 탐색하고, 쇼핑하고, 나갈 수 있는 쇼핑 경험을 설계했습니다. 계산대에 줄이 없습니다.

각 자율주행 차량에 내장된 인텔리전스를 통해 최적의 경로 지정부터 인간의 안전 문제에 이르기까지 우리를 위한 모든 올바른 결정을 내릴 수 있습니다. 이러한 복잡한 디자인 시스템의 생성은 운송 분야 외부에서 디자인된 제품의 새로운 물결을 시작할 제품 템플릿을 생성하는 것입니다.

자동차 인테리어 디자이너는 실내 공간을 편안하고 적응력 있게 만드는 디자인을 만드는 것이 필요하게 될 것입니다. 인터페이스는 승차감을 공유하는 사람들 간의 인간 상호 작용에 초점을 맞추면서 승객의 신뢰를 장려하기 위해 직관적이고 안심할 수 있어야 합니다.

증강 현실

증강 현실(AR)은 눈앞의 세계 위에 가상 레이어 역할을 하며 새로운 발견과 혁신의 시대에 있습니다. 초기 AR 애플리케이션은 스마트폰이나 태블릿에 의존했지만 곧 다른 종류의 UX와 디자인 프로세스가 필요한 스마트 안경과 같은 웨어러블 기기로 확장될 것입니다.

AR vs. VR vs. MR에 대한 논쟁이 계속되는 동안 증강 현실은 디자이너가 이미지, 객체 및 색상 인식을 사용하여 앱을 만들 수 있는 독특한 기회입니다. AI가 데이터를 활용하여 의사 결정을 내리는 것처럼 AR은 주어진 공간 내에서 주요 "앵커" 객체 및 포인트의 인식을 활용합니다.

AI와 AR의 완벽한 조합의 좋은 예는 iPhone X용 애니메이션 이모티콘인 Apple의 Animoji입니다. Apple에 따르면 Animoji는 "당신의 음성을 사용하고 얼굴 표정을 반영하는 맞춤형 애니메이션 메시지"입니다. iPhone X 에이스 스캐닝 기능 덕분에 렌더링 및 애니메이션이 실시간으로 작동합니다.

메타 – 몰입형 AR 경험 구축

향후 5년 동안 AR은 일상 생활과 더 잘 통합되어 물리적 세계와 디지털 세계를 새로운 웨어러블 제품과 결합할 것입니다. 사용자의 현실 위에 증강현실을 더한 메타안경과 같은 제품은 게임 디자이너들의 매체로 각광을 받을 것으로 보인다.

홀로그램 기술을 기반으로 메타 안경은 사용자의 제스처를 식별하여 개체의 3D 투영을 조작할 수 있습니다. 제스처를 기반으로 하는 장치가 너무 많기 때문에 표준화 및 문화적 격차가 현장에서 일하는 디자이너에게 주요 과제가 될 수 있습니다.

Meta는 AR Workspace를 소개하면서 "생산성의 미래는 공간적입니다."라고 말했습니다. 미래에는 웨어러블 하드웨어를 통해 직원이 핸즈프리로 작업할 수 있습니다. 미래의 장치는 음성 명령이나 제스처로 작동할 수 있습니다. AR 경험의 성공 증가는 마우스 커서나 키보드와 같은 물리적 컨트롤러의 종말을 예측할 수 있습니다.

증강 현실에서 자연스러운 제스처는 경험의 핵심 동인이 될 수 있습니다. 예를 들어, 손가락으로 버튼 클릭을 흉내내는 것은 가상 링크나 버튼과의 상호작용을 유발할 것입니다. Google은 한 단계 더 나아가 비접촉 상호작용에만 초점을 맞춘 감지 기술을 개발한 Soli 프로젝트를 시작했습니다. 사용자 친화성을 유지하기 위해 이러한 경험에는 시각적 과부하가 거의 또는 전혀 없는 최소한의 인터페이스가 필요합니다.

주목할만한 증강 현실 디자인 및 개발 리소스:

• 페이스북 프레임과 AR 스튜디오
• 애플 AR킷

AR로 강화된 생활

IKEA는 컨셉 키친의 일환으로 위에 놓인 재료를 기반으로 레시피를 제안하는 스마트 테이블을 개발하고 있습니다. 이것은 현실 세계에서 작동하는 AR 기술의 좋은 예입니다. 대화형 테이블에는 표면에 조리법을 보여주고 재료를 인식하는 카메라가 장착된 프로젝터가 있어 손에 들고 있는 것으로 무엇을 만들지 아이디어를 얻을 수 있습니다.

이러한 몰입형 경험은 제한된 기능으로 인해 곧 구식으로 보일 모바일 앱과 직접적인 경쟁 관계에 있습니다. 모바일 앱 디자이너는 곧 물리적 환경과 상호 작용하는 새롭고 흥미로운 방법을 제공하기 위해 물리적 공간과 통합되는 증강 애플리케이션을 만들 것입니다.

AR을 통한 작업의 미래

증강 현실은 산업 환경에서의 교육과 같은 지식 전달에도 사용될 수 있습니다. 설명하는 대신 상황별 비디오를 통해 작업자에게 특정 작업을 수행하는 방법을 보여주는 것을 상상해 보십시오. 이것은 e-러닝 분야의 디자이너들이 차세대 AR 인터페이스를 생성할 수 있는 기회를 제공합니다.

보잉은 스카이라이트로 구동되는 AR 안경을 사용하여 기술자들이 연간 수백 대의 비행기를 배선할 때 안내합니다. 웨어러블 디스플레이는 기술자가 시각과 음성만으로 수백 개의 전선을 식별하고 정확하게 연결하여 앱을 제어하는 ​​데 도움이 됩니다. 그 결과 Boeing은 생산 시간을 25% 단축하고 오류율을 거의 0으로 낮췄 습니다.

간단한 음성 제어 시스템은 AR 애플리케이션을 운영할 때 복잡한 작업을 수행하는 상호 작용 비용을 줄입니다. 인터페이스 요소를 최소화하면 사용자의 인지 부하가 ​​줄어들고 방해가 최소화되며 주의가 산만해집니다.

증강 현실 기술은 고객과 근로자가 새로운 정보를 교육받고 소개받는 방식을 바꿀 수 있습니다. 자동차 오일 교환 방법과 같은 교육 모듈이나 AR을 사용하여 실제 상황에 표시를 추가하는 기타 "방법" 교육 비디오를 상상해 보십시오.

사용성 관점에서 디자이너는 시스템이 사용자에게 시각적으로 무엇을 제시하는지뿐만 아니라 실제 현실과 겹치는 복잡한 정보를 두뇌가 해석하는 방법도 고려해야 합니다.

가상 현실 및 혼합 현실

가상 현실(VR)은 가상 세계에 완전히 몰입하게 하며, 혼합 현실(MR)은 때때로 하이브리드 현실이라고도 하며 현실과 가상 세계의 병합입니다. VR은 가상 사무실, 제품, 2017 Teen Choice Awards와 같은 이벤트 등에 사용할 수 있습니다. VR을 통해 디자이너와 고객은 프로덕션 단계에 들어가기 전에 실물 크기의 환경과 깊이로 확장된 디자인을 미리 볼 수 있습니다.

2017년 초 Forbes는 "가상 현실에 대한 과장된 광고가 사라지고 있다"고 말했습니다. 눈에 띄는 한계 VR 얼굴은 헤드셋에 대한 높은 가격, 광범위한 사용으로 인한 불편함, 열악한 시각적 품질 등입니다. 결과적으로 "단기적으로 더 나은 성과를 낼 것 같은" AR과 비교하여 VR 기술의 대중 시장 채택이 느리게 진행됩니다.

가상 현실 애플리케이션

가상 현실 콘텐츠의 참신함은 내셔널 지오그래픽(National Geographic: Protectors, Walk in the Ranger's Shoes)의 VR 다큐멘터리에서 보여주듯이 많은 청중을 참여시킬 수 있는 독특한 기회를 제공합니다. 다른 자연을 주제로 한 다큐멘터리에 비해 주목을 받았다.

시청자를 새로운 장소로 이동시키는 것 외에도 디자이너에게 다음 기회는 다른 사람으로서의 삶을 경험할 수 있도록 돕는 것입니다. 1인칭 시점을 제공하면 공감을 중심으로 한 "치매를 걷다"와 같은 독특하고 효과적인 캠페인을 만들 수 있습니다.

VR 디자이너를 위한 새로운 디자인 패턴 세트가 궁극적으로 등장할 것이지만 평면 디자인 접근 방식은 성공할 가능성이 낮습니다. VR에서 우리의 뇌는 시공간 방향과 문제 해결 능력을 사용합니다. 따라서 보다 사실적이고 몰입감 있는 경험을 위해 텍스처, 조명 및 미세한 디테일을 사용하는 것이 필수적입니다.

VR은 사용자에게 가상 물체를 가까이서 개인적으로 볼 수 있는 기능을 제공하고 가상 물체에서 뒤로 이동할 수도 있습니다. 눈은 깊이 정보를 잘 찾아내기 때문에 디자이너의 객체 렌더링은 사실적이고 디테일해야 합니다. 사운드와 음악은 VR 디자이너에게 또 다른 중요한 고려 사항입니다.

MR – 현실과 가상 현실의 혼합

Microsoft HoloLens 혼합 현실은 3D 홀로그램 콘텐츠를 실제 세계와 혼합하여 홀로그램에 실제 상황과 규모를 제공합니다. MR 기술은 사람의 물리적 환경을 물리적 세계와 디지털 세계의 사물과 혼합하고 혼합합니다. 이 MR 기술을 사용하여 우리는 디지털 콘텐츠 및 우리 주변 세계와 상호 작용할 수 있을 뿐만 아니라 3D 홀로그램 투영과 상호 작용할 수 있습니다.

MR 및 VR 애플리케이션은 디자이너에게 새로운 창의적 자유를 제공합니다. 우리는 사용자가 가상으로 제품과 상호 작용하고 먼 환경, 역사적 이벤트, 콘서트 등을 방문할 수 있는 경험을 만들 수 있습니다. 우리가 만드는 가상 또는 혼합 현실 내에서 우리는 무한한 가능성으로 물리 법칙을 구부릴 수 있으며 이전과는 다른 세상을 경험할 수 있습니다.

디자인과 사용성 측면에서 염두에 두어야 할 핵심 원칙은 사용자를 현실 세계에 머물게 하여 사용자를 편안하게 하고 불편한 감각을 피하는 것입니다. 이를 위해 사운드, 모션 및 우수한 규모 감각을 활용할 수 있습니다. 우리가 만드는 가상 환경과 상호 작용은 반드시 현실적이지 않고 자연스럽고 인체 공학적으로 느껴져야 합니다.

헤드셋을 사용하고 VR 오르간과 같은 물체에 대한 면밀한 조사가 필요한 시각적 인터페이스를 설계할 때 사람들은 컴퓨터 화면을 볼 때보다 VR 헤드셋을 착용할 때 멀미에 훨씬 더 취약하다는 점을 염두에 두어야 합니다.

가상 현실에서의 브랜드 경험

VR은 기업이 고객에게 브랜드에 대한 보다 몰입도 높은 경험을 제공할 수 있는 기회를 제공합니다. 브랜드 콘텐츠와 스토리텔링의 새로운 영역입니다. Audi는 VR을 사용하여 물리적으로 만지기 전에 자동차의 새 모델을 경험할 수 있습니다. 특별한 3D 카메라로 차량의 전체 내부를 캡처하여 고객이 시장 출시 전에 모든 세부 사항을 볼 수 있습니다.

가상 현실 디자인 및 마케팅을 효과적으로 사용하면 브랜드는 다음과 같은 디자인 구성 요소를 활용할 수 있습니다.

1. 잘 짜여진 크리에이티브 전략
2. 사용성 모범 사례 적용
3. 탄탄한 스토리텔링과 스토리텔링
4. 인체공학적 정보 프레젠테이션
5. 매력적인 시각 디자인 및 시뮬레이션

사용성 정의는 디자이너에게 크게 확장되어 환경의 편안함 수준을 포함한 모든 측면을 다룹니다. 디자이너는 높이, 작은 공간(밀실 공포증), 큰 공간(광장 공포증), 규모, 속도, 충돌하는 물체, 사용자 피로, 인체 공학 등과 같은 특정 상황에서 잠재적인 불편함의 수준에 대한 이해를 개발해야 합니다.

어려운 상황에서 차량의 신뢰성과 안전성을 전달하기 위해 Toyota는 내러티브 VR 경험에 고객을 몰입시킵니다. 다양한 환경에서 브랜드와 차별화된 맞춤형 콘텐츠를 경험할 수 있습니다. 이는 기업이 고객에게 이전에 본 적이 없는 브랜드의 측면을 보여줄 수 있는 기회를 제공합니다.

이러한 경험을 만드는 데 깊이 관여하는 디자이너로서 우리는 브랜드에 대한 창의적인 아이디어와 솔루션의 유용성에 대해 의문을 제기하고 특정 비즈니스 문제를 진정으로 해결하고 있는지 확인해야 합니다. VR 경험이 회사의 기본 가치 제안을 전달하는지 자문해야 합니다.

좋은 목적을 위한 VR 애플리케이션

기부가 필요한 사람들의 삶에 더 많은 공감을 불러일으키고 상황을 설명하기 위해 일부 비영리 단체에서는 VR을 사용하여 방문자를 난민 캠프 내부의 삶으로 안내하고 있습니다. 이는 참여도를 높이고 이니셔티브를 지원하려는 의지를 높입니다. 이와 같은 아이디어는 대형 브랜드에서 수행하는 VR 디자인 작업을 비영리 공간으로 전환할 수 있습니다.

또 다른 예로, Mark Zuckerberg는 상황에 대한 인식을 높이기 위해 허리케인이 강타한 푸에르토리코의 VR 투어를 세계에 보여주었습니다. 아이디어와 사용 사례는 "사실상 무제한"입니다.

가상 현실 헤드셋과 리모컨을 사용하여 사용자는 머리를 움직여 환경을 탐색하고 손을 사용하여 사물과 상호 작용할 수 있습니다. HTC Vive 또는 Oculus Rift와 같은 고급 VR 시스템은 센서를 사용하여 물리적 공간에서 사용자의 위치를 ​​파악하므로 디자이너는 사용자의 전신을 활용하여 현실 세계에서 보다 풍부하고 향상된 감각 경험을 제작할 수 있습니다.

미래는 AI, AR, VR 및 MR 간의 균형 잡힌 혼합입니다.

실시간 이미지 및 음성 인식을 촉진하는 AI, 특히 딥 러닝의 최근 개발은 새로운 애플리케이션을 위해 VR과 AI를 결합하는 데 도움이 되었습니다. 제품 디자인 의 미래는 이 세 가지 기술의 조합을 고려해야 합니다. 주목할만한 예로는 AI 기술을 사용하여 위험한 작업의 AR 및 VR 시뮬레이션을 통해 인적 오류율을 줄이는 Eolian 애플리케이션이 있습니다.

버추얼틱스는 머신 러닝과 AI를 통해 VR 및 AR 환경에서 데이터 시각화를 제공합니다. 이러한 기술은 이전과는 다른 방식으로 이야기를 전달하고 정보를 공유하는 데 도움이 되는 도구입니다. 그들은 TV, 컴퓨터 또는 인터넷이 제공하는 것 이상으로 우리가 공감을 구축하고 청중과 연결할 수 있게 해주는 믿을 수 없을 정도로 강력한 정서적 참여 도구로 사용될 수 있습니다.

지금은 이러한 기술로 작업하기에 흥미로운 시기입니다. 대부분의 문제는 새로운 것이며 오래된 지침은 종종 적용되지 않습니다. MIT와 같은 기관은 새로운 아이디어에 대한 급진적인 실험을 주도하고 있습니다. 예를 들어, MIT Game Lab은 AR, VR 및 AI의 스타트업을 가속화하기 위해 Play Labs를 만들고 있습니다. 이것은 의심할 여지 없이 많은 혁신가들에게 영감을 줄 것입니다.

미래는 AI, AR, VR 및 MR이 결합된 하이퍼 리얼리티 라고 부를 수 있습니다. 흥미로운 혁신 중 하나인 EscapeLabs는 증강 현실 및 혼합 현실(AR/MR)을 사용하여 탈출실, 팀 구성 연습 및 방 규모 퍼즐 게임을 위한 홀로그램 경험을 만듭니다. 투박한 헤드셋이 필요하지 않고 정적 컴퓨터에 연결해야 하는 요구 사항이 더 이상 필요하지 않을 수 있습니다. 가상 세계와 현실 세계 간의 전환이 더 쉽고 빨라지며 몰입도가 매우 높아집니다.

인터넷은 소셜 공유가 참여를 유도하는 핵심이라는 사실을 발견하기 전에 수년 동안 존재했습니다. 마찬가지로, 이러한 기술의 조합이 유사한 성장을 보일 것으로 예상되며, 향후 몇 년 내에 디자이너의 일자리 기회가 폭발적으로 증가할 것입니다.

새로운 기술에는 알려지지 않은 것이 많이 있으므로 모범 사례, 표준 및 디자인 패턴을 수립해야 합니다. 이것이 UX 디자이너가 향후 몇 년 동안 장기적인 직업 안정성을 갖게 되는 이유라고 가정합니다. 제품에 따뜻함을 더하기 위해 사용자 중심의 디자인 기법을 사용하는 디자이너는 항상 필요합니다. 이러한 기술의 가장 좋은 점은 우리가 아직 시작 단계에 있다는 것이며, 우리의 크리에이티브 커뮤니티에서 많은 부분을 파악해야 합니다. 앞으로의 흥미진진한 시간들!

• • •

Toptal Design 블로그에 대한 추가 정보:

• UI 디자인 모범 사례 및 일반적인 실수
• 빈 상태 – UX에서 가장 간과되는 측면
• 단순함이 핵심 - 최소한의 웹 디자인 탐색
• 모바일 인터페이스에 대한 경험적 원리
• 가독성을 위한 디자인 – 웹 타이포그래피 가이드