Noi realități: VR, AR, MR și viitorul designului

Progresele în inteligența artificială, realitatea augmentată și realitatea virtuală înseamnă oportunități noi de design pentru designeri.

Peisajul digital și tehnologic este în continuă schimbare și, în multe privințe, se accelerează. Designerii însărcinați să vină cu idei inovatoare trebuie să urmărească ceea ce este în tendințe și unde sunt oportunitățile creative. Recunoașterea schimbărilor care au loc în industrie îi va ajuta pe designeri să proiecteze mai inteligent și să ia decizii creative mai informate.

În ciclul de viață de adoptare a tehnologiei, „inovatorii” sunt cel mai mic grup, dar cel mai de succes. Ei sunt urmați de „Early Adopters”, apoi „Early Majority” și mai târziu, „Majoritatea” sau toți ceilalți. În calitate de inovatori, marii designeri se încadrează, de obicei, în categoria „Early Adopters” – cei mari asumați riscuri pe un teritoriu neexplorat. Un mare designer este, de asemenea, un vizionar cu capacitatea de a gândi strategic și de a analiza tendințele pentru a proiecta produse sau servicii mai bune.

Să ne uităm la câteva oportunități creative și tehnologii emergente și de ce, pentru a proiecta viitorul, designerii trebuie să gândească dincolo de ecran la noi realități.

Un nou peisaj tehnologic: IA asistată de om, realitate augmentată, realitate virtuală și realitate mixtă

Ce este inteligența artificială?

Inteligența artificială (AI) oferă unui computer sau unui dispozitiv controlat de computer capacitatea de a îndeplini sarcini inteligente, cum ar fi raționamentul sau învățarea din experiență. Calculul cognitiv a fost termenul folosit atunci când totul a început acum un deceniu - ideea că, confruntându-ne cu suprasolicitarea cognitivă, vom avea nevoie de asistență pentru a lua decizii. Citând avantajele evidente ale inteligenței artificiale în uz curent, ne bazăm deja pe asistenți digitali AI precum Siri și Alexa (printre altele) pentru a ne ajuta să luăm decizii simple.

Designerii de produse vor avea un volum din ce în ce mai mare de informații despre date pentru a-și informa deciziile de proiectare. Experții în inteligență artificială folosesc tehnologia AI pentru a crea interfețe dinamice cu utilizatorul, personalizând fiecare experiență de utilizator prin analizarea fiecărei interacțiuni dintr-o aplicație sau un site web. În viitor, computerele vor deveni și mai bune în luarea deciziilor bazate pe date pentru a îmbunătăți sarcinile automate și procesele noastre umane de luare a deciziilor.

Cu Watson de la IBM deschizând calea pentru companii precum General Motors, Conde Nast, GSK, Citigroup și Under Armour, viitorul AI va consta în luarea de decizii complexe și importante în mod eficient.

În calitate de profesioniști creativi, putem folosi astfel de idei în mai multe verticale din industrie. De exemplu, The North Face a folosit Watson pentru a ajuta la crearea unei interfețe intuitive de comerț electronic care îi ajută pe clienți să ia decizii optime de cumpărare.

Asistenți virtuali – Tehnologia AI în acțiune

Asistenții virtuali precum Siri, Alexa, Cortana, Watson și alții se bazează pe inteligența artificială pentru a face totul, de la găsirea unui restaurant până la trimiterea unui e-mail sau programarea unei întâlniri. Multe dintre acestea sunt operate prin voce, o interfață mai naturală pentru oameni decât o interfață vizuală tradițională de ferestre și butoane. Este posibil ca aceste tehnologii să remodeleze designul actual al motoarelor de căutare.

Vorbirea este o metodă naturală și simplă de interacțiune pentru oameni. Astfel, nu este de mirare că asistenții virtuali controlați prin voce au primit o rată favorabilă de adoptare în casele noastre. Utilizatorii pot vorbi pur și simplu cu sistemul, mai degrabă decât să-l „opera” cu mâinile sau cu gesturi. De exemplu, cu un iPhone, folosind o singură cerere rapidă, Siri ne permite să transferăm bani prin PayPal către o altă persoană.

Pe măsură ce AI este integrată în aplicații, va ajuta asistenții virtuali inteligenți (IVA) să devină din ce în ce mai inteligenți. Cu toate acestea, indiferent de cât de inteligente devin IVA-urile, utilizatorii cu vedere slabă sau alte dizabilități fizice — care folosesc cititoare de ecran și alte tehnologii de asistență — s-ar putea confrunta în continuare cu provocări semnificative. Va depinde de designerii UX care lucrează cu cercetătorii în experiența utilizatorului să elimine astfel de lacune critice de accesibilitate.

Cum inteligența mașinilor alimentează o lume fără șoferi

Sistemele de tranzit ale viitorului vor avea un flux de trafic pe străzile noastre lin și eficient. Inovațiile de proiectare, cum ar fi autobuzele modulare, detașabile, taxiurile zburătoare și rețelele de poduri magnetice suspendate vor transforma visul unei lumi dinamice, fără șofer, în realitate.

Ceea ce era știrile științifico-fantastice în urmă cu câțiva ani devine acum realitate. Wheelys' Moby-Mart este un magazin autonom cu un asistent de magazin holografic care este probabil să schimbe lumea designului comerțului electronic.

Următoarea generație de designeri de comerț electronic va avea nevoie de multi-specializare atât în ​​spații fizice, cât și în cele digitale. Viitorii designeri vor trebui să proiecteze o experiență în care multe dintre elementele umane familiare sunt îndepărtate sau îndepărtate.

Amazon Go, un magazin fără casierie, este un exemplu grozav al cum arată și se simte proiectarea viitorului. Ei au conceput o experiență de cumpărături în care oricine poate intra în magazin, răsfoi, cumpără și ieși cu produsele în mână, fără frecare. Fără rânduri la casă.

Inteligența construită în fiecare vehicul autonom îi permite acestuia să ia toate deciziile potrivite pentru noi — totul, de la cea mai optimă rutare până la preocupările legate de siguranța umană. Crearea unor astfel de sisteme complexe de proiectare este crearea unui șablon de produs care va începe un nou val de produse proiectate în afara verticalei de transport.

Va deveni necesar ca designerii de interior auto să creeze design-uri care să facă spațiul interior confortabil și adaptabil. Interfețele vor trebui să fie intuitive și liniștitoare pentru a încuraja încrederea pasagerului, concentrându-se în același timp pe interacțiunile umane dintre persoanele care împart călătoria.

Realitate augmentată

Realitatea augmentată (AR) acționează ca un strat virtual deasupra lumii din fața ta și se află într-o nouă eră a descoperirii și inovației. În timp ce primele aplicații AR depindeau de un smartphone sau de o tabletă, ele se vor extinde în curând în dispozitive portabile, cum ar fi ochelarii inteligenți, care necesită un alt tip de UX și proces de design - gândirea în afara limitelor unui ecran mai mic.

În timp ce dezbaterea despre AR vs. VR vs. MR este în desfășurare, realitatea augmentată este o oportunitate unică pentru designeri de a crea aplicații folosind recunoașterea imaginilor, obiectelor și culorilor. La fel cum AI folosește datele pentru a lua decizii, AR folosește recunoașterea obiectelor și punctelor cheie „ancoră” dintr-un spațiu dat.

Un exemplu excelent de combinație perfectă între AI și AR este cu Animoji de la Apple, emoji animat pentru iPhone X. Potrivit Apple, Animoji este „mesaje animate personalizate care vă folosesc vocea și reflectă expresiile faciale”. Redarea și animația funcționează în timp real, datorită funcțiilor de scanare ace pentru iPhone X.

Meta – Construirea de experiențe AR captivante

În următorii cinci ani, AR va fi mai bine integrată în viața noastră de zi cu zi, îmbinând lumea fizică și digitală cu noi produse portabile. Un produs precum ochelarii Meta, care suprapune realitatea augmentată peste realitatea utilizatorului, este probabil să fie popular ca mediu pentru designerii de jocuri.

Bazat pe tehnologia holografică, ochelarii Meta pot identifica gesturile utilizatorilor pentru a le permite să manipuleze proiecțiile 3D ale obiectelor. Cu atât de multe dispozitive bazate pe gesturi, standardizarea și golurile culturale ar putea deveni o provocare principală pentru designerii care lucrează în domeniu.

„Viitorul productivității este spațial”, a spus Meta când și-a prezentat spațiul de lucru AR. În viitor, hardware-ul purtabil va permite angajaților să lucreze fără mâini. Dispozitivele viitorului ar putea funcționa pe comenzi vocale sau gesturi. Succesul tot mai mare al experiențelor AR poate prezice sfârșitul controlerelor fizice, cum ar fi un cursor de mouse sau o tastatură.

În realitatea augmentată, gesturile naturale ar putea fi factorii cheie ai experienței. De exemplu, imitarea clicului pe un buton cu degetele noastre ar declanșa o interacțiune cu un link sau un buton virtual. Google a lansat proiectul Soli, care merge un pas mai departe – au creat o tehnologie de detectare concentrată exclusiv pe interacțiunile fără atingere. Pentru a rămâne ușor de utilizat, astfel de experiențe necesită o interfață minimă, cu puțină sau deloc suprasolicitare vizuală.

Câteva resurse notabilede proiectare și dezvoltare în realitate augmentată :

• Facebook Frame și AR Studio
• Apple ARkit

Viață îmbunătățită cu AR

Ca parte a conceptului său de bucătărie, IKEA dezvoltă o masă inteligentă care sugerează rețete bazate pe ingredientele puse pe ea. Acesta este un exemplu grozav al tehnologiei AR care funcționează în lumea reală. Masa interactivă are un proiector echipat cu cameră, care arată rețetele pe suprafața sa și recunoaște ingredientele, dându-ți o idee despre ce să faci cu ceea ce ai la îndemână.

Astfel de experiențe captivante sunt în concurență directă cu aplicațiile mobile care vor părea în curând depășite din cauza capacităților lor mai restrânse. Designerii de aplicații mobile vor crea în curând aplicații augmentate care se integrează cu spațiile fizice pentru a oferi un mod nou și captivant de a interacționa cu mediile noastre fizice.

Viitorul muncii cu AR

Realitatea crescută poate fi folosită și pentru transferul de cunoștințe, cum ar fi formarea în medii industriale. În loc să explicați, imaginați-vă că îi arătați unui lucrător cum să facă o anumită sarcină prin intermediul unui videoclip în context. Acest lucru deschide uși pentru designeri din zona de e-learning pentru a crea interfețe AR de generație următoare.

Boeing folosește ochelari AR alimentați de Skylight pentru a ghida tehnicienii în timp ce cablul sute de avioane pe an. Afișajul portabil îi ajută pe tehnicieni să identifice și să conecteze cu precizie sute de fire folosind doar vederea și vocea pentru a controla aplicația. Drept urmare, Boeing a redus timpul de producție cu 25% și a redus ratele de eroare la aproape zero .

Un sistem simplu de control vocal scade costul de interacțiune pentru a efectua sarcini complexe atunci când se operează aplicații AR. Minimizarea elementelor de interfață reduce sarcina cognitivă a utilizatorului, minimizează întreruperile și reduce distracția.

Tehnologia de realitate augmentată ar putea schimba modul în care clienții și lucrătorii sunt instruiți și introduși în informații noi. Imaginați-vă module de antrenament cum ar fi cum să schimbați uleiul într-o mașină sau alte videoclipuri de antrenament „Cum să” folosind AR pentru a suprapune indicații peste o situație reală.

Din punct de vedere al utilizabilității, designerii trebuie să ia în considerare nu numai ceea ce sistemul prezintă utilizatorului vizual, ci și modul în care creierul interpretează informații complexe care se suprapun cu realitatea reală.

Realitatea virtuală și realitate mixtă

Realitatea virtuală (VR) te cufundă complet într-o lume virtuală, iar realitatea mixtă (MR), denumită uneori realitate hibridă, este fuziunea dintre lumi reale și virtuale. VR poate fi folosit pentru birouri virtuale, produse, evenimente precum Premiile Teen Choice 2017 și multe altele. Cu VR, designerii și clienții lor vor putea previzualiza design-uri scalate la medii și profunzime reale, în mărime naturală, chiar înainte de a intra în faza de producție.

La începutul lui 2017, Forbes a observat că „hype-ul în jurul realității virtuale se estompează”. Limitări vizibile Fețele VR sunt un preț ridicat pentru căști, disconfort în urma utilizării extinse, calitate vizuală slabă și multe altele. Ca urmare, există o adoptare lentă pe piața de masă a tehnologiei VR în comparație cu AR, care este „probabil să se descurce mai bine pe termen scurt”.

Aplicații de realitate virtuală

Noutatea conținutului de realitate virtuală oferă o oportunitate unică de a atrage un public mare, așa cum o demonstrează un documentar VR de la National Geographic: The Protectors, Walk in the Ranger's Shoes. A primit mai multă atenție în comparație cu alte documentare tematice despre natură.

Dincolo de a transporta spectatorii în locuri noi, următoarea oportunitate pentru designeri este să-i ajute să experimenteze viața ca o altă persoană. Oferirea unei vizualizări la persoana întâi poate crea campanii unice și eficiente, cum ar fi „A Walk Through Dementia”, centrate pe empatie.

Un nou set de modele de design va apărea în cele din urmă pentru designerii VR, dar este puțin probabil ca o abordare a designului plat să reușească. În VR, creierul nostru folosește orientarea spațio-temporală și capabilitățile de rezolvare a problemelor; prin urmare, este esențial să folosiți texturi, iluminare și detalii mai fine pentru o experiență mai credibilă și mai captivantă.

VR oferă utilizatorilor posibilitatea de a se apropia de obiecte virtuale și, de asemenea, de a se îndepărta de ele. Deoarece ochiul este foarte bun la alegerea informațiilor de profunzime, redarea obiectelor de către designeri trebuie să fie realistă și detaliată. Sunetul și muzica sunt alte considerații importante pentru designerii VR.

MR – Mixing Real and Virtual Realities

Realitatea mixtă Microsoft HoloLens îmbină conținutul holografic 3D cu lumea fizică, oferind hologramelor context și scară din lumea reală. Tehnologia MR amestecă și îmbină mediul fizic al unei persoane cu obiecte din lumea fizică și digitală. Folosind această tehnologie MR, putem interacționa atât cu conținutul digital, cât și cu lumea din jurul nostru, precum și cu proiecțiile holografice 3D.

Aplicațiile MR și VR oferă designerilor o nouă libertate creativă. Putem crea experiențe în care utilizatorii pot interacționa cu produsele virtual și pot vizita medii îndepărtate, evenimente istorice, concerte și multe altele. În cadrul realităților virtuale sau mixte pe care le creăm, putem îndoi legile fizicii cu posibilități nesfârșite și putem experimenta lumea ca niciodată.

Din punct de vedere al designului și al utilizabilității, un principiu cheie de reținut este acela de a pune utilizatorii în largul lor și de a evita senzațiile neplăcute prin menținerea lor în lumea reală. În acest scop, putem folosi sunetul, mișcarea și un bun simț al scalei - mediile virtuale și interacțiunile pe care le creăm ar trebui să pară naturale și ergonomice, nu neapărat realiste.

Când proiectăm o interfață vizuală care utilizează un set cu cască și necesită o examinare atentă a unui obiect precum un organ VR, trebuie să ținem cont de faptul că oamenii sunt mult mai susceptibili la rău de mișcare atunci când poartă o cască VR decât atunci când se uită la ecranul unui computer.

Experiența de brand în realitate virtuală

VR creează o oportunitate pentru companii de a oferi clienților o experiență mai captivantă a mărcii lor. Este o nouă frontieră pentru conținutul de marcă și povestirea. Audi folosește VR pentru a putea experimenta un nou model de mașină înainte chiar de a-l atinge fizic. Prin capturarea întregului interior al vehiculului cu o cameră specială 3-D, acestea permit clienților să vadă fiecare detaliu înainte de lansarea pe piață.

O utilizare eficientă a designului și marketingului în realitate virtuală permite mărcilor să folosească următoarele componente de design:

1. O strategie creativă bine gândită
2. Aplicarea celor mai bune practici de utilizare
3. Narațiune și povestire puternice
4. Prezentarea informațiilor ergonomică
5. Design vizual și simulări convingătoare

Definiția utilizabilității va fi extinsă foarte mult pentru designeri și va acoperi toate aspectele, inclusiv nivelul de confort al mediului. Designerii vor trebui să dezvolte o înțelegere a nivelului de disconfort potențial în anumite situații, cum ar fi înălțimi, spații mici (claustrofobie), spații mari (agorafobie), scară, viteză, ciocnirea obiectelor, oboseala utilizatorului, ergonomie și multe altele.

Pentru a comunica fiabilitatea și siguranța vehiculelor lor în situații dificile, Toyota scufundă clienții într-o experiență VR narativă. Aceștia pot experimenta brandul, precum și conținutul unic personalizat în diferite medii. Acest lucru deschide ușa companiilor pentru a le arăta clienților o latură a mărcii pe care nu au văzut-o până acum.

În calitate de designeri profund implicați în crearea unor astfel de experiențe, trebuie să punem la îndoială utilitatea ideilor și soluțiilor noastre creative pentru mărci și să ne asigurăm că rezolvăm cu adevărat probleme specifice de afaceri. Ar trebui să ne întrebăm dacă experiența VR asigură propunerea de valoare de bază a companiei.

Aplicații VR pentru o cauză bună

Pentru a crea mai multă empatie și a contextualiza viețile celor care au nevoie de donatori, unele organizații non-profit folosesc VR pentru a muta vizitatorii în viața din taberele de refugiați. Acest lucru creează un angajament sporit și o mai mare disponibilitate de a le susține inițiativele. O idee ca aceasta ar putea crea o schimbare în munca de proiectare VR realizată de mărci mari într-un spațiu non-profit.

Ca un alt exemplu, Mark Zuckerberg a arătat lumii un tur VR al Puerto Rico, lovit de uragan, pentru a crește gradul de conștientizare a situației. Ideile și cazurile de utilizare sunt „practic nelimitate” – joc de cuvinte.

Folosind un set cu cască de realitate virtuală și o telecomandă, utilizatorii pot explora mediul înconjurător, mișcându-și capetele și interacționând cu obiectele folosind mâinile. Sistemele VR de ultimă generație precum HTC Vive sau Oculus Rift folosesc senzori pentru a localiza utilizatorii în spațiul fizic și, ca atare, designerii pot profita de întregul corp al utilizatorului pentru a crea experiențe senzoriale mai complete și mai îmbunătățite în lumea reală.

Viitorul este un amestec echilibrat între AI, AR, VR și MR

Evoluțiile recente ale inteligenței artificiale, în special învățarea profundă, care favorizează recunoașterea în timp real a imaginii și a vorbirii, au ajutat la combinarea VR și AI pentru noi aplicații. Viitorul designului de produse va trebui să țină cont de combinația tuturor acestor trei tehnologii. Exemple notabile sunt aplicațiile eoliene care utilizează tehnologii AI pentru a reduce ratele de eroare umană prin simulări AR și VR ale sarcinilor periculoase.

Virtualitics oferă vizualizarea datelor în medii VR și AR prin învățarea automată și AI. Aceste tehnologii sunt instrumente care ne ajută să spunem povești și să împărtășim informații ca niciodată. Ele pot fi folosite ca instrumente de implicare emoțională incredibil de puternice, permițându-ne să construim empatie și să ne conectăm cu publicul – dincolo de ceea ce obișnuiau să ofere televizorul, computerele sau internetul.

Acesta este un moment interesant pentru a lucra cu aceste tehnologii; majoritatea problemelor sunt noi, iar liniile directoare vechi adesea nu se aplică. Instituții precum MIT sunt în frunte cu experimente radicale pe idei noi. De exemplu, MIT Game Lab creează Play Labs pentru a accelera startup-urile în AR, VR și AI. Acest lucru va inspira, fără îndoială, mulți inovatori.

Viitorul poate fi numit hiper realitate - o combinație de AI, AR, VR și MR. O inovație interesantă, EscapeLabs, folosește realitatea augmentată și realitatea mixtă (AR/MR) pentru a crea experiențe holografice pentru camere de evadare, exerciții de team-building și jocuri puzzle la scară de cameră. În mod imaginabil, nevoia de căști greoaie și cerința de a se conecta la un computer static nu vor mai fi necesare. Tranziția dintre lumea virtuală și cea reală va deveni mai ușoară și mai rapidă - hiper captivantă.

Internetul a existat de mulți ani înainte de a descoperi că partajarea socială este cheia pentru a stimula implicarea. De asemenea, este de așteptat ca o combinație a acestor tehnologii să înregistreze o creștere similară, cu oportunități de angajare pentru designeri explodând în următorii câțiva ani.

Noile tehnologii vin cu multe necunoscute, creând nevoia de a stabili cele mai bune practici, standarde și modele de design. Se presupune că acesta este motivul pentru care designerii UX vor avea siguranța locului de muncă pe termen lung în următorii ani. Va fi întotdeauna nevoie ca designerii să folosească tehnici de design centrate pe utilizator pentru a pune căldură în produse. Cea mai bună parte a acestor tehnologii este că suntem încă în fazele inițiale și că multe trebuie să fie descoperite de comunitatea noastră creativă. Urmează vremuri emoționante!

• • •

Citiri suplimentare pe Blogul Toptal Design:

• Cele mai bune practici de design UI și greșeli comune
• State goale – Cel mai neglijat aspect al UX
• Simplitatea este cheia – Explorarea designului web minimal
• Principii euristice pentru interfețele mobile
• Proiectare pentru lizibilitate – Un ghid pentru tipografia web