Nowe rzeczywistości: VR, AR, MR i przyszłość designu

Postępy w sztucznej inteligencji, rzeczywistości rozszerzonej i rzeczywistości wirtualnej oznaczają nowe możliwości projektowe dla projektantów.

Krajobraz cyfrowy i technologiczny nieustannie się zmienia i na wiele sposobów przyspiesza. Projektanci, których zadaniem jest wymyślanie innowacyjnych pomysłów, muszą śledzić trendy i gdzie są kreatywne możliwości. Rozpoznanie zmian zachodzących w branży pomoże projektantom projektować mądrzej i podejmować bardziej świadome kreatywne decyzje.

W cyklu życia wdrażania technologii „Innowatorzy” stanowią najmniejszą grupę, ale odnoszą największe sukcesy. Po nich następują „Early Adopters”, potem „Early Większość”, a później „Większość” lub wszyscy inni. Jako innowatorzy, wielcy projektanci zwykle należą do kategorii „Early Adopters” – wielkich ryzykantów na niezbadanym terytorium. Świetny projektant to także wizjoner, który potrafi myśleć strategicznie i analizować trendy w celu projektowania lepszych produktów lub usług.

Przyjrzyjmy się niektórym kreatywnym możliwościom i pojawiającym się technologiom oraz dlaczego, aby projektować przyszłość, projektanci muszą myśleć poza ekranem i wchodzić w nowe rzeczywistości.

Nowy krajobraz technologiczny: sztuczna inteligencja wspomagana przez człowieka, rzeczywistość rozszerzona, rzeczywistość wirtualna i rzeczywistość mieszana

Co to jest sztuczna inteligencja?

Sztuczna inteligencja (AI) daje komputerowi lub urządzeniu sterowanemu komputerem możliwość wykonywania inteligentnych zadań, takich jak wnioskowanie lub uczenie się na podstawie doświadczenia. Obliczenia kognitywne były terminem używanym, gdy wszystko się zaczęło dziesięć lat temu — ideą, że w obliczu przeciążenia poznawczego będziemy potrzebować pomocy w podejmowaniu decyzji. Powołując się na oczywiste zalety obecnie stosowanej sztucznej inteligencji, już teraz polegamy na cyfrowych asystentach AI, takich jak Siri i Alexa (między innymi), aby pomóc nam w podejmowaniu prostych decyzji.

Projektanci produktów będą mieli coraz więcej informacji o danych, które pomogą im podejmować decyzje projektowe. Eksperci w dziedzinie sztucznej inteligencji wykorzystują technologię sztucznej inteligencji do tworzenia dynamicznych interfejsów użytkownika, personalizując każdy użytkownik, analizując każdą interakcję w aplikacji lub witrynie internetowej. W przyszłości komputery będą jeszcze lepsze w podejmowaniu decyzji opartych na danych, aby usprawnić zautomatyzowane zadania i nasze ludzkie procesy decyzyjne.

Ponieważ Watson IBM jest liderem dla takich firm jak General Motors, Conde Nast, GSK, Citigroup i Under Armour, przyszłość sztucznej inteligencji będzie polegać na skutecznym podejmowaniu złożonych i ważnych decyzji.

Jako kreatywni profesjonaliści możemy wykorzystywać takie pomysły w wielu branżach. Na przykład firma The North Face wykorzystała Watson do stworzenia intuicyjnego interfejsu eCommerce, który pomaga klientom podejmować optymalne decyzje zakupowe.

Wirtualni Asystenci – Technologia AI w działaniu

Wirtualni asystenci, tacy jak Siri, Alexa, Cortana, Watson i inni, polegają na sztucznej inteligencji, która pomaga we wszystkim, od znalezienia restauracji po wysłanie e-maila lub zaplanowanie spotkania. Wiele z nich jest obsługiwanych za pomocą głosu, co jest bardziej naturalnym interfejsem dla ludzi niż tradycyjny wizualny interfejs użytkownika okien i przycisków. Technologie te prawdopodobnie zmienią obecny wygląd wyszukiwarek.

Mówienie jest dla ludzi naturalną i prostą metodą interakcji. Nic więc dziwnego, że sterowani głosem wirtualni asystenci uzyskali korzystny wskaźnik przyjęcia w naszych domach. Użytkownicy mogą po prostu rozmawiać z systemem, zamiast „obsługiwać go” rękami lub gestami. Np. za pomocą iPhone'a, korzystając tylko z jednej szybkiej prośby, Siri pozwala nam przelać pieniądze przez PayPal innej osobie.

Ponieważ sztuczna inteligencja jest zintegrowana z aplikacjami, pomoże inteligentnym wirtualnym asystentom (IVA) stać się coraz bardziej inteligentnym. Niemniej jednak, niezależnie od tego, jak inteligentne IVA uzyskają, użytkownicy ze słabym wzrokiem lub innymi niepełnosprawnościami fizycznymi – którzy korzystają z czytników ekranu i innych technologii wspomagających – wciąż mogą stawić czoła poważnym wyzwaniom. Zadaniem projektantów UX będzie współpraca z badaczami doświadczeń użytkowników w celu zlikwidowania tak krytycznych luk w dostępności.

Jak inteligencja maszyn napędza świat bez sterowników

Systemy tranzytowe przyszłości zapewnią płynny i wydajny przepływ ruchu przez nasze ulice. Innowacje projektowe, takie jak modułowe, odłączane autobusy, latające taksówki i sieci zawieszonych kapsuł magnetycznych, sprawią, że marzenie o dynamicznym świecie bez kierowców stanie się rzeczywistością.

To, co kilka lat temu było wiadomością science fiction, teraz staje się rzeczywistością. Wheelys' Moby-Mart to samojezdny sklep z holograficznym sprzedawcą, który prawdopodobnie zmieni świat projektowania eCommerce.

Następne pokolenie projektantów eCommerce będzie potrzebowało wielu specjalizacji zarówno w przestrzeni fizycznej, jak i cyfrowej. Przyszli projektanci będą musieli zaprojektować doświadczenie, w którym wiele znanych ludzkich elementów zostanie usuniętych lub zdalnych.

Amazon Go, sklep bez kasy, jest doskonałym przykładem tego, jak wygląda i jak wygląda projektowanie przyszłości. Zaprojektowali doświadczenie zakupowe, w którym każdy może wejść do sklepu, przeglądać, robić zakupy i wyjść ze swoimi produktami w dłoni, bez tarcia. Brak kolejek przy kasie.

Inteligencja wbudowana w każdy pojazd autonomiczny pozwala mu podejmować za nas wszystkie właściwe decyzje — od najbardziej optymalnej trasy po kwestie związane z bezpieczeństwem ludzi. Tworzenie tak złożonych systemów projektowych to tworzenie szablonu produktu, który zapoczątkuje nową falę produktów zaprojektowanych poza pionem transportowym.

Projektanci wnętrz samochodowych będą musieli tworzyć projekty, które sprawią, że przestrzeń wewnętrzna będzie wygodna i adaptacyjna. Interfejsy będą musiały być intuicyjne i uspokajające, aby wzbudzić zaufanie pasażera, jednocześnie skupiając się na interakcjach między ludźmi korzystającymi z przejazdu.

Rozszerzona Rzeczywistość

Rzeczywistość rozszerzona (AR) działa jako wirtualna warstwa na szczycie świata przed Tobą i wkracza w nową erę odkryć i innowacji. Chociaż wczesne aplikacje AR opierały się na smartfonie lub tablecie, wkrótce rozszerzą się na urządzenia do noszenia, takie jak inteligentne okulary, wymagające innego rodzaju UX i procesu projektowania — myśląc poza granicami mniejszego ekranu.

Podczas gdy debata na temat AR vs. VR vs. MR trwa, rzeczywistość rozszerzona jest wyjątkową okazją dla projektantów do tworzenia aplikacji wykorzystujących rozpoznawanie obrazów, obiektów i kolorów. Podobnie jak sztuczna inteligencja wykorzystuje dane do podejmowania decyzji, AR wykorzystuje rozpoznawanie kluczowych obiektów i punktów „kotwicy” w danej przestrzeni.

Doskonałym przykładem idealnego połączenia AI i AR jest Animoji firmy Apple, animowane emoji dla iPhone’a X. Według Apple, Animoji to „niestandardowe animowane wiadomości, które używają Twojego głosu i odzwierciedlają Twoją mimikę”. Renderowanie i animacja działają w czasie rzeczywistym dzięki funkcjom skanowania asem iPhone'a X.

Meta – budowanie wciągających doświadczeń AR

W ciągu najbliższych pięciu lat AR będzie lepiej zintegrowana z naszym codziennym życiem, łącząc świat fizyczny i cyfrowy z nowymi produktami do noszenia. Produkt taki jak okulary Meta, który nakłada rozszerzoną rzeczywistość na rzeczywistość użytkownika, prawdopodobnie będzie popularny jako medium dla projektantów gier.

Oparte na technologii holograficznej okulary Meta potrafią identyfikować gesty użytkowników, aby umożliwić im manipulowanie trójwymiarowymi projekcjami obiektów. Przy tak wielu urządzeniach opartych na gestach, standaryzacja i luki kulturowe mogą stać się głównym wyzwaniem dla projektantów pracujących w terenie.

„Przyszłość produktywności jest przestrzenna” — powiedział Meta, wprowadzając swoją AR Workspace. W przyszłości sprzęt ubieralny umożliwi pracownikom pracę bez użycia rąk. Urządzenia przyszłości mogą działać na komendach głosowych lub gestach. Rosnący sukces doświadczeń AR może zapowiadać koniec fizycznych kontrolerów, takich jak kursor myszy czy klawiatura.

W rzeczywistości rozszerzonej naturalne gesty mogą być kluczowymi czynnikami wpływającymi na to doświadczenie. Na przykład naśladowanie kliknięcia przycisku palcami wywołałoby interakcję z wirtualnym łączem lub przyciskiem. Google uruchomił projekt Soli, który idzie o krok dalej — stworzyli technologię wykrywania skupioną wyłącznie na interakcjach bezdotykowych. Aby zachować przyjazność dla użytkownika, takie doświadczenia wymagają minimalnego interfejsu, z niewielkim lub żadnym przeciążeniem wizualnym.

Niektóre godne uwagi zasoby dotyczące projektowania i rozwoju rzeczywistości rozszerzonej :

• Ramka Facebooka i AR Studio
• Apple ARkit

Życie z rozszerzonym AR

W ramach swojej koncepcji kuchni IKEA opracowuje inteligentny stół, który sugeruje przepisy na podstawie umieszczonych na nim składników. To świetny przykład technologii AR działającej w prawdziwym świecie. Interaktywny stół ma projektor wyposażony w kamerę, który pokazuje na swojej powierzchni przepisy i rozpoznaje składniki, dając Ci wyobrażenie o tym, co zrobić z tym, co masz pod ręką.

Takie wciągające wrażenia bezpośrednio konkurują z aplikacjami mobilnymi, które wkrótce będą wydawać się przestarzałe ze względu na ich bardziej ograniczone możliwości. Projektanci aplikacji mobilnych będą wkrótce tworzyć rozszerzone aplikacje, które integrują się z przestrzeniami fizycznymi, aby zapewnić nowy i ekscytujący sposób interakcji z naszymi fizycznymi środowiskami.

Przyszłość pracy z AR

Rzeczywistość rozszerzona może być również wykorzystywana do transferu wiedzy, np. szkolenia w środowiskach przemysłowych. Zamiast wyjaśniać, wyobraź sobie pokazanie pracownikowi, jak wykonać określone zadanie, za pomocą wideo kontekstowego. Otwiera to projektantom w obszarze e-learningu drzwi do tworzenia interfejsów AR nowej generacji.

Boeing używa okularów AR zasilanych przez Skylight, aby kierować technikami podczas podłączania setek samolotów rocznie. Wyświetlacz do noszenia pomaga technikom zidentyfikować i dokładnie połączyć setki przewodów, używając tylko wzroku i głosu do sterowania aplikacją. W rezultacie Boeing skrócił czas produkcji o 25% i obniżył poziom błędów prawie do zera .

Prosty system sterowania głosowego zmniejsza koszty interakcji podczas wykonywania złożonych zadań podczas obsługi aplikacji AR. Minimalizacja elementów interfejsu zmniejsza obciążenie poznawcze użytkownika, minimalizuje przerwy i ogranicza czynniki rozpraszające.

Technologia rzeczywistości rozszerzonej może zmienić sposób, w jaki klienci i pracownicy są szkoleni i zapoznawani z nowymi informacjami. Wyobraź sobie moduły szkoleniowe, takie jak wymiana oleju w samochodzie lub inne filmy instruktażowe wykorzystujące technologię AR do nakładania wskazówek na rzeczywistą sytuację.

Z perspektywy użyteczności projektanci muszą wziąć pod uwagę nie tylko to, co system przedstawia użytkownikowi wizualnie, ale także sposób, w jaki mózg interpretuje złożone informacje nakładające się na rzeczywistą rzeczywistość.

Rzeczywistość wirtualna i rzeczywistość mieszana

Rzeczywistość wirtualna (VR) całkowicie zanurza Cię w wirtualnym świecie, a rzeczywistość mieszana (MR), czasami nazywana rzeczywistością hybrydową, to połączenie świata rzeczywistego i wirtualnego. VR może być używany w wirtualnych biurach, produktach, wydarzeniach, takich jak nagrody Teen Choice Awards 2017 i nie tylko. Dzięki VR projektanci i ich klienci będą mogli przeglądać projekty przeskalowane do rzeczywistych środowisk i głębokości, jeszcze przed wejściem w fazę produkcji.

Na początku 2017 r. Forbes zauważył, że „hype wokół wirtualnej rzeczywistości zanika”. Zauważalne ograniczenia twarze VR to wysoka cena za zestawy słuchawkowe, dyskomfort podczas intensywnego użytkowania, słaba jakość wizualna i wiele więcej. W rezultacie na rynku masowym następuje powolne przyjmowanie technologii VR w porównaniu z AR, która „prawdopodobnie poradzi sobie lepiej w krótkim okresie”.

Aplikacje wirtualnej rzeczywistości

Nowość w zakresie treści wirtualnej rzeczywistości oferuje wyjątkową okazję do zaangażowania dużej publiczności, o czym świadczy film dokumentalny VR z National Geographic: The Protectors, Walk in the Ranger's Shoes. Zyskał więcej uwagi w porównaniu do innych filmów dokumentalnych o tematyce przyrodniczej.

Oprócz przenoszenia widzów w nowe miejsca, kolejną szansą dla projektantów jest pomaganie im w doświadczaniu życia jako innej osoby. Oferowanie widoku z perspektywy pierwszej osoby może stworzyć unikalne i skuteczne kampanie, takie jak „Spacer przez demencję”, skoncentrowane na empatii.

Dla projektantów VR ostatecznie pojawi się nowy zestaw wzorców projektowych, ale podejście do projektowania płaskiego raczej nie odniesie sukcesu. W VR nasz mózg wykorzystuje orientację czasoprzestrzenną i zdolności rozwiązywania problemów; dlatego ważne jest, aby używać tekstur, oświetlenia i drobniejszych szczegółów, aby uzyskać bardziej wiarygodne i wciągające wrażenia.

VR daje użytkownikom możliwość zbliżenia się do wirtualnych obiektów i oddalenia się od nich. Ponieważ oko jest bardzo dobre w wychwytywaniu informacji o głębi, renderowanie obiektów przez projektantów musi być realistyczne i szczegółowe. Dźwięk i muzyka to inne ważne kwestie dla projektantów VR.

MR – Mieszanie rzeczywistości rzeczywistej i wirtualnej

Rzeczywistość mieszana Microsoft HoloLens łączy holograficzną zawartość 3D ze światem fizycznym, nadając hologramom rzeczywisty kontekst i skalę. Technologia MR łączy i łączy fizyczne otoczenie osoby z obiektami ze świata fizycznego i cyfrowego. Korzystając z tej technologii MR, możemy wchodzić w interakcje zarówno z treściami cyfrowymi, jak i otaczającym nas światem, a także wchodzić w interakcje z projekcjami holograficznymi 3D.

Aplikacje MR i VR dają projektantom nową swobodę twórczą. Możemy tworzyć doświadczenia, w których użytkownicy mogą wirtualnie wchodzić w interakcje z produktami i odwiedzać odległe środowiska, wydarzenia historyczne, koncerty i wiele więcej. W wirtualnych lub mieszanych rzeczywistościach, które tworzymy, możemy naginać prawa fizyki z nieskończonymi możliwościami i doświadczać świata jak nigdy dotąd.

Z punktu widzenia projektowania i użyteczności, kluczową zasadą, o której należy pamiętać, jest uspokojenie użytkowników i unikanie nieprzyjemnych wrażeń poprzez ugruntowanie ich w rzeczywistym świecie. W tym celu możemy wykorzystać dźwięk, ruch i dobre wyczucie skali — wirtualne środowiska i interakcje, które tworzymy, powinny być naturalne i ergonomiczne, niekoniecznie realistyczne.

Projektując interfejs wizualny, który korzysta z zestawu słuchawkowego i wymaga dokładnego zbadania obiektu, takiego jak organ VR, musimy pamiętać, że ludzie są znacznie bardziej podatni na chorobę lokomocyjną, gdy noszą gogle VR, niż patrząc na ekran komputera.

Doświadczenie marki w wirtualnej rzeczywistości

VR stwarza firmom możliwość zapewnienia klientom bardziej wciągającego doświadczenia swojej marki. To nowa granica dla treści związanych z marką i opowiadania historii. Audi korzysta z technologii VR, aby móc zapoznać się z nowym modelem swojego samochodu, zanim jeszcze go fizycznie dotknie. Rejestrując całe wnętrze pojazdu specjalną kamerą 3D, pozwalają klientom zobaczyć każdy szczegół przed wprowadzeniem na rynek.

Efektywne wykorzystanie projektowania i marketingu w wirtualnej rzeczywistości pozwala markom na wykorzystanie następujących elementów projektu:

1. Dobrze przemyślana strategia kreatywna
2. Stosowanie najlepszych praktyk użyteczności
3. Silna narracja i narracja
4. Ergonomiczna prezentacja informacji
5. Przekonujący projekt wizualny i symulacje

Definicja użyteczności zostanie znacznie rozszerzona dla projektantów i obejmie wszystkie aspekty, w tym poziom komfortu otoczenia. Projektanci będą musieli zrozumieć poziom potencjalnego dyskomfortu w określonych sytuacjach, takich jak wysokość, małe przestrzenie (klaustrofobia), duże przestrzenie (agorafobia), skala, prędkość, kolidujące obiekty, zmęczenie użytkownika, ergonomia i inne.

Aby komunikować niezawodność i bezpieczeństwo swoich pojazdów w trudnych sytuacjach, Toyota zanurza klientów w narracyjnym doświadczeniu VR. Mogą doświadczyć marki, a także unikalnych, dostosowanych treści w różnych środowiskach. To otwiera drzwi dla firm, aby pokazać klientom stronę marki, której wcześniej nie widzieli.

Jako projektanci głęboko zaangażowani w tworzenie takich doświadczeń, musimy kwestionować przydatność naszych kreatywnych pomysłów i rozwiązań dla marek i upewnić się, że naprawdę rozwiązujemy konkretne problemy biznesowe. Powinniśmy zadać sobie pytanie, czy doświadczenie VR zapewnia podstawową propozycję wartości firmy.

Aplikacje VR w dobrej sprawie

Aby stworzyć więcej empatii i kontekstualizować życie osób potrzebujących darczyńców, niektóre organizacje non-profit wykorzystują VR, aby przenieść odwiedzających do życia w obozach dla uchodźców. Stwarza to większe zaangażowanie i większą gotowość do wspierania ich inicjatyw. Taki pomysł może spowodować przesunięcie prac projektowych VR prowadzonych przez duże marki w przestrzeń non-profit.

Jako inny przykład, Mark Zuckerberg pokazał światu wycieczkę VR po dotkniętym huraganem Portoryko, aby zwiększyć świadomość sytuacji. Pomysły i przypadki użycia są „praktycznie nieograniczone” — zamierzona gra słów.

Korzystając z zestawu słuchawkowego rzeczywistości wirtualnej i pilota zdalnego sterowania, użytkownicy mogą eksplorować otoczenie, poruszając głową i wchodzić w interakcje z obiektami za pomocą rąk. Wysokiej klasy systemy VR, takie jak HTC Vive czy Oculus Rift, wykorzystują czujniki do lokalizowania użytkowników w przestrzeni fizycznej, dzięki czemu projektanci mogą wykorzystać całe ciało użytkownika, aby stworzyć pełniejsze, lepsze wrażenia sensoryczne w prawdziwym świecie.

Przyszłość to zrównoważona mieszanka AI, AR, VR i MR

Ostatnie postępy w sztucznej inteligencji, w szczególności głębokie uczenie, które wspierają rozpoznawanie obrazu i mowy w czasie rzeczywistym, pomogły połączyć VR i sztuczną inteligencję w nowych aplikacjach. Przyszłość projektowania produktów będzie musiała uwzględniać połączenie wszystkich trzech technologii. Godnymi uwagi przykładami są aplikacje Eolian, które wykorzystują technologie sztucznej inteligencji w celu zmniejszenia wskaźnika błędów ludzkich poprzez symulacje niebezpiecznych zadań AR i VR.

Virtualitics zapewnia wizualizację danych w środowiskach VR i AR dzięki uczeniu maszynowemu i sztucznej inteligencji. Technologie te to narzędzia, które pomagają nam opowiadać historie i udostępniać informacje jak nigdy dotąd. Mogą być wykorzystywane jako niezwykle potężne narzędzia do zaangażowania emocjonalnego, które pozwalają nam budować empatię i łączyć się z odbiorcami — poza tym, co kiedyś oferowała telewizja, komputery czy internet.

To ekscytujący czas na pracę z tymi technologiami; większość problemów jest nowa, a stare wytyczne często nie mają zastosowania. Instytucje takie jak MIT prowadzą radykalne eksperymenty nad nowymi pomysłami. Na przykład MIT Game Lab tworzy Play Labs, aby przyspieszyć start-upy w AR, VR i AI. To niewątpliwie zainspiruje wielu innowatorów.

Przyszłość można nazwać hiperrzeczywistością — połączenie AI, AR, VR i MR. Jedna z interesujących innowacji, EscapeLabs, wykorzystuje rzeczywistość rozszerzoną i rzeczywistość mieszaną (AR/MR) do tworzenia holograficznych doświadczeń w pokojach ewakuacyjnych, ćwiczeniach budowania zespołu i grach logicznych w skali pokoju. Niewykluczone, że nie będą już potrzebne niezgrabne zestawy słuchawkowe i połączenie ze statycznym komputerem. Przejście między światem wirtualnym a rzeczywistym stanie się łatwiejsze i szybsze — hiper wciągające.

Internet istniał przez wiele lat, zanim odkryliśmy, że udostępnianie społecznościowe jest kluczem do zwiększenia zaangażowania. Podobnie oczekuje się, że połączenie tych technologii przyniesie podobny wzrost, a w ciągu najbliższych kilku lat pojawią się nowe możliwości pracy dla projektantów.

Nowe technologie wiążą się z wieloma niewiadomymi, stwarzając potrzebę ustanowienia najlepszych praktyk, standardów i wzorców projektowych. Zakłada się, że właśnie dlatego projektanci UX będą mieli długoterminowe bezpieczeństwo pracy w nadchodzących latach. Zawsze będzie potrzeba projektantów stosujących techniki projektowania skoncentrowane na użytkowniku, aby nadać produktom ciepło. Najlepsze w tych technologiach jest to, że wciąż jesteśmy na początkowym etapie, a nasza kreatywna społeczność musi jeszcze wiele przemyśleć. Ekscytujące czasy przed nami!

• • •

Dalsza lektura na blogu Toptal Design:

• Najlepsze praktyki projektowania interfejsu użytkownika i typowe błędy
• Puste stany – najbardziej pomijany aspekt UX
• Prostota jest kluczem – odkrywanie minimalistycznego projektowania stron internetowych
• Zasady heurystyczne dla interfejsów mobilnych
• Projektowanie pod kątem czytelności — przewodnik po typografii internetowej