Neue Realitäten: VR, AR, MR und die Zukunft des Designs

Fortschritte in der künstlichen Intelligenz, Augmented Reality und Virtual Reality bedeuten neue Gestaltungsmöglichkeiten für Designer.

Die digitale und technologische Landschaft verändert sich ständig und beschleunigt sich in vielerlei Hinsicht. Designer, die mit innovativen Ideen beauftragt sind, müssen im Auge behalten, was im Trend liegt und wo die kreativen Möglichkeiten liegen. Das Erkennen der Veränderungen, die in der Branche stattfinden, wird Designern helfen, klüger zu entwerfen und fundiertere kreative Entscheidungen zu treffen.

Im Lebenszyklus der Technologieeinführung sind „Innovatoren“ die kleinste Gruppe, aber die erfolgreichste. Ihnen folgen „Early Adopters“, dann „Early Majority“ und später „The Majority“ oder alle anderen. Als Innovatoren fallen großartige Designer normalerweise in die Kategorie der „Early Adopters“ – große Risikoträger auf unbekanntem Terrain. Ein großartiger Designer ist auch ein Visionär mit der Fähigkeit, strategisch zu denken und Trends zu analysieren, um bessere Produkte oder Dienstleistungen zu entwerfen.

Schauen wir uns einige kreative Möglichkeiten und neue Technologien an und warum Designer, um die Zukunft zu gestalten, über den Bildschirm hinaus in neue Realitäten denken müssen.

Eine neue Technologielandschaft: Menschengestützte KI, Augmented Reality, Virtual Reality und Mixed Reality

Was ist künstliche Intelligenz?

Künstliche Intelligenz (KI) verleiht einem Computer oder computergesteuerten Gerät die Fähigkeit, intelligente Aufgaben wie Argumentieren oder Lernen aus Erfahrung auszuführen. Cognitive Computing war der Begriff, der verwendet wurde, als alles vor einem Jahrzehnt begann – die Idee, dass wir angesichts einer kognitiven Überlastung Unterstützung bei der Entscheidungsfindung benötigen werden. Unter Berufung auf die offensichtlichen Vorteile der derzeit verwendeten künstlichen Intelligenz verlassen wir uns bereits auf digitale KI-Assistenten wie Siri und Alexa (unter anderem), um uns zu helfen, einfache Entscheidungen zu treffen.

Produktdesigner werden über eine zunehmende Menge an Dateninformationen verfügen, um ihre Designentscheidungen zu treffen. Experten für künstliche Intelligenz nutzen die KI-Technologie, um dynamische Benutzeroberflächen zu erstellen und jedes Benutzererlebnis zu personalisieren, indem sie jede Interaktion innerhalb einer App oder einer Website analysieren. In Zukunft werden Computer noch besser darin werden, datenbasierte Entscheidungen zu treffen, um automatisierte Aufgaben und unsere menschlichen Entscheidungsprozesse zu verbessern.

Mit Watson von IBM als Wegbereiter für Unternehmen wie General Motors, Conde Nast, GSK, Citigroup und Under Armour wird die Zukunft der KI darin bestehen, komplexe und wichtige Entscheidungen effizient zu treffen.

Als Kreativprofis können wir solche Ideen branchenübergreifend einsetzen. Beispielsweise nutzte The North Face Watson, um eine intuitive E-Commerce-Oberfläche zu erstellen, die Kunden hilft, optimale Kaufentscheidungen zu treffen.

Virtuelle Assistenten – KI-Technologie in Aktion

Virtuelle Assistenten wie Siri, Alexa, Cortana, Watson und andere verlassen sich auf künstliche Intelligenz, um alles zu erledigen, von der Suche nach einem Restaurant über das Senden einer E-Mail bis hin zum Planen eines Meetings. Viele davon werden per Sprache bedient, eine natürlichere Schnittstelle für Menschen als eine traditionelle visuelle Benutzeroberfläche aus Fenstern und Schaltflächen. Diese Technologien werden wahrscheinlich das aktuelle Design von Suchmaschinen umgestalten.

Sprechen ist für Menschen eine natürliche und unkomplizierte Methode der Interaktion. Daher ist es nicht verwunderlich, dass sprachgesteuerte virtuelle Assistenten in unseren Haushalten eine günstige Akzeptanzrate erhalten haben. Benutzer können einfach mit dem System sprechen, anstatt es mit Händen oder Gesten zu „bedienen“. Mit einem iPhone zum Beispiel erlaubt uns Siri mit nur einer schnellen Anfrage, Geld per PayPal an eine andere Person zu überweisen.

Da KI in Apps integriert wird, wird sie dazu beitragen, dass intelligente virtuelle Assistenten (IVAs) immer intelligenter werden. Unabhängig davon, wie intelligent IVAs werden, könnten Benutzer mit Sehschwäche oder anderen körperlichen Behinderungen, die Bildschirmlesegeräte und andere Hilfstechnologien verwenden, immer noch vor erheblichen Herausforderungen stehen. Es liegt an UX-Designern, die mit User-Experience-Forschern zusammenarbeiten, um solche kritischen Zugänglichkeitslücken zu schließen.

Wie maschinelle Intelligenz eine fahrerlose Welt antreibt

Die Verkehrssysteme der Zukunft werden dafür sorgen, dass der Verkehr reibungslos und effizient durch unsere Straßen fließt. Designinnovationen wie modulare, abnehmbare Busse, fliegende Taxis und Netzwerke aus schwebenden Magnetkapseln werden den Traum einer dynamischen, fahrerlosen Welt Wirklichkeit werden lassen.

Was vor einigen Jahren noch Science-Fiction-Nachrichten waren, wird jetzt Realität. Wheelys' Moby-Mart ist ein selbstfahrender Laden mit einem holografischen Verkäufer, der wahrscheinlich die Welt des E-Commerce-Designs verändern wird.

Die nächste Generation von E-Commerce-Designern wird eine Multispezialisierung sowohl im physischen als auch im digitalen Bereich benötigen. Zukünftige Designer müssen ein Erlebnis entwerfen, bei dem viele der vertrauten menschlichen Elemente entfernt oder entfernt sind.

Amazon Go, ein Geschäft ohne Kasse, ist ein großartiges Beispiel dafür, wie die Gestaltung der Zukunft aussieht und sich anfühlt. Sie entwarfen ein Einkaufserlebnis, bei dem jeder ohne Reibung den Laden betreten, stöbern, einkaufen und mit seinen Produkten in der Hand wieder gehen kann. Keine Schlangen an der Kasse.

Die in jedem autonomen Fahrzeug eingebaute Intelligenz ermöglicht es ihm, alle richtigen Entscheidungen für uns zu treffen – von der optimalen Streckenführung bis hin zu Bedenken hinsichtlich der Sicherheit von Menschen. Die Erstellung solch komplexer Designsysteme erzeugt eine Produktvorlage, die eine neue Welle von Produkten einleiten wird, die außerhalb der Transportbranche entworfen wurden.

Für Innenarchitekten von Automobilen wird es notwendig, Designs zu schaffen, die den Innenraum komfortabel und anpassungsfähig machen. Die Schnittstellen müssen intuitiv und beruhigend sein, um das Vertrauen des Fahrgasts zu fördern und sich gleichzeitig auf die menschlichen Interaktionen zwischen den Mitfahrern zu konzentrieren.

erweiterte Realität

Augmented Reality (AR) fungiert als virtuelle Schicht über der Welt vor Ihnen und befindet sich in einem neuen Zeitalter der Entdeckung und Innovation. Während frühe AR-Anwendungen von einem Smartphone oder Tablet abhängig waren, werden sie sich bald zu tragbaren Geräten wie Smart Glasses ausdehnen, die eine andere Art von UX und Designprozess erfordern – und über die Grenzen eines kleineren Bildschirms hinausdenken.

Während die Debatte über AR vs. VR vs. MR andauert, ist Augmented Reality eine einzigartige Gelegenheit für Designer, Apps mit Bild-, Objekt- und Farberkennung zu erstellen. So wie KI Daten nutzt, um Entscheidungen zu treffen, nutzt AR die Erkennung wichtiger „Anker“-Objekte und -Punkte innerhalb eines bestimmten Raums.

Ein großartiges Beispiel für eine perfekte Kombination zwischen KI und AR ist Apples Animoji, animiertes Emoji für das iPhone X. Laut Apple sind Animoji „benutzerdefinierte animierte Nachrichten, die Ihre Stimme verwenden und Ihren Gesichtsausdruck widerspiegeln“. Das Rendering und die Animation funktionieren dank der Ace-Scanning-Funktionen des iPhone X in Echtzeit.

Meta – Erstellen immersiver AR-Erlebnisse

In den nächsten fünf Jahren wird AR besser in unseren Alltag integriert und unsere physische und digitale Welt mit neuen tragbaren Produkten verschmelzen. Ein Produkt wie die Meta-Brille, die Augmented Reality über die Realität des Benutzers legt, dürfte als Medium für Spieledesigner beliebt sein.

Basierend auf holografischer Technologie kann die Meta-Brille die Gesten der Benutzer erkennen, um ihnen die Manipulation von 3D-Projektionen von Objekten zu ermöglichen. Bei so vielen Geräten, die auf Gesten basieren, könnten Standardisierung und kulturelle Unterschiede zu einer großen Herausforderung für Designer werden, die in diesem Bereich arbeiten.

„Die Zukunft der Produktivität ist räumlich“, sagte Meta bei der Einführung ihres AR Workspace. Wearable Hardware wird es Mitarbeitern in Zukunft ermöglichen, freihändig zu arbeiten. Die Geräte der Zukunft könnten mit Sprachbefehlen oder Gesten arbeiten. Der zunehmende Erfolg von AR-Erlebnissen kann das Ende physischer Controller wie Mauszeiger oder Tastatur vorhersagen.

In der erweiterten Realität könnten natürliche Gesten die Schlüsselfaktoren für das Erlebnis sein. Beispielsweise würde das Nachahmen des Klicks auf eine Schaltfläche mit unseren Fingern eine Interaktion mit einem virtuellen Link oder einer virtuellen Schaltfläche auslösen. Google startete das Projekt Soli, das noch einen Schritt weiter geht – sie haben eine Sensortechnologie entwickelt, die sich ausschließlich auf berührungslose Interaktionen konzentriert. Um benutzerfreundlich zu bleiben, erfordern solche Erfahrungen eine minimale Benutzeroberfläche mit wenig bis gar keiner visuellen Überlastung.

Einige bemerkenswerte Design- und Entwicklungsressourcen für Augmented Reality :

• Facebook Frame und AR Studio
• Apple ARkit

AR-unterstütztes Wohnen

Als Teil seiner Konzeptküche entwickelt IKEA einen intelligenten Tisch, der Rezepte basierend auf den darauf platzierten Zutaten vorschlägt. Dies ist ein großartiges Beispiel für AR-Technologie, die in der realen Welt funktioniert. Der interaktive Tisch verfügt über einen mit einer Kamera ausgestatteten Projektor, der Rezepte auf seiner Oberfläche anzeigt und Zutaten erkennt, sodass Sie eine Vorstellung davon bekommen, was Sie mit dem, was Sie zur Hand haben, zubereiten können.

Solche immersiven Erfahrungen stehen in direkter Konkurrenz zu mobilen Apps, die aufgrund ihrer eingeschränkteren Fähigkeiten bald veraltet erscheinen werden. Entwickler mobiler Apps werden bald erweiterte Anwendungen erstellen, die sich in physische Räume integrieren, um eine neue und aufregende Art der Interaktion mit unserer physischen Umgebung zu bieten.

Die Zukunft der Arbeit mit AR

Augmented Reality kann auch zur Wissensvermittlung eingesetzt werden, etwa bei Schulungen im industriellen Umfeld. Anstatt zu erklären, stellen Sie sich vor, Sie zeigen einem Mitarbeiter per In-Context-Video, wie er eine bestimmte Aufgabe erledigt. Dies öffnet Designern im E-Learning-Bereich Türen, um AR-Schnittstellen der nächsten Generation zu erstellen.

Boeing verwendet von Skylight betriebene AR-Brillen, um Techniker bei der Verkabelung von Hunderten von Flugzeugen pro Jahr anzuleiten. Das tragbare Display hilft Technikern, Hunderte von Kabeln zu identifizieren und genau zu verbinden, indem sie nur ihre Sicht und Stimme verwenden, um die App zu steuern. Infolgedessen verkürzte Boeing die Produktionszeit um 25 % und senkte die Fehlerquote auf nahezu null .

Ein einfaches Sprachsteuerungssystem senkt die Interaktionskosten für komplexe Aufgaben beim Betrieb von AR-Anwendungen. Das Minimieren von Schnittstellenelementen reduziert die kognitive Belastung eines Benutzers, minimiert Unterbrechungen und reduziert Ablenkungen.

Augmented-Reality-Technologie könnte die Art und Weise verändern, wie Kunden und Mitarbeiter geschult und mit neuen Informationen vertraut gemacht werden. Stellen Sie sich Trainingsmodule wie Ölwechsel in einem Auto oder andere „How to“-Trainingsvideos vor, die AR verwenden, um Hinweise auf eine reale Situation zu legen.

Aus Sicht der Benutzerfreundlichkeit müssen Designer nicht nur berücksichtigen, was das System dem Benutzer visuell präsentiert, sondern auch, wie das Gehirn komplexe Informationen interpretiert, die sich mit der tatsächlichen Realität überschneiden.

Virtuelle Realität und Mixed Reality

Virtual Reality (VR) lässt Sie vollständig in eine virtuelle Welt eintauchen, und Mixed Reality (MR), manchmal auch als Hybrid Reality bezeichnet, ist die Verschmelzung von realer und virtueller Welt. VR kann für virtuelle Büros, Produkte, Veranstaltungen wie die Teen Choice Awards 2017 und mehr verwendet werden. Mit VR können Designer und ihre Kunden auf reale, lebensgroße Umgebungen und Tiefe skalierte Designs in der Vorschau anzeigen, bevor sie überhaupt in die Produktionsphase eintreten.

Anfang 2017 stellte Forbes fest, dass „der Hype um Virtual Reality nachlässt“. Spürbare Einschränkungen bei VR-Gesichtern sind ein hoher Preis für die Headsets, Unbehagen bei ausgiebiger Nutzung, schlechte Bildqualität und vieles mehr. Infolgedessen gibt es eine langsame Massenmarktakzeptanz der VR-Technologie im Vergleich zu AR, die „kurzfristig wahrscheinlich besser abschneiden wird“.

Virtual-Reality-Anwendungen

Die Neuheit von Virtual-Reality-Inhalten bietet eine einzigartige Gelegenheit, ein großes Publikum anzusprechen, wie eine VR-Dokumentation von National Geographic zeigt: The Protectors, Walk in the Ranger's Shoes. Im Vergleich zu anderen Dokumentationen zum Thema Natur erhielt er mehr Aufmerksamkeit.

Abgesehen davon, den Betrachter an neue Orte zu bringen, besteht die nächste Gelegenheit für Designer darin, ihnen zu helfen, das Leben als eine andere Person zu erleben. Durch das Anbieten einer Ich-Perspektive können einzigartige und effektive Kampagnen wie „Ein Spaziergang durch Demenz“ erstellt werden, die sich auf Empathie konzentrieren.

Letztendlich wird sich für VR-Designer eine neue Reihe von Designmustern herausbilden, aber ein Flat-Design-Ansatz wird wahrscheinlich keinen Erfolg haben. In VR nutzt unser Gehirn raumzeitliche Orientierung und Problemlösungsfähigkeiten; Daher ist es wichtig, Texturen, Beleuchtung und feinere Details für ein glaubwürdigeres und immersiveres Erlebnis zu verwenden.

VR gibt Benutzern die Möglichkeit, mit virtuellen Objekten in Kontakt zu kommen und sich auch von ihnen zu entfernen. Da das Auge Tiefeninformationen sehr gut erkennen kann, muss die Wiedergabe von Objekten durch Designer realistisch und detailliert sein. Sound und Musik sind weitere wichtige Überlegungen für VR-Designer.

MR – Mischung aus realer und virtueller Realität

Microsoft HoloLens Mixed Reality verschmilzt holografische 3D-Inhalte mit der physischen Welt und verleiht Hologrammen realen Kontext und Maßstab. Die MR-Technologie mischt und vermischt die physische Umgebung einer Person mit Objekten aus der physischen und digitalen Welt. Mithilfe dieser MR-Technologie können wir sowohl mit digitalen Inhalten und der Welt um uns herum als auch mit holografischen 3D-Projektionen interagieren.

MR- und VR-Anwendungen geben Designern neue kreative Freiheiten. Wir können Erfahrungen schaffen, bei denen Benutzer virtuell mit Produkten interagieren und entfernte Umgebungen, historische Ereignisse, Konzerte und vieles mehr besuchen können. Innerhalb der virtuellen oder gemischten Realitäten, die wir erschaffen, können wir die Gesetze der Physik mit endlosen Möglichkeiten beugen und die Welt wie nie zuvor erleben.

Aus Sicht des Designs und der Benutzerfreundlichkeit ist es ein wichtiges Prinzip, die Benutzer zu beruhigen und unangenehme Empfindungen zu vermeiden, indem sie in der realen Welt geerdet bleiben. Zu diesem Zweck können wir Sound, Bewegung und ein gutes Gefühl für Skalierung nutzen – die virtuellen Umgebungen und Interaktionen, die wir erstellen, sollten sich natürlich und ergonomisch anfühlen, nicht unbedingt realistisch.

Wenn wir eine visuelle Schnittstelle entwerfen, die ein Headset verwendet und eine genaue Untersuchung eines Objekts wie einer VR-Orgel erfordert, müssen wir bedenken, dass Menschen beim Tragen eines VR-Headsets viel anfälliger für Reisekrankheit sind als beim Betrachten eines Computerbildschirms.

Das Markenerlebnis in Virtual Reality

VR bietet Unternehmen die Möglichkeit, ihren Kunden ein intensiveres Erlebnis ihrer Marke zu bieten. Es ist eine neue Grenze für Markeninhalte und Storytelling. Audi nutzt VR, damit sie ein neues Modell ihres Autos erleben können, bevor sie es überhaupt physisch berühren. Durch die Erfassung des gesamten Innenraums des Fahrzeugs mit einer speziellen 3-D-Kamera ermöglichen sie den Kunden, jedes Detail vor der Markteinführung zu sehen.

Ein effektiver Einsatz von Virtual-Reality-Design und -Marketing ermöglicht es Marken, die folgenden Designkomponenten zu nutzen:

1. Eine durchdachte kreative Strategie
2. Anwendung von Usability Best Practices
3. Starke Erzählung und Storytelling
4. Ergonomische Informationsdarstellung
5. Überzeugendes visuelles Design und Simulationen

Die Definition von Benutzerfreundlichkeit wird für Designer stark erweitert und umfasst alle Aspekte, einschließlich des Komfortniveaus der Umgebung. Designer müssen ein Verständnis für das Ausmaß potenzieller Beschwerden in bestimmten Situationen wie Höhen, kleinen Räumen (Klaustrophobie), großen Räumen (Agoraphobie), Größe, Geschwindigkeit, kollidierenden Objekten, Benutzerermüdung, Ergonomie und mehr entwickeln.

Um die Zuverlässigkeit und Sicherheit seiner Fahrzeuge in schwierigen Situationen zu kommunizieren, lässt Toyota seine Kunden in ein narratives VR-Erlebnis eintauchen. Sie können die Marke sowie einzigartige kundenspezifische Inhalte in verschiedenen Umgebungen erleben. Dies öffnet Unternehmen die Tür, um Kunden eine Seite der Marke zu zeigen, die sie zuvor noch nicht gesehen haben.

Als Designer, die intensiv an der Schaffung solcher Erfahrungen beteiligt sind, müssen wir die Nützlichkeit unserer kreativen Ideen und Lösungen für Marken hinterfragen und sicherstellen, dass wir wirklich spezifische Geschäftsprobleme lösen. Wir sollten uns fragen, ob das VR-Erlebnis das grundlegende Wertversprechen des Unternehmens erfüllt.

VR-Anwendungen für einen guten Zweck

Um mehr Empathie zu schaffen und das Leben derer zu kontextualisieren, die Spender benötigen, nutzen einige gemeinnützige Organisationen VR, um Besucher in das Leben in Flüchtlingslagern einzubeziehen. Dies schafft ein erhöhtes Engagement und eine größere Bereitschaft, ihre Initiativen zu unterstützen. Eine Idee wie diese könnte eine Verlagerung der VR-Designarbeit großer Marken in einen gemeinnützigen Bereich bewirken.

Als weiteres Beispiel zeigte Mark Zuckerberg der Welt eine VR-Tour durch das vom Hurrikan heimgesuchte Puerto Rico, um das Bewusstsein für die Situation zu schärfen. Die Ideen und Anwendungsfälle sind „praktisch grenzenlos“ – Wortspiel beabsichtigt.

Mit einem Virtual-Reality-Headset und einer Fernbedienung können Benutzer die Umgebung erkunden, indem sie ihre Köpfe bewegen und mit ihren Händen mit Objekten interagieren. High-End-VR-Systeme wie HTC Vive oder Oculus Rift verwenden Sensoren, um Benutzer im physischen Raum zu lokalisieren, und als solche können Designer den gesamten Körper des Benutzers nutzen, um vollere, verbesserte sensorische Erfahrungen in der realen Welt zu schaffen.

Die Zukunft ist eine ausgewogene Mischung aus KI, AR, VR und MR

Jüngste Entwicklungen in der KI, insbesondere Deep Learning, die die Bild- und Spracherkennung in Echtzeit fördern, haben dazu beigetragen, VR und KI für neue Anwendungen zu kombinieren. Die Zukunft des Produktdesigns muss die Kombination aller drei dieser Technologien berücksichtigen. Bemerkenswerte Beispiele sind Eolian-Anwendungen, die KI-Technologien verwenden, um menschliche Fehlerraten durch AR- und VR-Simulationen gefährlicher Aufgaben zu reduzieren.

Virtualitics bietet Datenvisualisierung in VR- und AR-Umgebungen durch maschinelles Lernen und KI. Diese Technologien sind Werkzeuge, die uns dabei helfen, wie nie zuvor Geschichten zu erzählen und Informationen auszutauschen. Sie können als unglaublich starke emotionale Bindungsinstrumente verwendet werden, die es uns ermöglichen, Empathie aufzubauen und eine Verbindung mit dem Publikum herzustellen – über das hinaus, was Fernsehen, Computer oder das Internet früher zu bieten hatten.

Dies ist eine aufregende Zeit, um mit diesen Technologien zu arbeiten; Die meisten Probleme sind neu und alte Richtlinien gelten oft nicht. Institutionen wie das MIT gehen mit radikalen Experimenten zu neuen Ideen voran. Beispielsweise erstellt das MIT Game Lab Play Labs, um Startups in AR, VR und KI zu beschleunigen. Dies wird zweifellos viele Innovatoren inspirieren.

Die Zukunft könnte als Hyperrealität bezeichnet werden – eine Kombination aus KI, AR, VR und MR. Eine interessante Innovation, EscapeLabs, nutzt Augmented Reality und Mixed Reality (AR/MR), um holografische Erlebnisse für Escape Rooms, Teambuilding-Übungen und raumfüllende Puzzlespiele zu schaffen. Es ist denkbar, dass die Notwendigkeit klobiger Headsets und die Notwendigkeit, sich mit einem statischen Computer zu verbinden, nicht mehr erforderlich ist. Der Übergang zwischen der virtuellen und der realen Welt wird einfacher und schneller – hyperimmersiv.

Das Internet existierte viele Jahre, bevor wir entdeckten, dass Social Sharing der Schlüssel zur Steigerung des Engagements war. Ebenso wird erwartet, dass eine Kombination dieser Technologien ein ähnliches Wachstum verzeichnen wird, wobei die Beschäftigungsmöglichkeiten für Designer in den nächsten Jahren explodieren werden.

Neue Technologien sind mit vielen Unbekannten behaftet, was die Etablierung von Best Practices, Standards und Designmustern erforderlich macht. Es wird davon ausgegangen, dass UX-Designer deshalb in den kommenden Jahren eine langfristige Arbeitsplatzsicherheit haben werden. Es wird immer einen Bedarf an Designern geben, die nutzerzentrierte Designtechniken anwenden, um Wärme in Produkte zu bringen. Das Beste an diesen Technologien ist, dass wir uns noch in der Anfangsphase befinden und unsere kreative Community noch viel herausfinden muss. Spannende Zeiten stehen bevor!

• • •

Weiterführende Literatur im Toptal Design Blog:

• UI-Design Best Practices und häufige Fehler
• Leere Zustände – Der am meisten übersehene Aspekt von UX
• Einfachheit ist der Schlüssel – Erforschung des minimalen Webdesigns
• Heuristische Prinzipien für mobile Schnittstellen
• Lesbares Design – Ein Leitfaden zur Web-Typografie