Mercedes-Benz läutet eine neue Ära der Benutzeroberfläche ein – mit menschenähnlichem virtuellem Assistenten auf Basis generativer KI

Stuttgart/Las Vegas. Mercedes-Benz stellt auf der CES 2024 zahlreiche Entwicklungen vor, die seine Vision für das hyperpersonalisierte Kundenerlebnis der Zukunft definieren – nicht nur im Fahrzeug. Highlight ist der neue integrierte MBUX Virtual Assistant. Er nutzt fortschrittliche Software und generative künstliche Intelligenz (KI), um eine natürlichere und intuitivere Beziehung zum Fahrzeug herzustellen. Sie bietet proaktive Unterstützung, die das Leben einfacher macht. Diese bahnbrechende Entwicklung hebt den Sprachassistenten „Hey Mercedes“ mit hochauflösenden Game-Engine-Grafiken von Unity in eine neue visuelle Dimension. Der virtuelle Assistent läuft auf dem selbst entwickelten Betriebssystem Mercedes-Benz Operating System (MB.OS). Seine Einführung startet mit den Fahrzeugen auf der kommenden MMA-Plattform (Mercedes-Benz Modular Architecture). Das Concept CLA Class basiert auf dieser Plattform und bietet ebenfalls einen Ausblick auf MB.OS. Es feiert auf der CES seine Nordamerika-Premiere.

„Durch Fortschritte in der künstlichen Intelligenz wird der Mercedes-Benz von morgen seine Fahrerin und seinen Fahrer kennen wie nie zuvor. Sie wird das Leben unserer Kundinnen und Kunden verbessern und bereichern – in ihrem Fahrzeug und auch in anderen Bereichen. Wir haben auf diesem Weg bereits große Fortschritte gemacht. Die jüngsten Entwicklungen, die wir auf der CES zeigen, geben einen spannenden Ausblick auf das, was vor uns liegt.“

Markus Schäfer, Mitglied des Vorstands der Mercedes-Benz Group AG, Chief Technology Officer

„Das Mercedes-Benz Kundenerlebnis von morgen wird hyperpersonalisiert sein. Mit generativer KI bringt unser MBUX Virtual Assistant mehr Vertrauen und Empathie in die Beziehung zwischen Fahrzeug und Fahrendem. Dank unserer MB.OS Chip-to-Cloud-Architektur werden unsere zukünftigen Fahrzeuge den Kundinnen und Kunden genau das bieten, was sie brauchen, wenn sie es brauchen.“

Magnus Östberg, Chief Software Officer, Mercedes-Benz AG

MBUX Virtual Assistant macht das Leben mit natürlicher Interaktion und proaktiver Intelligenz einfacher

Der wegweisende MBUX Virtual Assistant auf Basis von MB.OS ist die derzeit menschenähnlichste Schnittstelle mit einem Mercedes-Benz. Er verbindet alle intelligenten Systeme von MBUX in einer einzigen Einheit. Damit präsentiert er Kundinnen und Kunden ein neues Design mit natürlicher und empathischer Interaktion. Der MBUX Virtual Assistant ist eine Weiterentwicklung des erstmals im VISION EQXX vorgestellten Systems. Er nutzt generative KI und proaktive Intelligenz, um das Leben so einfach, angenehm und komfortabel wie möglich zu gestalten. So kann er hilfreiche Vorschläge machen, die auf erlerntem Verhalten und situativem Kontext basieren. Dies kann zum Beispiel das Abspielen der neuesten Nachrichten am Morgen oder der Start eines bevorzugten Massageprogramms am Ende des Arbeitstages sein. Und wenn sich die Fahrerin oder der Fahrer zu einem im Kalender eingetragenen Termin verspätet, kann das System anbieten. Auf Wunsch können Kundinnen und Kunden diese Prozesse auch automatisieren. Durch die Einbindung der Ambientebeleuchtung und des Soundsystems lässt sich das Erlebnis weiter steigern. So können beispielsweise warmes Licht und sanfte Musik eine entspannende Massage begleiten.

Mit vier Verhaltenseigenschaften ist der Assistent stets im Einklang mit Kundenbedürfnissen und -vorlieben

Der MBUX Virtual Assistant zeichnet sich durch vier „Persönlichkeitsmerkmale“ aus, die zu einem abgerundeten Ganzen verschmelzen: natürlich, vorausschauend, empathisch und persönlich. Das zugrundeliegende Prinzip ist immer natürlich. Es bietet eine nahtlose Interaktion, die das Beste aus Sprach- und Grafikschnittstellen nutzt. Kundinnen und Kunden können wählen, ob sie den Assistenten mit oder ohne den Aktivierungsbegriff „Hey Mercedes“ ansprechen möchten. Der MBUX Virtual Assistant nutzt die Vorteile großer Sprachmodelle (Large Language Models, LLMs). Dadurch kann er mit einem natürlichen Dialog auf Fragen und Befehle antworten. Dies wirkt wie ein Gespräch mit einer Freundin oder einem Freund. Der Assistent beantwortet Fragen auf der Grundlage von Allgemeinwissen. Er kann auch intelligente Fragen stellen, um das Gewünschte zu klären und Schlussfolgerungen zu ziehen. Durch seinen vorausschauenden „Charakter“ kann der MBUX Virtual Assistant proaktiv Vorschläge und Routinen anbieten. Sie basieren auf situativem Kontext, erlerntem Verhalten und der Nutzung generativer KI. Gleichzeitig erzeugt eine emotionalere neuronale Stimme, die unterschiedliche Sprachweisen haben kann, ein Gefühl der Empathie. Damit er stets ein sehr persönlicher Assistent ist, kann der Fahrende ihn mit einer Reihe von Optionen an seine eigenen Vorlieben anpassen.

Leistungsstarke 3D-Grafiken machen visuelle Kommunikation noch intuitiver und emotionaler

Der ganzheitliche Ansatz verbindet einen natürlicheren Dialog mit visuellem Feedback durch fortschrittliche 3D-Grafiken der Unity Game Engine. Im neuen MBUX Virtual Assistant nutzt ein „lebendiger“ Stern-Avatar Animationen, um unterschiedliche Stimmungen und Gemütszustände auszudrücken. Die Emotionen reichen von ruhig über aufgeregt bis hin zu sensibel. Weitere Animationen zeigen, ob der virtuelle Assistent gerade spricht, zuhört, nachdenkt, einen Vorschlag macht oder eine Warnung gibt. Bewegung, Helligkeit, Intensität und Farbe interagieren nahtlos, um intuitiv mit Fahrerin und Fahrer zu kommunizieren.

MBUX Surround Navigation verbindet Assistenz und Routenführung zu einem nahtlosen Erlebnis

Die integrierte visuelle Kommunikation erreicht auch mit der MBUX Surround Navigation eine neue Dimension. Dank der tief integrierten Bereichsarchitektur von MB.OS verbindet die fortschrittliche Navigation eine reale Ansicht der Fahrzeugumgebung mit ihren Reaktionen darauf in Echtzeit. Der Fahrende profitiert von einem deutlich verbesserten Situationsbewusstsein. Denn er sieht, was das Fahrzeug sieht. Die nahtlose Einbindung von Informationen mit 3D-Grafiken der Unity Game Engine in das Instrumentendisplay bietet einen äußerst intuitiven Überblick. Es zeigt auf einen Blick alles, was der Fahrende wissen muss. Zum Beispiel die Art des Verkehrs – sei es ein anderes Auto, ein Transporter, ein Lastwagen oder ein Radfahrender. Auch zu Fuß gehende Personen in der Nähe des Straßenrands und andere potenzielle Gefahren werden angezeigt. Das System blendet die Routenführung in eine realistische Darstellung der Umgebung ein. Das ist besonders hilfreich in belebten städtischen Umgebungen. Kundinnen und Kunden können genau sehen, was hinter der nächsten Abbiegung liegt. Gebäude und andere Infrastruktur sind einfach und schnell zu erkennen. Außerdem bietet das System einen integrierten Überblick über den Fahrzeugstatus durch Virtual-Reality-Echtzeitvisualisierung. Dazu gehören das Aufleuchten von Blinkern, Fern- und Abblendlicht. Sogar Beschleunigung und Verzögerung werden durch drehende Räder visualisiert.

Mehr Produktivität, Entertainment und Komfort mit neuen Drittanbieter-Apps und -Inhalten

Over-the-Air-Updates (OTA-Updates) stellen sicher, dass Kundinnen und Kunden stets Zugang zu den neuesten Inhalten und Funktionen haben, die auf ihre Wünsche und regionalen Präferenzen zugeschnitten sind. Die neue E-Klasse bietet diese Vorteile bereits. Ihr Infotainment-Bereich ist ein Vorläufer der MB.OS Technologie. Im ersten Quartal 2024 kann die MBUX Meeting App integriert werden. Mit ihr lässt sich die Produktivität in der E-Klasse weiter steigern. Sie bietet einen mit Microsoft Teams kompatiblen Client und einen Kalender. Damit ermöglicht sie Kundinnen und Kunden an Teams-Besprechungen teilzunehmen. Das umfangreiche Update umfasst weitere zusätzliche Apps für den Alltagskomfort. Dazu gehören Booking.com, getAbstract, JustEat Takeaway und viele mehr. Für das Entertainment sind die Einführung von cloudbasierten Retro-Spielen von Anstream Arcade und weitere immersive Erlebnisse geplant. Darüber hinaus wird das Video-Streaming-Angebot bald in vielen Märkten durch die Integration von Sony RideVU bereichert. Damit erhalten Kundinnen und Kunden Zugriff auf einen umfangreichen Katalog aus dem breit gefächerten Portfolio hochwertiger Sony-Titel. Er wird alle drei Monate um neue Inhalte ergänzt.

Hyperpersonalisierung durch digitale Kunst mit MBUX Collectibles und vielem mehr

MBUX Collectibles ist die erste Fahrzeug-App, die digitale Kunst und Sammlerstücke auf Basis von NFTs präsentiert. Sie ermöglicht Kundinnen und Kunden, ihre persönliche NFT-Wallet mit der Benutzeroberfläche zu verbinden und eine private Kunstgalerie einzurichten. Außerdem können sie eine von Mercedes-Benz kuratierte Ausstellung besuchen. Auf der CES werden NFT-Kollektionen von Mercedes-Benz NXT gezeigt. Die Sammlung Mercedes-Benz NXT Icons Era 1 „Luxury“ ist die erste Folge einer siebenteiligen Serie über das reiche Designerbe von Mercedes-Benz. Besucherinnen und Besucher der CES erhalten einen ersten Einblick in die Kollektion Era 2 „Technology“, die Ende Januar veröffentlicht wird. Als Hommage an die CES im vergangenen Jahr können sie auch einen ersten Blick auf das Superdackel-NFT von Mercedes-Benz NXT werfen. Eine limitierte Auflage von 1.000 Superdackel-NFTs by Mercedes-Benz NXT wird Mitte Januar erscheinen.

Concept CLA Class zeigt MB.OS als das Fundament für den hyperpersonalisierten Mercedes-Benz

Die Fahrzeuge auf der kommenden MMA-Plattform werden die ersten sein, die vollständig auf MB.OS laufen. Das Concept CLA Class bietet einen seriennahen Einblick in die künftige Familie von vier Fahrzeugen. Es feiert auf der CES 2024 seine Nordamerikapremiere. Mit einer eindrucksvollen Visualisierung im Innenraum unterstreicht das Konzeptfahrzeug die zentrale Rolle, die MB.OS bei der Gestaltung des Kundenerlebnisses spielt. Die komplexe, vielschichtige Architektur des Betriebssystems wird durch eine ihrer vielen Hardwarekomponenten dargestellt – den wassergekühlten Hochleistungs-Chip des Kooperationspartners NVIDIA. Der fortschrittliche MBUX Superscreen mit drei Displays deutet an, dass der Mercedes-Benz der Zukunft ein hyperpersonalisierter Teil des digitalen Lebens der Kundinnen und Kunden sein wird. MB.OS ist dafür das Fundament. Das Betriebssystem umfasst vier Bereiche: Infotainment, automatisiertes Fahren, Karosserie & Komfort sowie Fahren & Laden. Hinzu kommt das Konnektivitätsmodul für die Verbindung mit der Mercedes-Benz Intelligent Cloud. Die Chip-to-Cloud-Architektur sorgt für eine tiefe Integration in das Fahrzeug und bietet Mercedes-Benz die volle Kontrolle über alle Sensoren und Aktoren. Außerdem kann das Unternehmen durch die Entkopplung der Innovationszyklen von Software und Hardware sicherstellen, dass seine Fahrzeuge stets auf dem neuesten Stand sind.