Interaktion mit Autos: Was ist am Horizont?

Seit Jahren unterstützt Nuance Communications die Automobilindustrie bei der Integration anspruchsvoller sprachbasierter Technologien in Autos. Das Unternehmen arbeitet mit nahezu allen großen Automobilherstellern zusammen und seine Benutzeroberflächensoftware ist in fast der Hälfte der weltweit verkauften Fahrzeuge installiert. Wenn Sie ein relativ neues Auto haben, besteht eine gute Chance, dass Sie die Technologie von Nuance zum Sprachwählen, zur Steuerung der Navigation per Sprache, zur Eingabe von Zielen oder zum Abspielen von Musik nutzen.

Jetzt nutzt Nuance Fortschritte in seiner Sprachtechnologie sowie Technologien wie Emotion Erkennungs-KI, Eye-Tracking/ und Augmented Reality, um völlig neue Möglichkeiten der Interaktion einzuführen dein Auto. Eric Montague, Senior Director für Strategie und Produktmarketing bei Nuance, sprach mit ZDNet über die Zukunft.

Hier sind die Höhepunkte dieses Gesprächs:

Demnächst erhältlich: Ein knopffreies Erlebnis

Bis Ende 2019 planen Nuance und seine Automobilpartner, das Konzept eines knopflosen Autos, Montague, einzuführen. Das bedeutet, dass Sie alles effektiv per Sprache steuern können – und zwar mit Präzision. Sie können sagen: „Öffne das Fenster“, genauer gesagt: „Öffne das Fenster zur Hälfte“ oder „Öffne das Fenster etwas weiter“.

Darüber hinaus können Fahrer ohne Weckwort mit ihren Fahrzeugen interagieren. Sie können „einfach mit dem Auto fahren und sagen: ‚Ich habe Hunger‘, und das Auto hört Ihnen zu und hilft Ihnen, einen Ort zum Essen zu finden“, sagte Montague.

Die Präzision werde es „viel schneller machen als die Verwendung jeder anderen Schnittstelle“, sagte Montague. „Sie können einfach fahren und [zu Ihrem Navigationssystem] sagen: „Vergrößern Sie unsere Position.“ Oder „Zoomen Sie das Ziel ein“ oder „Zeigen Sie mir die nächste Tankstelle“ und unterhalten Sie sich einfach wie ein Mensch.“

Daten privat halten

„Das System hört Ihnen immer zu, daher ist die Technologie eingebettet, um sicherzustellen, dass Ihre privaten Gesprächsdaten nicht in die Cloud gelangen“, sagte Montague. „Es bleibt im Auto, denn Privatsphäre ist ein großes Anliegen“ für Automobilmarken.

„Deshalb haben wir versucht, so viele Daten wie möglich im Auto zu behalten“, fuhr er fort. „Aber manchmal kommt man nicht umhin, private Daten in die Cloud zu schicken. Ein besonderes Beispiel ist, wenn Sie Dinge sagen wie: „Wie ist das Wetter dort, wo ich bin?“ oder: „Wie ist das Wetter bei mir?“ Ziel?' Wo Sie also sind und wohin Sie gehen, möchten Sie vielleicht nicht mit Dritten teilen Party.

Für diese Fälle hat Nuance mit OEMs zusammengearbeitet, „um Systeme zu entwickeln, die Daten auf eine unidirektionale Weise nutzen“, sagte Montague und erklärte, dass Nuance einen unidirektionalen Hash-Mechanismus verwendet.

„Alle Daten, die aus dem Auto kommen, werden also in verschiedene Bereiche aufgeteilt und auf eine bestimmte Weise codiert Das macht es nicht möglich, diese Daten neu zu kombinieren, alle privaten Daten des zu rekonstruieren Treiber."

In Kürze erhältlich: Mit Ihrem Blick mit der Außenwelt interagieren

Ende dieses Jahres, sagte Montague, werden Fahrer in der Lage sein, über ihre Stimme und ihren Blick mit der Außenwelt zu interagieren.

Er erklärte, es sei „die Fähigkeit, beim Autofahren auf Dinge draußen und auf interessante Punkte zu blicken und Fragen zu dem zu stellen, was man sieht …“ Sie sehen ein Restaurant und fragen sich: „Wie lauten die Nutzerbewertungen für dieses Restaurant?“ wenn man es einfach anschaut. Das System schaut auf Ihr Auge und schaut, wohin Ihre Augen blicken, und wandelt dies in einen Punkt von Interesse um, übernimmt Ihren Befehl und interpretiert dann Ihren Befehl für diesen Punkt von Interesse.

Demnächst: Interaktive intelligente Fenster

Auf der CES arbeitete Nuance mit seinem Partner Saint-Gobain zusammen, um die Fähigkeit zu demonstrieren, Widgets anzuzeigen und mit einer intelligenten Windschutzscheibe zu interagieren. Tatsächlich dient die gesamte Windschutzscheibe als transparentes Display, erklärte Montague. Es könnte Informationen über die Musik, die Sie gerade spielen, oder über Dinge in der Umgebung anzeigen. Das solle „in den nächsten Jahren“ auf den Markt kommen, sagte Montague.

Für die Sicherheit der Fahrer sorgen

Im Vergleich zum Chatten mit Ihrem Smart Speaker im Wohnzimmer ist die Interaktion mit einer Smart Interface beim Autofahren viel riskanter und komplexer. Folglich müssen intelligente Schnittstellen in Fahrzeugen „Entscheidungen treffen, die für die Sicherheit entscheidend sind“, sagte Montague. Er erklärte: „Wir haben Untersuchungen, die zeigen, dass die Interaktion mit dem Fahrer in einem kritischen Moment das Unfallrisiko erhöhen kann.“ Was Sie also wirklich brauchen, ist eine Software, die intern entscheiden kann... „Was ist mit der Schnittstelle zu tun?“ während eines potenziell risikoreichen Ereignisses.

„Wenn wir die Schnittstelle zu diesem Auto bereitstellen, werden wir über jedes einzelne Ereignis informiert, das dem Auto bekannt ist“, sagte Montague.

Er gab ein Beispiel:

„Nehmen wir an, ich interagiere mit dem Auto, um einen Musiksender auszuwählen … Wenn ich zum Beispiel ein Kind auf dem Rücksitz des Autos habe und das Kind seinen Sicherheitsgurt abnimmt, erhalten wir ein Ereignis vom internen Netzwerk des Autos in die Schnittstelle. Wenn einer der Sensoren erkennt, dass sich auf meiner linken Seite ein Auto befindet, das ich nicht sehen kann – von Sensoren zur Erkennung des toten Winkels – dann erhalte ich ein Ereignis, eine Nachricht von diesem Netzwerk, in die Schnittstelle. Wenn mir der Treibstoff ausgeht, erhalte ich eine Nachricht vom Netzwerk... Die Anzahl der Ereignisse, die die Interaktion verändern können, ist also 10 bis 100 Mal höher als die, die Sie auf einem Mobiltelefon oder einem intelligenten Lautsprecher finden würden, und Sie müssen mit all dem klarkommen. Sie müssen entscheiden, wann einer dieser Sensoren ein Ereignis erkennt, beispielsweise das Ablegen des Sicherheitsgurts In diesem Moment sollte die Schnittstelle weiterhin mit dem Fahrer interagieren oder anhalten und andere Optionen anbieten.“

Emotionserkennung zur Sicherheit nutzen:

Nuance arbeitet außerdem mit einem in Boston ansässigen Unternehmen namens Affectiva zusammen, das eine Technologie zur Erkennung von Gesichtsemotionen entwickelt. Diese Technologie könne dazu beitragen, die Sicherheit der Fahrer zu gewährleisten, sagte Montague.

„Es kann Ihre Augen und Ihr Gesicht betrachten und dann mithilfe künstlicher Intelligenz beurteilen, ob Sie müde sind“, erklärte er. „Dann geben die Systeme meist einen Warnton ab. Oder es erscheint ein Bildschirm, der Ihnen sagt, dass Sie aufhören sollen, weil Sie müde aussehen.“

Nuance, sagte Montague, gehe bei dieser Art von System noch einen Schritt weiter. „Über die Analyse Ihres Gesichtsausdrucks, des Tons Ihrer Stimme hinaus … Wir versuchen wirklich, den Fahrer auf mehreren Ebenen einzubeziehen, um eine echte Lösung für die Tatsache zu finden, dass er müde ist“, sagte er. „Also, was bedeutet es? Sobald die Technologie erkennt, dass Sie müde sind, kann sie zunächst einen Ton abspielen, um Sie darauf aufmerksam zu machen, dass Sie müde sind... Und dann werden dem Fahrer nach und nach verschiedene Optionen angezeigt. Eine Möglichkeit könnte darin bestehen, mit dem Fahrer ins Gespräch zu kommen. Eine andere Möglichkeit besteht darin, praktisch eine Möglichkeit zum Ausruhen anzubieten. Wenn Sie sehr müde sind, suchen Sie vielleicht ein Hotel... Bieten Sie vielleicht einen Ort an, an dem Sie unterwegs einen Kaffee trinken können.

Sicherstellen, dass Benutzer nicht verschreckt werden

Vor zweieinhalb Jahren gründete Nuance ein User-Experience-Forschungslabor namens Drive Labs. „Für jede Funktion oder jedes neue Produkt, das auf den Markt kommt, führen wir einige Untersuchungen mit Benutzern durch, um sicherzustellen, dass sich die Art und Weise, wie wir diese Produkte auf den Markt bringen, für den Benutzer richtig anfühlt“, sagte Montague.

Sehr oft kommt es auf Details an, sagte er. „Wenige Details darüber, wie Sie sich engagieren, wie Sie Erwartungen setzen, wie Sie die zu verwendende Technologie ableiten und wie sie im Auto funktionieren kann.“ Es macht einen Unterschied für die Akzeptanz der Verbraucher. Es gibt also keine einfache Antwort. Es geht darum, die richtige Forschung mit Verbrauchern durchzuführen, und das tun wir auf globaler Ebene... Die Erwartungen und das Verhalten der Nutzer verändern sich je nach Region.“