Steuerung des Autos mit Gesten
PoC für ein großes deutsches Automobilunternehmen: Eine einzigartige Benutzeroberfläche mit Gestenerkennung zur Steuerung über die Mittelkonsole.
Unser Ergebnis
Übersicht
Challenge
Der Anwendungsfall bestand darin, mit einer Smartwatch als Gerät für die Gestenerkennung mit der Hand zu wischen, um Anrufe anzunehmen oder abzubrechen. Die Informationen würden direkt an das Auto gesendet.
Lösung
Wir haben ein Deep-Learning-Modell erstellt , um einige vordefinierte Handgesten wie Wischen nach rechts/links, Tippen usw. zu erkennen. Daraufhin haben wir dieses Modell in das Apple-eigene CoreML-Modell konvertiert , mit dem wir das neuronale Netzwerk direkt auf der Apple Watch ausführen konnten.
Technologien
- Keras
- CoreML
- Python
- TensorFlow
- WatchOS
Impact
Bei diesem Projekt handelte es sich um einen technischen Proof of Concept, bei dem eine einzigartige Benutzerschnittstelle vorgestellt wurde: die Gestenerkennung während der Fahrt, mit der die Benutzer das Unterhaltungssystem des Fahrzeugs mit einfachen Handgesten steuern konnten.
