Edge-AI-Vision-System für mehr Sicherheit beim Fliegen

Pilots in the cockpit© Lufthansa Group

Aufgrund des höheren Automatisierungsgrads und der neuartigen Schnittstellen müssen die Pilotinnen und Piloten in den modernen Cockpits grosse Mengen an Informationen verarbeiten, insbesondere in Ausnahmesituationen. Eine Verbesserung der Mensch-Maschine-Interaktion im Cockpit hilft, den Fokus der Pilotinnen und Piloten der Situation entsprechend zu steuern und die Arbeitsbelastung zu reduzieren. Genau das wollte das vom CSEM geleitete PEGGASUS-Konsortium erreichen, indem es die Erkennung von Blicken und Handbewegungen in Echtzeit kombiniert.

CSEM nutzte modernste künstliche Intelligenz und computergestützte Techniken, um ein robustes Bildverarbeitungssystem zu entwickeln, welches an die extremen Bedingungen angepasst ist, die während eines Fluges eintreten können. Das in einem Flugsimulator getestete PEGGASUS-System erkennt sowohl Blicke als auch Gesten und verspricht eine Verbesserung der Piloteneffizienz, der Trainingstechniken und der Flugsicherheit. Für die Entwicklung einer leistungsfähigen, massgeschneiderten Lösung arbeitete CSEM mit Luftfahrtfachleuten von SERMA Ingénierie, Swiss International Air Lines und der ETH Zürich zusammen, deren Kompetenzen für den Erfolg des Projekts unverzichtbar waren.