Fahrer- & Innenraumüberwachung (Müdigkeit, Ablenkung, Dashcams für die Flottensicherheit)

Müdigkeit und Unaufmerksamkeit bleiben eine der Hauptursachen schwerer Unfälle, besonders im Fernverkehr mit Lkw und im Busverkehr. Fahrerüberwachungssysteme (DMS) nutzen eine Nahinfrarot-Kamera und kompakte Bildmodelle auf einem eingebetteten Chip, um Lidschluss, Blickrichtung und Kopfhaltung in Echtzeit zu verfolgen und den Fahrer zu warnen. In der EU ist das inzwischen eine regulatorische Grundausstattung für neue Fahrzeuge; in Flotten ergänzen KI-Dashcams die Ereigniserfassung und das Coaching. Die Herausforderung beim Entwurf liegt ebenso bei der DSGVO, den Betriebsräten und den Grenzen der KI-Verordnung für Emotionserkennung wie bei der Genauigkeit.

Problem & Nutzen

• Heute: Fahrer verlassen sich auf Selbsteinschätzung und die Ruhezeitregeln des Fahrtenschreibers; Führungskräfte erfahren von Beinaheunfällen erst nach Vorfällen oder Beschwerden. Herkömmliche Telematik sieht Geschwindigkeit und Bremsen, nicht die Aufmerksamkeit des Fahrers.
• KI-Nutzen: sofortige Warnungen im Fahrzeug (Sekunden zählen), objektive Nachweise für Schadensfälle und Haftung, gezieltes Coaching statt pauschaler Rüge und messbar geringeres Flottenrisiko (weniger Kollisionen, niedrigere Versicherungsprämien).
• Regulatorischer Sog: Die Verordnung (EU) 2019/2144 (Allgemeine Sicherheitsverordnung) schreibt den Warnassistenten für Fahrermüdigkeit und Aufmerksamkeit (DDAW) sowie den erweiterten Warnassistenten für Fahrerablenkung (ADDW) vor. ADDW galt für neue Fahrzeugtypen ab Juli 2024 und gilt für alle neu zugelassenen Fahrzeuge ab dem 7. Juli 2026; die technischen Anforderungen stehen in den Delegierten Verordnungen (EU) 2021/1341 und 2023/2590 [1][2][3]. Euro NCAP honoriert eine robuste Fahrerüberwachung in seinen Bewertungen [5].

Varianten

• DMS für die Typgenehmigung beim Fahrzeughersteller (DDAW/ADDW): im Fahrzeug eingebettet; nur Warnung, keine Daten verlassen das Fahrzeug; geprüft nach den delegierten Verordnungen und den Euro-NCAP-Protokollen.
• Nachrüstung bei Lkw-/Bus-/Transporterflotten: nachträglich eingebaute Video-Telematik im Innenraum mit Cloud-Portal, Ereignis-Upload und Coaching-Ablauf; oft kombiniert mit einer nach vorn gerichteten Kamera (zu dichtes Auffahren, Spurverlassen, Beinaheunfälle).
• Erkennung von Kindern und Insassen: Innenraumsensorik (Kamera oder Radar), um ein im Fahrzeug zurückgelassenes Kind zu erkennen und Sitzbelegung/Gurtnutzung zu prüfen; von Euro NCAP getriebenes Merkmal.

So funktioniert es

1. NIR in-cab camera (+ road camera, CAN/GPS/IMU)
2. on-device face/eye/head-pose & hand/object detection (embedded NPU/SoC)
3. state estimation (eyelid closure/PERCLOS, gaze zone, head turn, phone, seatbelt, occupancy)
4. rule/threshold logic fused with vehicle context (speed, indicator, manoeuvre)
5. in-cab alert (audio/haptic) | event clip + metadata (fleet variant)
6. cloud review (optional VLM triage, human safety analyst)
7. coaching workflow, dashboard, claims evidence

• Wahrnehmung: Leichtgewichtige CNN-/Transformer-Modelle für Gesichtspunkte, Blick und Haltung laufen am Rand (Edge); die Latenz muss deutlich unter einer Sekunde liegen, und sie müssen mit Sonnenbrille, bei Nacht und unter Vibration funktionieren.
• Fusion: Ein Blick zur Seite wird beim Überholen oder beim Blick in die Spiegel toleriert; derselbe Blick bei Autobahngeschwindigkeit nicht. Der Fahrzeugkontext verringert Fehlalarme, die Fahrer sonst zu ignorieren lernen.
• Triage in der Cloud: Ereignisse werden bewertet und oft von menschlichen Analysten geprüft; Bild-Sprachmodelle können Clips vorab labeln („Handy in der Hand“, „zu dichtes Auffahren“), um den Prüfaufwand zu senken.
• Mensch-in-der-Schleife (Human-in-the-Loop): Coaches entscheiden über Gespräche; keine automatischen disziplinarischen Maßnahmen aus Modellausgaben. Fahrer können Ereignisse anfechten.

Datenaufbereitung

Die Daten sind Innenraumvideos oder Sensorsignale (Lidschluss, Blick, Kopfhaltung), Fahrzeugdaten (CAN, GPS, Geschwindigkeit) und Vorfallprotokolle. Diese liegen typischerweise auf dem Dashcam-Gerät, im Portal des Anbieters und im Telematiksystem, während Kontext wie Schichtpläne, Fahrerstammdaten und Unfallberichte im TMS, in der Lohnbuchhaltung oder im Personalsystem und auf Papier liegt. Typische Lücken: keine Vergleichswahrheit, was als müde gilt, falsche Kamerapositionen, Fahrer mit Brille oder Maske, fehlende Einwilligungs- und Aufbewahrungsregeln und keine Verknüpfung zwischen Warnungen und tatsächlichen Vorfällen.

Schritte der Aufbereitung: Zuerst die mindestens nötigen Daten festlegen; auf dem Gerät verarbeiten und nur Ereignisse speichern, kein durchgehendes Video (PREP-022). Aufbewahrungsfristen und Zugriffsrechte je Rolle festlegen (PREP-023, PREP-024). Die Rechtsgrundlage für die Verarbeitung von Beschäftigtendaten prüfen (PREP-025). Mit Unterstützung der Fahrer einen Testsatz annotierter Ereignisse aus Pilotfahrzeugen aufbauen (PREP-018) und Vorfall-Labels aus Unfallberichten gewinnen (PREP-020). Fahrzeug- und Fahrerstammdaten über Exporte verknüpfen (PREP-005). Kameras je Fahrzeugtyp kalibrieren.

Grober Aufwandsanteil: 40 Prozent oder mehr, weil Rechtsgrundlage, Aufbewahrungskonzept, Kalibrierung und Beschaffung der Vergleichswahrheit überwiegen; die Erkennungsmodelle selbst sind vergleichsweise ausgereift.

Umsetzungswege

Welcher Weg für wen

• smb (A): Zertifizierte Flotten-Dashcam-Systeme mit Innenraumsensoren sind ausgereift und einbaufertig; die rechtliche Seite und die Beschäftigtendaten wiegen schwerer als die Technik.
• enterprise (B): Große Flotten brauchen die Anbindung an Telematik-, TMS- und Personalsysteme, und Beschäftigtendaten sind hochsensibel, daher passt ein konfigurierbarer Cloud-Dienst mit strenger Datensparsamkeit.
• developer (C): Offene Modelle für Gesichtspunkte und Blick laufen auf HW1-Edge-Geräten, halten das Video im Fahrzeug und geben Kontrolle darüber, was die Kabine verlässt.

Weg A — Kaufen (für die meisten Flotten empfohlen)

• Flotten-Videotelematik: Samsara, Lytx, Motive, Netradyne, Nauto, das Ökosystem Stoneridge/MirrorEye, Nachrüstgeräte auf Mobileye-Basis sowie europäische Anbieter wie Trimble/Transics, Webfleet (Bridgestone), Brigade und Geräte auf Streamax-Basis. EU-Datenstandort, Aufbewahrungssteuerung, reinen Betrieb auf dem Gerät und Vorlagen für Betriebsvereinbarungen prüfen.
• Ab Werk eingebaute Systeme: Bei neuen Lkw und Bussen ist das werkseitige DMS (Lieferketten von Smart Eye, Seeing Machines, Valeo, Continental, Bosch) bereits vorhanden; nutzen Sie es, statt eine zweite Kamera zu ergänzen.
• A wählen, wenn: eine Flotte von etwa 10 bis mehreren tausend Fahrzeugen in Wochen ohne ML-Team ausgerollt werden soll.

Weg B — Auf Cloud-KI-Diensten aufbauen

• Für die Echtzeitschleife selten geeignet (Latenz, Konnektivität, Kosten). Die Cloud eignet sich für das Backend: Ereignisaufnahme (AWS Kinesis Video Streams, Azure IoT/Event Hubs in EU-Regionen), Triage von Clips mit multimodalen APIs (Gemini, Claude, Mistral-Bildmodelle) und Coaching-Zusammenfassungen.
• Nur Ereignisclips hochladen, niemals durchgehendes Innenraumvideo (zum Verpixeln siehe VIS-030).

Weg C — Selbst betreiben (Open Source)

• Modelle: MediaPipe Face Mesh / Iris, OpenFace, Detektoren der YOLO-Familie für Handy/Zigarette/Sicherheitsgurt, offene Datensätze für das Training wie DMD (Driver Monitoring Dataset) und Sätze im Stil von DrivFace; Ultralytics YOLO oder RT-DETR, exportiert nach ONNX/TensorRT.
• Laufzeit: NVIDIA Jetson Orin (Nano/NX), Qualcomm, Hailo-8 oder Ambarella-SoCs; OpenVINO auf Intel.
• Hardware: HW1-Edge-Gerät pro Fahrzeug; Backend auf CPU-Server oder HW2-GPU für die Clip-Prüfung.
• Betriebsaufwand: hoch; Sie verantworten sicherheitsrelevante Kalibrierung, Kamerahardware, OTA-Updates und die Validierung über Beleuchtung, Ethnien, Brillen und Kopfbedeckungen hinweg.

Weg D — Eigenes Training

• Nötig für die Entwicklung bei Fahrzeugherstellern/Tier-1-Zulieferern oder für ungewöhnliche Kabinen (Busse, Krane, Züge). Erfordert große, vielfältige Innenraumdaten mit Einwilligung über Hauttöne, Altersgruppen, Brillen und Beleuchtung hinweg sowie Vergleichswahrheit (PERCLOS, Labels der Karolinska-Schläfrigkeitsskala, Blickziele). Synthetische Daten sind eine häufige Ergänzung. Euro NCAP und die Prüfprotokolle der Delegierten Verordnung definieren die Validierungsziele [3][5].

Stand der Technik (2026)

• Durch Regulierung getriebene Reife: Nach Juli 2026 hat jedes neue Fahrzeug in der EU DDAW und ADDW, daher wird das DMS auf Herstellerebene zur Massenware, während sich die Differenzierung auf Flottenanalysen und Coaching verlagert.
• Multisensorische Innenraumerkennung: Kamera plus 60-GHz-Radar zur Erkennung von Kindern und für nahe an Vitalzeichen liegende Erkennung; kombinierte Insassen- und Fahrerüberwachung auf einem SoC.
• Fusion mit KI nach vorn: Dashcams verknüpfen den Fahrerzustand mit zu dichtem Auffahren, Spurverlassen und harten Ereignissen und ermöglichen den Nachweis „Ablenkung ging dem Beinaheunfall voraus“.
• Grenzen: Sonnenbrillen, extreme Kopfhaltung, verdeckte Kamera, Blendung, Verzerrung durch Vielfalt der Fahrer, Ermüdung durch Fehlalarme und Täuschungsversuche. Echte Müdigkeit ist ein physiologischer Zustand; Lidsignale sind Stellvertreter. Aus dem Gesicht „Emotion“ oder „Stress“ abzuleiten ist wissenschaftlich schwach und rechtlich problematisch (siehe unten).

Gemeinsame Bausteine & Kombinationen

• Gleicher Stack (pose-estimation, object-detection, tracking, edge-runtime): VIS-024 Analyse von Haltung und Gesten, VIS-007 Einhaltung der persönlichen Schutzausrüstung, VIS-010 Überwachung; eine Edge-SoC-Familie und eine Labeling-Pipeline.
• Straßenseite: ROBO-005 (ADAS-Wahrnehmung), VIS-012 Verkehrsüberwachung, VIS-054 Kontrollkameras (Handynutzung am Steuer; anderer rechtlicher Rahmen).
• Nachgelagert: PRED-030 Bewertung für nutzungsbasierte Versicherung, VIS-031 Videosuche in natürlicher Sprache über Ereignisarchive, VIS-030 Anonymisierung von Clips vor der breiteren Weitergabe.

Aufwand, Kosten & Kennzahlen

• Weg A: Wochen für den Rollout; die Kosten bestehen aus Hardware pro Fahrzeug plus monatlichem Abonnement; Einbau und Einweisung der Fahrer bestimmen den Aufwand.
• Weg B: 2-4 Monate für das Backend; laufende Kosten für Speicher und Datenabfluss bei Clips.
• Weg C/D: 6-18 Monate, spezialisiertes Team; eine Validierung auf Herstellerniveau kann Jahre dauern.
• Kennzahlen: Präzision/Trefferquote der Warnungen an gelabelten Clips, Fehlalarme pro 100 Stunden, Kollisionen und Beinah- unfälle pro Million km, Anteil der Fahrer mit positiver Entwicklung nach dem Coaching, Schadenkosten und Bearbeitungszeit, Akzeptanzwert bei den Fahrern, Anzahl fristgerecht bearbeiteter Anfragen betroffener Personen.

Menschen & Veränderung

Geschäftsleitung und die Flotten- bzw. Abteilungsleitung legen den Zweck fest, der Sicherheit sein sollte, nicht Leistungskontrolle. Der Betriebsrat muss von Anfang an eingebunden werden, bevor eine Kamera gekauft wird. Betriebsrat: ja. Die Innenraumüberwachung ist eine technische Einrichtung, die zur Überwachung des Verhaltens von Beschäftigten geeignet ist (§87 Abs. 1 Nr. 6 BetrVG; objektive Eignung genügt), und §90 Abs. 1 Nr. 3 verlangt die rechtzeitige Unterrichtung über KI-gestützt geplante Arbeitsverfahren. Schließen Sie eine Betriebsvereinbarung, die Zwecke festlegt, die Nutzung für Leistungsbeurteilungen oder Kündigungen verbietet, die Aufbewahrung regelt und bestimmt, wer was sehen darf. §80 Abs. 3 erlaubt dem Betriebsrat, einen KI-Sachverständigen hinzuzuziehen. Flotten im öffentlichen Dienst beziehen den Personalrat ein. Wo es keinen Betriebsrat gibt, sollten die Fahrer dennoch angehört und transparent informiert werden.

Die Datenschutzbeauftragte bzw. der Datenschutzbeauftragte ist in der Praxis zwingend: Eine Datenschutz-Folgenabschätzung (DSFA, Art. 35 DSGVO) ist wegen der systematischen Überwachung von Beschäftigten sehr wahrscheinlich, dazu ein AVV mit dem Anbieter und eine dokumentierte Rechtsgrundlage. Die IT-Sicherheit prüft den Zugriff auf Geräte und Cloud; Recht und Personalabteilung prüfen die arbeitsrechtlichen Grenzen und die Haltung der KI-Verordnung (AI Act) zur Emotionserkennung am Arbeitsplatz. KI-Kompetenz (Art. 4): Schulen Sie Fahrer und Disponenten darin, was aufgezeichnet wird, was Warnungen bedeuten und wie man sie anficht. Starten Sie einen Pilotbetrieb mit freiwilligen Fahrern und wenigen Fahrzeugen, berichten Sie offen über die Ergebnisse und lassen Sie Fahrer ihre eigenen Daten einsehen. Typische Sorgen (Überwachung, Kündigung, Privatsphäre am Steuer) begegnen Sie mit der Betriebsvereinbarung, lokaler Verarbeitung und menschlicher Prüfung vor jeder Konsequenz. Siehe GUIDE-004, GUIDE-005 und GUIDE-008.

Risiken, Regulierung & Compliance

• KI-Verordnung (AI Act): Die Einstufung hängt vom Einsatz ab. Art. 5 Abs. 1 lit. f verbietet KI-Systeme, die Emotionen von Beschäftigten am Arbeitsplatz ableiten, außer aus medizinischen oder Sicherheitsgründen. Die Erkennung von Müdigkeit und Aufmerksamkeit gilt im Allgemeinen als Sicherheitsanwendung und nicht als Emotionserkennung, doch jede Bewertung von „Stimmung“, „Stress“ oder „Wut“ der Fahrer läuft ernsthaft Gefahr, verboten zu sein; beschränken Sie die Ausgaben auf körperliche Zustände (Augen geschlossen, Blick von der Straße, Handy in der Hand). Fahrzeug-Sicherheitskomponenten, die nach dem Typgenehmigungsrecht zugelassen sind, fallen unter die sektoralen Regeln in Anhang I; Flottenüberwachung, die in Mitarbeiterbeurteilung, Aufgabenverteilung oder disziplinarische Entscheidungen einfließt, kann als Hochrisiko unter Anhang III (Beschäftigung) fallen; die biometrische Identifizierung von Fahrern (Gesichts-Login) zieht die Biometrie-Regeln nach sich [4]. Holen Sie eine rechtliche Bewertung ein.
• DSGVO: Innenraumvideo von Beschäftigten sind personenbezogene Daten; biometrische Vorlagen sind besondere Kategorien (Art. 9). Nötig sind eine Rechtsgrundlage (meist berechtigtes Interesse mit Interessenabwägung; Einwilligung ist im Beschäftigungsverhältnis schwach), eine DSFA (Art. 35), Transparenz, Datensparsamkeit, kurze Aufbewahrung und Zugriffsbeschränkungen. Das DMS der Typgenehmigung ist so ausgelegt, dass es weder speichert noch identifiziert; behalten Sie dieses Prinzip in Flotten bei [1][6].
• Arbeitsrecht: In Deutschland gilt die Mitbestimmung des Betriebsrats (§87 Abs. 1 Nr. 6 BetrVG) und eine Betriebsvereinbarung ist üblich; vergleichbare Regeln gibt es in anderen Mitgliedstaaten. Niemals heimlich aufzeichnen; erwägen Sie einen Modus mit Datenschutz durch Technikgestaltung (nur ereignisgesteuerte Aufzeichnung, kein durchgehender Upload, Ton aus).
• Gegenmaßnahmen: Verarbeitung auf dem Gerät, Upload nur von Ereignissen, für Fahrer sichtbare Kontrollleuchte, Beschwerde- verfahren, Tests auf Verzerrungen über Bevölkerungsgruppen hinweg, stufenweiser Rollout unter Beteiligung der Fahrer.

Erste Schritte

1. Prüfen Sie, was die Fahrzeuge bereits enthalten: DDAW/ADDW der Hersteller und deren Möglichkeiten zum Datenexport.
2. Legen Sie das Sicherheitsziel und einen minimalen Datensatz fest; führen Sie zuerst die DSFA durch und schließen Sie die Betriebsvereinbarung ab.
3. Testen Sie 3 Monate lang 10-20 Fahrzeuge mit zwei Anbietern und messen Sie Fehlalarme und Akzeptanz bei den Fahrern.
4. Legen Sie Coaching-Regeln fest (zuerst positive Rückmeldung, keine automatischen Sanktionen) und einen Aufbewahrungsplan.
5. Prüfen Sie vierteljährlich: Entwicklung der Kennzahlen, Verzerrungsprüfungen, angefochtene Ereignisse und regulatorische Änderungen.

Quellen

1. Regulation (EU) 2019/2144 (General Safety Regulation) — https://eur-lex.europa.eu/eli/reg/2019/2144/oj
2. Delegated Regulation (EU) 2021/1341 (DDAW/ADDW technical rules) — https://eur-lex.europa.eu/eli/reg_del/2021/1341/oj
3. Delegated Regulation (EU) 2023/2590 (ADDW amendments) — https://eur-lex.europa.eu/eli/reg_del/2023/2590/oj
4. Regulation (EU) 2024/1689 (AI Act), Art. 5 and Annex III — https://eur-lex.europa.eu/eli/reg/2024/1689/oj
5. Euro NCAP — Assessment protocols and driver monitoring — https://www.euroncap.com/en/for-engineers/protocols/
6. EDPB Guidelines 01/2020 on connected vehicles — https://www.edpb.europa.eu/our-work-tools/our-documents/guidelines/guidelines-012020-processing-personal-data-context_en
7. Smart Eye press release on ADDW becoming mandatory — https://www.inderes.fi/en/releases/advanced-driver-distraction-warning-systems-now-mandatory-across-all-new-eu-vehicles
8. Driver Monitoring Dataset (DMD) — https://dmd.vicomtech.org/
9. MediaPipe Face Landmarker — https://ai.google.dev/edge/mediapipe/solutions/vision/face_landmarker