Multimodal utvärdering av förarnedsättning

Syfte och mål

DIME-projektet (Driver Impairment Multimodal Evaluation) tar sig an utmaningen att upptäcka intoxikation, även när förare försöker dölja den, genom att utveckla ett avancerat multimodalt system för kommersiell lansering 2028. Smart Eye kommer att använda deep learning i sitt Driver Monitoring System som kombinerar: i) förarbeteende i kupén, ii) talmönster kopplade till intoxikation och iii) biobeteendemått.

Förväntade effekter och resultat

DIME förväntas resultera i: 1) en avancerad multimodal algoritm (i kupén – kroppshållning/ansikte, röstigenkänning – inkl. språkligt innehåll, biobeteende – inkl. hjärtfrekvens, ögonrörelser, styrning) för att upptäcka kognitiv nedsättning hos förare, särskilt alkoholpåverkan, och 2) integrera algoritmen i ett övervakningssystem demonstrerat i simulerade miljöer. Målet är att inom 6–10 år minska alkoholrelaterade olyckor med 20 %.

Planerat upplägg och genomförande

Projektet omfattar två modelleringssteg: i) modellering av förarbeteende i kupén hos påverkade förare, ii) fusion av a) förarbeteendemodell, b) taligenkänningsmodell för intoxikation, c) biobeteendemodell. Modelleringen möjliggörs genom analys av befintliga och nya data. Nya data samlas in via Smart Eyes körsimulator. Kontrollerade simuleringar testar biobeteende, förarbeteende och språkliga markörer för intoxikation.