Как нейронная сеть распознает спящего человека за рулем?

Нейронная сеть распознаёт спящего человека за рулём, анализируя состояние его глаз. habr.com Для этого используется формула «соотношение сторон глаз» (EAR), которая возвращает скалярную величину, отражающую уровень открытия глаз. habr.com

Алгоритм системы обнаружения сонливости водителя отслеживает значение EAR в нескольких последовательных кадрах. habr.com Если глаза закрыты дольше заданной продолжительности, включается сигнал тревоги. habr.com

Также для распознавания сонливости водителя можно использовать метод, который анализирует признаки зевоты на основе последовательности изображений, полученных с видеокамеры. ntv.ifmo.ru Длительная открытость рта сигнализирует о возникновении признаков зевоты у человека. ntv.ifmo.ru

Ещё один подход предполагает использование глубокой нейронной сети, построенной на основе архитектуры сети ResNet-50. ntv.ifmo.ru Она определяет класс для каждого кадра видео: «зевающий» или «не зевающий». ntv.ifmo.ru Путем объединения результатов алгоритмов обнаружения зевоты и детектирования закрытости глаз принимается решение о предупреждении водителя. ntv.ifmo.ru