Специалисты из Санкт-Петербургского Федерального исследовательского центра РАН и СПбГУ разработали инновационную нейросеть, способную выявлять признаки усталости человека на основе анализа движений его глаз. Эта технология предназначена для использования в системах мониторинга состояния операторов транспорта, промышленного оборудования и объектов критической инфраструктуры.
«Мы научили нейросеть по движениям глаз определять, находится ли оператор в бодрствующем состоянии или утомлён», — рассказал старший научный сотрудник лаборатории автоматизированных систем СПб ФИЦ РАН Алексей Кашевник.
Для обучения системы учёные использовали данные, полученные с помощью айтрекера — устройства, фиксирующего направление взгляда. В ходе экспериментов собрана обширная база данных о паттернах движения глаз у операторов за разными задачами: чтением, письмом и работой в течение дня. Все данные собирались с помощью закреплённого на голове айтрекера.
Нейросеть обучалась распознавать характерные для усталости и бодрствования модели движений глаз.
«В будущем наше решение может быть интегрировано в системы контроля за действиями операторов различной техники и объектов инфраструктуры», — отметил Кашевник.
Исследование поддержано грантом Фонда содействия инновациям, а исходный код библиотеки открыт для всех желающих разработчиков программного обеспечения.