Стажировка по проекту
Компания: Научно-технический центр ПАО «КАМАЗ»
система идентификации действий водителя
Суть проекта
Задача
Для чего
Вводные данные
Выходные данные
Разработать систему анализа видеопотока, реализующую следующий функционал:
- идентификация водителя
- распознавание сонливости
- распознавание микросон
- распознавание факта отвлечения взгляда от дороги
- распознавание факта приема пищи во время езды
- распознавание факта использования мобильного устройства
- распознавание непристегнутого ремня безопасности
- распознавание факта курения
- размытое или закрытое изображение не менее 5 сек
Контроль состояние водителя во время управления транспортным средством
- Открытые датасеты с требуемыми категориями нарушений, которые были размечены под решаемую задачу
- Собственные наборы обучающих данных, собранные участниками
- Графическое отображение распознанных нарушений
- Текстовый файл с покадровой разбивкой исходного видео, в котором зафиксированы обнаруженные нарушения
Участники команды проекта с августа
- КУЗИН СЕРГЕЙТимлид проектаСергей - руководитель группы разработчиков, отвечал за полную разработку проекта
- Винокуров БорисМенеджер проекта: проектирование и строительство коммерческой недвижимости. Объекты: Pizza hut, KFC, Salomon, Krispy Kreme
- Подсистема классификации объектов;
- Подсистема распознавания микросна;
- Подсистема распознавания сонливости;
- Подсистема распознавания факта отвлечения от дороги;
- Внедрение библиотеки dlib в решение;
- Блок графического отображения результатов работы системы
- Рэдель-Звонская ЛюцианнаИнженер-конструктор авиационной техники
- Подсистема идентификации водителя;
- Исследование моделей FaceNet, FaceRegognition;
- Подсистема распознавания факта использования мобильного устройства;
- Подсистема распознавания факта курения;
- Комплексное тестирование системы/подсистем
- Колбенев ВасилийКуратор университета искуссвенного интеллекста
- Анализ/сбор датасета;
- Подсистема классификации объектов;
- Подсистема распознавания микросна;
- Подсистема распознавания сонливости;
- Комплексное тестирование системы/подсистем
- Варфоломеева ольгаМенеджер по работе с клиентами
- Сбор/анализ датасета;
- Аугментация данных;
- Разметка исходных данных под модель YOLO;
- Подсистема обнаружения непристегнутого ремня безопасности;
- Комплексное тестирование системы/подсистем
- Хукаленко ДмитрийПрограммист, системный администратор
- Блок обнаружения объектов;
- Отработка гипотезы использования модели YOLO;
- Fine-tuning модели на дополненных данных;
- Подсистема распознавания факта приема пищи;
- Комплексное тестирование системы/подсистем
- Щербинина ОльгаУчитель физики
- Сбор/анализ датасета;
- Аугментация данных;
- Разметка исходных данных под модель YOLO;
- Подсистема обнаружения непристегнутого ремня безопасности;
- Комплексное тестирование системы/подсистем
- Чебыкина ЕлисаветаАгроном-гидропоник
- Анализ/сбор датасета;
- Интеграция подсистем в единое решение;
- Подсистема распознавания факта курения;
- Комплексное тестирование системы/подсистем
- Чижов СергейПрограммист 1С
- Интеграция подсистем в единое решение;
- Создание единого скрипта работы системы;
- Исследование вопроса интеграции решения на Jetson;
- Комплексное тестирование системы/подсистем
- Боева Елена
- Анализ/сбор датасета;
- Подсистема классификации объектов;
- Подсистема распознавания микросна;
- Подсистема распознавания сонливости;
- Комплексное тестирование системы/подсистем
- Решетников Валентин
- Подсистема идентификации водителя;
- Подсистема распознавания факта использования мобильного устройства;
- Комплексное тестирование системы/подсистем
- ВОЛОШЕНКО сергейРуководитель отдела проектирования систем теплогазоснабжения
- Блок обнаружения объектов4
- Отработка гипотезы использования модели YOLO;
- Fine-tuning модели на дополненных данных;
- Подсистема распознавания факта приема пищи;
Участники команды проекта с сентября
- Ярмолик МиланаМировая экономика и международные экономические отношения (экономист)/программист
- Сбор/анализ датасета;
- Подсистема распознавания факта курения;
- Создание модели бинарной классификации для подсистемы распознавания факта курения;
- Комплексное тестирование системы/подсистем
- Модзелевский ВалерийГлавный экономист проектов комплексного обеспечения промышленной химией и логистического обслуживания поставок
- Подсистема классификации объектов;
- Блок распознавания закрытых глаз;
- Подсистема обнаружения непристегнутого ремня безопасности;
- Комплексное тестирование системы/подсистем
- Тонгалюк АлисаГравировщица в немецкой компании «Metzler»
- Сбор/анализ датасета;
- Подсистема классификации объектов;
- Подсистема распознавания факта зевания;
- Комплексное тестирование системы/подсистем
- Юкина НатальяСтарший научный сотрудник в сфере геоэкология
- Сбор/анализ датасета;
- Подсистема распознавания факта использования мобильного устройства;
- Блок распознавания закрытых глаз;
- Комплексное тестирование системы/подсистем
- Томазов Юрий
- Сбор/анализ датасета;
- Подсистема распознавания факта отвлечения от дороги;
- Комплексное тестирование системы/подсистем
- Наумов Егор
- Сбор/анализ датасета;
- Подсистема распознавания факта приема пищи;
- Аугментация датасета;
- Комплексное тестирование системы/подсистем
- КУрятников Илья
- Сбор/анализ датасета;
- Подсистема классификации объектов;
- Комплексное тестирование системы/подсистем
Благодарность университета