В действительно автоматизированных транспортных средствах все решения будут приниматься транспортным средством, но прежде, чем мы перейдем к этому уровню, в полуавтоматических решениях транспортное средство должно быть интеллектуальным на нескольких уровнях — для интерпретации трафика, чтобы отслеживать происходящее внутри транспортного средства, а также для взаимодействия с водителем в случае, если ему потребуется взять на себя управление. Хотя системы мониторинга водителя уже существуют, до сих пор они почти не используют данные изображения с видеокамер и в основном ограничиваются обнаружением усталости.
Новая система, разработанная Фраунгоферским институтом оптроники, системных технологий и использования изображений IOSB — считается первой в мире, что может использовать данные изображения c камер видеонаблюдения в автомобиле, чтобы делать выводы о действиях водителя и анализировать, насколько быстро они смогут взять под контроль автомобиль.
Исследователи из Fraunhofer IOSB сосредотачиваются на взаимодействии между водителем и транспортным средством и работают над устранением пробелов. «Наша технология позволяет нам не только определять черты лица, но и текущие позы водителя и пассажиров» — рассказал Михаэль Войт, менеджер группы Fraunhofer IOSB. «Затем из этих поз мы можем определить, что в конкретное время делают водитель и пассажиры».
ИИ интерпретирует действия водителя
В основе разработки лежат алгоритмы и процессы машинного обучения, такие как искусственный интеллект (ИИ). Алгоритмы анализируют данные видеокамеры в режиме текущего времени, чтобы узнать, разговаривает ли водитель по телефону, играет с детьми или смотрит в мобильный телефон. Таким образом, технология IOSB выходит за рамки распознавания изображений и интерпретирует действия в контексте. Исследователи сначала обучили систему, вручную аннотируя многочисленные снимки с камеры видеонаблюдения. Затем они оценили алгоритмы с использованием новых изображений и исправили или подтвердили свои результаты.
Поддерживаются инфракрасные и 3D камеры
Технология абстрагирует изображения водителя или пассажиров, чтобы сформировать цифровой скелет — тип фигурки, копирующей позы человека. Следовательно, технология выводит активность, используя движение скелета и дополнительное распознавание объектов. «Таким образом, алгоритмы могут определить, спит ли кто-то или смотрит на дорогу, насколько человек отвлечен и сколько времени потребуется, чтобы снова сосредоточиться на дороге», — объяснил Михаэль Войт. Система поддерживает как традиционные мобильные регистраторы, так и ИК-видеокамеры, которые видят в темноте, а также 3D-камеры, измеряющие расстояние между объектами и устройством.
Инженеры занимались проблемами, связанными с обнаружением активности в салоне автомобилей, в рамках многочисленных исследовательских проектов, сотрудничая с известными производителями автомобилей, такими как Audi и Volkswagen, а также с такими поставщиками систем безопасности, как Bosch. Эти проекты были поддержаны Федеральным министерством образования и исследований Германии (BMBF), Федеральным министерством экономики и энергетики Германии (BMWi) и Федеральным министерством транспорта и цифровой инфраструктуры (BMVI). «Мы можем обнаружить действия не только водителя, но и всех пассажиров — как в передней, так и в задней части автомобиля», — подчеркнул Войт. «Технология готова к производству. Мы уже контактируем с компаниями, которые хотят использовать нашу инновацию». Эти разработки объединяет собственный симулятор вождения института, который также может быть полезен в рамках индивидуальных проектов НИОКР. Моделируя дорожные ситуации, технология формирует основу для сбора соответствующих данных о вождении и поведении. Кроме того, обширная сенсорная технология означает, что можно изучить поведение всех пассажиров.
Защита данных — приоритет
Что касается аспектов защиты данных и безопасности, исследователи с самого начала сделали это приоритетом. «Данные камеры видеонаблюдения анализируются в текущем времени, не сохраняются и не покидают автомобиль в любой момент. Для этого также не нужны персонализированные модели, поэтому никакие личные данные не собираются», — отметил Паскаль Бирнстилл, старший научный сотрудник Fraunhofer IOSB, специализирующийся на безопасности данных, защите данных и прозрачности. Технология с самого начала соблюдает конфиденциальность и, таким образом, соответствует строгим нормам и высокому уровню осведомленности о защите данных в ЕС.
Многочисленные применения
Новое постановление ЕС подчеркивает важность обнаружения активности; мониторинг водителей должен стать обязательным в автоматизированных автомобилях, независимо от уровня их автоматизации. Используя технологию Fraunhofer IOSB, производители автомобилей могут не только удовлетворить это требование, но и воплотить в реальность многочисленные идеи с точки зрения автономного вождения. Например, распознавание голоса для общения между людьми и автомобилями быстро приближается к своим возможностям. Команда «Припаркуйся» сама по себе не имеет смысла — однако при использовании в сочетании с идентификацией позы тела и обнаружением активности система может определить, на какое парковочное место указывает пользователь в данный момент. Система также может помочь с аспектами безопасности беспилотных транспортных средств. Хотя сегодня ответственность за то, чтобы все пассажиры соблюдали правила безопасности и пристегивали ремни безопасности, по-прежнему лежит на водителе, вскоре это будет работой беспилотного транспортного средства — для этого также важен надежный мониторинг салона автомобиля.
Читайте другие интересные новости о системах безопасности:
