Две недели назад был выпущен Open Deep Learning Toolkit for Robotics (OpenDR Project) v.2.0.0.
Новая версия содержит как различные улучшения, так и новые инструменты для решения задач обнаружения объектов, отслеживания, оценки позы и эмоций. Так же новая версия имеет улучшенный интерфейс ROS ( с поддержкой ROS2).
Целью проекта OpenDR является разработка модульного, открытого и свободного набора инструментов, использующего технологию глубокого обучения для обеспечения расширенных возможностей основных функций роботов в области восприятия и познания.
В основе OpenDR лежит привязка робототехнических приложений к программным библиотекам глубокого обучения (PyTorch и Tensorflow) и операционной среде (ROS).
OpenDR фокусируется на базовой технологии ИИ и предоставляет инструменты, позволяющие увеличить когнитивные способности роботизированных систем: взаимодействие с людьми и окружающей средой, классификация, принятие решений и т.п.
Исходя из OpenDR Toolkit Reference Manual можно отметить, что поддерживается следующий функционал:
- распознавание лиц,
- распознавание эмоций (по выражению лица).
- распознавание позы человека,
- распознавание активности,
- распознавание голоса,
- детектирование объектов (модели: SSD, YOLOv3, YOLOv5 и т.п.),
- отслеживание объектов,
- семантическая сегментация,
- детекция падений.
Судя по инструкции по установке — Installing OpenDR toolkit в основе инструментария используется pytorch, mxnet и detectron2 (платформа для обнаружения объектов, сегментации и других задач визуального распознавания от facebookresearch).
Ссылки
По теме