В рамках ИИ-конкурса Nvidia Jetson Challenge, немецкие робототехники научили робота TIAGo от PAL Robotics очень полезному навыку — приносить пиво из холодильника.
Сервисный робот TIAGo, работает под управлением Операционной система для роботов — ROS, что позволяет использовать его для разных исследований и экспериментов в области робототехники.
Чтобы научить робота распознавать пиво, пришлось подключить к роботу дополнительный модульный компьютер — Jetson TX2 от Nvidia.
Jetson TX2 — это специальный модуль, предназначенный для решения ИИ-задач (например — машинного зрения).
Благодаря маленькому размеру и низкому энергопотреблению (7.5 Вт), модуль отлично подходит для различных роботов, дронов и умных камер.Характеристики
GPU: NVIDIA Pascal, 256 ядер CUDA
CPU: HMP Dual Denver 2/2 MB L2 + Quad ARM A57/2 MB L2
Память: 8 ГБ 128 бит LPDDR4 59.7 GB/s
Интерфейсы: CAN, UART, SPI, I2C, I2S, GPIOs, USB 3.0 + USB 2.0, 1 Gigabit Ethernet, 802.11ac WLAN, Bluetooth
Размеры: 50×87 мм
Цена: $500
На Jetson TX2, запустили программу автономного управления роботом, которая находит путь к холодильнику, открывает дверцу, распознаёт пиво при помощи нейронной сети семантической сегментации HomeNet, захватывает пиво манипулятором и отвозит его своему хозяину.
далее: Робота TIAGo научили убирать туалет
Ссылки
HomeNet
Nvidia Jetson Challenge
По теме
TIAGo — мобильный робот с одним манипулятором
Сегментация изображений при помощи нейронной сети: U-Net
Роботы разносят пиво
Робот PR2 носит пиво из холодильника
Автоматический открыватель пивных бутылок на базе Arduino
Робот разливает пиво
Робо-бариста — робота PR2 научили готовить латте
Drinky — робот-собутыльник