Компания Figure AI выложила часовое видео, которое демонстрирует как робот-андроид FIGURE 02 работает под управлением модели Helix на сортировке посылок.
Комментарий к видео поясняет, что Helix теперь способна обрабатывать более широкий спектр упаковок, приближаясь по скорости и ловкости к уровню человека. А учитывая быстрый прогресс и возможность масшабирования — позволит создать полностью автономные системы для сортировки посылок.
Звучит здорово и видео впечатляет, но когда понимаешь, что весь час робот только и делает, что переворачивает пакеты — просто его прокручиваешь и создаётся впечатление, что всё хорошо работает. Однако стоит заглянуть в комментарии, то находятся таймкоды с интересными моментами:
- 1:05 переворот коробки (робот успешно справляется и очень лихо её переворачивает)
- 3:03 робот не может дотянуться до пакета
- 3:30 повторная проверка пакета
- 3:55 не слишком удачно толкает коробку на ленту
- 5:19 разглаживание пакета
- 6:10 не удаётся захватить второй угол пакета
- 8:55 не дотягивается до пакета и отвлекается на коробку
- 13:23 опять не дотягивается до пакета, возникают сложности с переворачиванием коробки
- 14:18 пакет падает на пол
- 19:03 сложности при невозможности дотянуться до пакета
- 24:13 на фоне проходит человек
- 26:53 захватывает два пакета
- 28:40 пакет падает на пол №2
- 31:00 сложности с белым пакетом
- 31:34 — 32:18 сложности с пакетом
- 33:35 сложности с коробкой
- 39:00 «подвисает» при виде коробке
- 41:23 проблема с «прилипшим» пакетом (падает на пол)
- 47:52 проблемы с парой пакетов
Что тут можно сказать? В целом — демонстрация впечатляет. Но даже здесь видно, что текущих быстродействия, ловкости и обработки нестандартных ситуаций у модели и робота всё ещё недостаточно: пакеты скапливаются, падают на пол. Видно, что хотя управляющая модель научилась лихо переворачивать коробки, но если такой переворот не получается, то система «сбрасывается».
Разумеется, все эти ситуации, скорее всего, будут учтены и следующая версия модели будет работать лучше, но неужели для решения задачи переворачивания пакетов нужен робот-андроид? Возможно хватило бы классического манипулятора?
По теме
- Helix — универсальная модель от Figure AI
- Figure разрабатывает собственные модели ИИ
- Новая версия робота от Figure AI трудится на заводе BMW
- Figure AI показал работу своего робота на заводе BMW
- Figure.ai показали как их робот-андроид работает под управлением OpenAI
- Видео о разработке робота-андроида Figure
- Jim Fan из NVIDIA о внедрении AI в роботов