Стартап Figure AI (партнёр OpenAI), показал работу своего робота-андроида FIGURE 01 на автомобильном заводе BMW (Plant Spartanburg).
Чтобы взять 3 детали с одной стойки и уложить их на другую — роботу потребовалось полторы минуты. В комментариях отмечается, что точность манипулирования деталями составляет 1-3 см.
Выглядит неплохо, хотя быстродействие и точность явно требуют улучшения. Но что важно — робот работает под управлением нейронной сети (НС), которая работает в сквозном режиме, когда ей на вход поступают пиксели с картинки камер, а на выходе генерируются действия робота. Первоначальное обучение НС осуществляется в симуляторе, а затем она дообучается уже на выполнение конкретных задач по данным, собираемым на заводе.
Из примечательного можно отметить, что робот способен обнаружить, что деталь не встала на место и способен сам её поправить. Вероятно, НС робота обучилась этому на демонстрационных примерах.
По теме
- Figure.ai показали как их робот-андроид работает под управлением OpenAI
- Видео о разработке робота-андроида Figure
- 1X Technologies показала автономную работу своих роботов
- HumanPlus — имитация действий людей роботом-андроидом
- Dobb·E — открытый проект по обучению робота выполнять домашние дела
- TidyBot — персонализированный робот-помощник на основе больших языковых моделей