Исследователи из Стэнфорда использовали 40-часовой набор данных о движениях человека чтобы обучить робота повторять движения человека по данным от RGB-камеры.

Научившись повторять движения человека — робот теперь способен научиться новому навыку с успехом 60 — 100% при использовании до 40 демонстраций. То есть, роботу демонстрируется 40 повторений действий и он учится их имитировать.

В качестве робота использовался Unitree H1.

Статьи

1. HumanPlus: Humanoid Shadowing and Imitation from Humans

Ссылки

• https://humanoid-ai.github.io
• код — https://github.com/MarkFzp/humanplus/
• датасет
• список железа

По теме

• Робот-андроид Unitree H1 научился делать сальто назад
• LeRobot — открытые модели и утилиты для робототехники от Hugging Face
• Mobile ALOHA — мобильный робот для сбора данных и обучения манипуляции
• Dobb·E — открытый проект по обучению робота выполнять домашние дела
• Awesome-LLM-Robotics — список статей про использование больших языковых моделей в робототехнике
• TidyBot — персонализированный робот-помощник на основе больших языковых моделей