-
ROSGPT — демонстрация использования ChatGPT для управления роботом через ROS
Исследование демонстрирует концепцию использования возможностей больших языковых моделей (БЯМ, (large language model (LLM)) для взаимодействия человека и робота под управлением ROS.
-
Deep RL at Scale — cортировка мусора при помощи мобильных манипуляторов
Исследователи из Google Robotics продемонстрировали систему глубокого обучения роботов навыкам манипулирования в задаче сортировки мусора в офисе.
-
Как изготовить робота-оператора камеры при помощи Arduino
Giovanni Aggiustatutto изготовил робота-оператора камеры.
-
DribbleBot — проект по обучению четвероногого робота-собаки вести футбольный мяч
Исследовали из Лаборатории невероятного искусственного интеллекта (Improbable Artificial Intelligence Lab) Массачусетского технологического института научили четвероногого робота-собаку Unitree Go1 вести футбольный мяч.
-
ALOHA — система для обучения тонкой бимануальной манипуляции
Исследователи из Стэнфордского университета и Калифорнийского университета в Беркли представили свою разработку, которую назвали ALOHA (A Low-cost Open-source Hardware System for Bimanual Teleoperation) — недорогую аппаратную систему с открытым исходным кодом для бимануального телеуправления.
-
Agility Robotics представила следующее поколение робота Digit
Компания Agility Robotics представила следующее поколение робота Digit.
-
Эксперимент по взаимодействию роботов-мусорщиков и людей
Интересный эксперимент по взаимодействию роботов и людей провели исследователи из Корнеллского университета в Нью-Йорке. Они посмотрели — как случайные люди будут взаимодействовать с парой «автономных» мусорных баков.
-
Как выполнить обратную операцию к torchvision.transforms.Normalize?
Если используется какая-либо PyTorch-модель, предварительно обученная на датасете ImageNet (например, модель ResNet50), то чтобы подать на данную модель изображение — требуется его предварительно подготовить с помощью операций трансформации, которые указываются в Weights.transforms (см. Models and pre-trained weights).
-
PaLM-E — мультимодальная языковая модель для управления роботами
Сила больших языковых моделей (large language model (LLM)) уже очевидна. Исследовали из Google показали как можно применять LLM в робототехнике: они включили сенсорные данные в запрос для языковой модели, что позволило модели устанавливать связь между словами и сенсорной информацией.
Преимуществ нет, за исключением читабельности: тип bool обычно имеет размер 1 байт, как и uint8_t. Думаю, компилятор в обоих случаях…