Робот танцует K-pop. Корейский разработчик научил гуманоида движениям с помощью видео со смартфона
Компания ROBOTIS продемонстрировала робота AI Sapiens, который самостоятельно освоил танец из вирусного челленджа. Для этого ему понадобилась лишь запись движений человека на телефон.
Об этом сообщает Interesting Engineering.
Во время презентации гуманоид AI Sapiens выполнил сложный комплекс движений всем телом, известный как CORTIS REDRED Challenge.
Вместо использования профессиональных и дорогих систем захвата движения разработчики применили видео с камеры смартфона. Такой подход значительно удешевляет и упрощает сбор данных для обучения подобных машин.
Обучение начинается с видеофиксации человеческих движений. Затем происходит перенастройка, во время которой эти движения адаптируются к физическому строению и ограничениям суставов гуманоида.
После адаптации модель тренируют в симуляционной среде. Искусственный интеллект многократно отрабатывает движения в виртуальном мире, улучшая баланс и координацию робота. А впоследствии навык переносят на физический AI Sapiens через конвейер Sim2Real.
Сам AI Sapiens является полностью открытой платформой для исследований. Гуманоид высотой 1,3 метра и весом 34 килограмма имеет 23 степени свободы. Его работу обеспечивают 23 актуатора DYNAMIXEL-Q, которые сочетают в себе двигатели с высоким крутящим моментом и интегрированную электронику для точного контроля движений. Вычислительную мощность обеспечивает компьютер NVIDIA Jetson Orin NX с памятью 16 гигабайт. Автономную работу поддерживает аккумулятор на 46,8 В емкостью 9000 мАч.
В ROBOTIS планируют сделать систему генерации и изучения движений открытым программным обеспечением, чтобы снизить барьеры для развития этой отрасли.