Мозочок для гуманоїдів. ШІ від Horizon Robotics забезпечує реакцію до 300 кадрів за секунду

Про це повідомляє видання Interesting Engineering.

Нова розробка з 4 мільярдами параметрів виконує роль «мозочка». Система здатна обробляти дані зі швидкістю 300 кадрів за секунду на периферійних пристроях.

В роботі над HoloMotion-1 розробники поєднали спеціальні записи, внутрішні бази компанії та рухи, відтворені з відео реального світу. Це дозволяє машині адаптуватися до нових ситуацій і продовжувати роботу навіть за умови збоїв у датчиках.

Для управління масивом даних застосовується нейромережа на архітектурі Transformer типу Mixture-of-Experts. На кожному етапі активуються лише окремі частини системи, що економить обчислювальні ресурси.

Ефективність розробки перевірили на людиноподібному роботі Unitree G1. Усі обчислення виконувалися на вбудованому комп’ютері машини без додаткового навчання на реальних даних. Робот приймав рішення з частотою 200−300 циклів за секунду, тоді як сама система руху працювала на 50 циклах для збереження плавності.

За результатами тестування, машина успішно перенесла навички з симуляції у фізичний світ. Робот зміг виконувати рухи, яким його не навчали безпосередньо, включно з танцями, повзанням, сидінням та ударами у стилі бойових мистецтв.

Інженери також випробували керування за допомогою костюмів для захоплення руху та VR-контролерів. Машина точно і без затримок повторювала дії людини.

Розробка стала першим із чотирьох етапів плану компанії. Його мета — навчити роботів імітувати будь-яку позу, виконувати команди, пересуватися різною місцевістю та контролювати різні типи механізмів.