Ученые Нью-Йоркского университета создали алгоритм BrainBody-LLM, который дает роботам человеческий уровень мышления. Они разбивают задачи на шаги и корректируют свои действия по ходу работы. Система имитирует связь мозга и тела — Brain LLM строит общий план, Body LLM управляет моторами и сенсорами с постоянной проверкой окружающей среды.
В симуляции VirtualHome роботы ускорили бытовые операции — перенос вещей, открытие дверей — на 17% и уменьшили количество промахов.
В ходе реального эксперимента робот ловко брал объекты разного веса, обходил препятствия и адаптировался к изменениям.
Благодаря новой технологии роботы будут точно и безопасно взаимодействовать с людьми, используя камеры, тактильные датчики и звук.
