Ученые из Университета Карнеги-Меллона (CMU) представили систему для телеуправления гуманоидным роботом в режиме реального времени с помощью обычной RGB-камеры.
Система «Человек-гуманоид» использует алгоритмы обучения с подкреплением и обширные наборы данных о движениях человека для точного распознавания и имитации движений оператора. Это означает, что человек может дистанционно управлять роботом, заставляя его выполнять различные задачи, от простых, таких как перемещение предметов, до сложных, таких как ходьба или бокс.
Система использует процесс «симуляция в данные», который позволяет тренировать робота в виртуальной среде, а затем без дополнительного обучения переносить полученные навыки в реальный мир.
Разработчики считают, что это исследование открывает множество новых возможностей в телеуправлении роботами, делая взаимодействие между людьми и роботами более интуитивным и динамичным. Работу системы продемонстрировали на видео.
Данная технология может найти применение в различных областях.
Над подобными системами работают и другие исследовательские группы, однако система, разработанная CMU, является одной из самых продвинутых на сегодняшний день.
Стоит отметить, что данная технология все еще находится на стадии разработки.
