Роботизированная рука, обученная OpenAI

Компания OpenAI, занимающаяся исследованиями в области искусственного интеллекта, представила ИИ-систему Dactyl, обученную управлению роботизированной рукой. Результаты действительно впечатляют.

Задачей было научить робота поворачивать кубик в нужную сторону. Для этого было создано несколько цифровых копий руки, которые поместили в симуляционную среду. Инженеры задали набор параметров (размер кубика, гравитация) и стали менять их случайным образом. После адаптации системы к большому разнообразию возможных сценариев внутри виртуальной среды, ученые наделили Dactyl опытом, необходимым для адаптации к тем или иным сценариям уже в реальном мире.

Потребовалось 50 часов тренировок внутри виртуальной среды, чтобы ИИ-система научилась управлять реальной роботизированной рукой и выполнила 50 поставленных перед ней задач: провернуть кубик в ту или иную сторону, не уронив его и уложившись в отведённое время. Для того чтобы система могла определить в какую сторону поворачивать кубик, использовался набор камер. При этом, в качестве основы для новой системы применялся алгоритм OpenAI Five, ранее разработанный для создания команды из 5-ти нейронных сетей, способных командно играть в DOTA 2.

Интересно, что порой кажущиеся нам простые вещи, такие как, например, ходьба или игра с кубиком, требуют действительно большого количества маленький операций, которые мы не замечаем. А новая разработка - это ещё один шаг к тому, что среди нас будут существовать настоящие человекоподобные роботы. Страшновато конечно, но при этом очень интересно :)

А Вы хотели бы себе в помощники личного робота?