В свoe врeмя мы ужe рaсскaзывaли нaшим читaтeлям o прoeктe пoд нaзвaниeм OpenAI, oдним из глaвныx oргaнизaтoрoв кoтoрoгo является Элон Маск. Целью этого проекта является создание специализированной среды виртуальной реальности, своего рода полигона, предназначенного для обучения, самообучения систем искусственного интеллекта, проведения соревнований и экспериментов в этой области. Не так давно в программное обеспечение данного проекта были добавлены алгоритмы, позволяющие производить в виртуальной реальности обучение роботов выполнению определенных действий. Эти алгоритмы получили название «обучение при помощи имитации (imitation learning)», и их работа уже была успешно продемонстрирована на примере обучения одного робота.
Работа системы обучения роботов основана на использовании двух искусственных нейронных сетей. Первая сеть берет поток видеоизображений с камеры и определяет пространственное положения объектов относительно обучаемого робота. Но для дальнейшего обучения робота используются виртуальные копии реальных объектов, и робот учится манипулировать ими в виртуальном пространстве прежде, чем ему будет дана возможность действовать в реальном мире.
Вторая нейронная сеть распознает и повторяет в виртуальном пространстве все действия, выполняемые человеком, обучающем робота на первом этапе. Действия человека так же распознаются при помощи получаемых с камер данных, а точность распознавания увеличивается за счет использования специальных маркеров и устройства-контроллера.
Созданная исследователями новая модель обучения представляет собой лишь опытный образец. Но дальнейшее развитие данной технологии позволит создать системы, способные обучать роботов в автоматическом режиме выполнению даже самых сложных задач, не нуждаясь при этом в каких-либо физических предметах вообще. Помимо этого, моделируемый процесс обучения позволит учить роботов действовать в самых сложных условиях окружающей среды, к примеру, в зонах стихийных бедствий, техногенных катастроф и даже на поверхности других планет.