Ученые научили роборуку элементам рассудочной деятельности
Ученые научили роборуку элементам рассудочной деятельности
15 февраля 2024, 10:00
Коллектив разработчиков из Московского физико-технического института, Института искусственного интеллекта AIRI и ФИЦ «Информатика и управление» РАН разработали алгоритмы машинного обучения на основе языковых моделей, которые помогут роботам ориентироваться в окружающей обстановке без участия оператора.
Такие модели дают электронно-вычислительным устройствам возможность обучаться на текстовых командах и визуальной информации и на этой основе планировать следующие действия.
«В качестве объекта мы задействовали роборуку — манипулятор с шестью степенями свободы. Нужно было научить систему самостоятельно сортировать объекты (кубики) по цветам, а также собирать их в заданную область. Алгоритмы машинного обучения должны были ускорить этот процесс», — пояснил «Известиям» соавтор научной работы, аспирант Центра когнитивного моделирования МФТИ и научный сотрудник AIRI Алексей Староверов.
Он уточнил, что в ходе эксперимента компьютер роборуки обучался на информации с видеокамер. Для этого применялись языковые модели, как в диалогах с искусственным интеллектом наподобие чата GPT. При этом кроме текстовых данных электронно-вычислительное устройство манипулятора получало картинки из окружающей среды, и в качестве ответа выдавало последовательность действий.
Вместе с тем изначально донастройка языковой модели производилась в виртуальной среде, а затем ее применяли при управлении роборукой в реальном мире.
«Языковая модель выдает гипотезу, что что-то произойдет, а мы превращаем ее в выполнимый на роботе план. В дальнейшем модель его реализует и проверяет, достигнута цель или нет. Например, схватил манипулятор кубик или нужно еще тянуться. Для этого следует учитывать визуальную информацию. Эти данные с камер видеонаблюдения поступают в ЭВМ и переводятся на понятной машине язык», — описал принцип обучения машины еще один участник разработки, ведущий научный сотрудник Института искусственного интеллекта AIRI и ФИЦ «Информатика и управление» Александр Панов.
