Исследователи из Университета Карнеги-Меллона представили первые результаты применения новой системы обучения роботов. Она получила название «H2O», что означает «Human2HumanOid» (От человека к гуманоиду). Система позволяет человеку-оператору обучить полноразмерного робота-гуманоида разным действиям на собственном примере.
Обучение происходит через копирование роботом движений человека, которые он воспринимает через обычную цифровую камеру. Однако есть ряд принципиальных моментов. Во-первых, система имеет специальный ограничитель, который учитывает физические возможности конструкции робота и адаптирует движения под них. Во-вторых, на данный момент о мелкой моторике речи даже не идет, робот может выполнять только базовые движения. Для него просто удерживать равновесие во время работы – уже весьма непростая задача.
Ключевым элементом системы является методика обучения с подкреплением, когда робот получает обратную связь по каждому упражнению с оценкой успешности своих действий. Машина имеет возможность корректировать технику исполнения так, как считает нужным, чтобы это привело к улучшению результата. Робот в прямом смысле учится, подобно человеку, он использует свои индивидуальные особенности для адаптации под условия конкретной работы.
