Роботы научатся понимать причины ошибок через воображаемые сценарии
Исследователи разработали метод, который позволяет роботам анализировать не только то, что произошло, но и то, что могло бы случиться при других условиях. Это поможет машинам быстрее адаптироваться к неожиданностям вроде ветра или износа мотора.
Обучение роботов физическому взаимодействию с миром часто упирается в проблему невидимых факторов. Если модель предсказывает одно, а происходит другое, например, лодку уносит течением сильнее, чем ожидалось, машина не всегда понимает причину.
Команда исследователей под руководством Яна Лекуна (Yann LeCun) предложила использовать разницу между прогнозом и реальностью (откроется в новом окне) для вычисления скрытых факторов. Этот метод позволяет создавать «контрфактические модели мира», которые могут отвечать на вопрос: «Что бы произошло, если бы я поступил иначе?»
В основе метода лежит принцип физики. На коротких отрезках времени эффекты разных сил просто суммируются. Рэнсдалл Балестриеро (Randall Balestriero) из Университета Брауна объяснил, что если модель ошиблась в траектории движения, эта ошибка, «подпись» скрытого фактора, вроде течения.
Чтобы понять альтернативный сценарий, достаточно прибавить эту разницу к прогнозу для другого действия. Это позволяет роботу мгновенно корректировать свои планы, не переобучая всю систему с нуля.
В симуляциях новый подход показал значительный рост эффективности. Если обычный планировщик достигал цели лишь в 14-23% случаев при неожиданных помехах, то использование контрфактических моделей позволило поднять этот показатель до 35-69%. После двух попыток успех возрастал до 51-97%. Такой метод может быть полезен для дронов, беспилотников и роботов, которым нужно мгновенно реагировать на поломки или изменение внешних условий.
Метод позволяет роботам отличать плохие решения от простого невезения. Это значит, что в будущем машины смогут эффективнее исправлять свои ошибки после столкновения с непредвиденными обстоятельствами.
Текст подготовила языковая модель по материалам источников.
