Робот, который играет в настольный теннис как профессионал

Специалисты подразделения Sony AI показали робота-манипулятора Ace. Он на равных играет в настольный теннис с игроками высокого уровня. Система обучена действовать по официальным правилам Международной федерации настольного тенниса.

Робот видит мяч с помощью девяти камер, считывает его вращение в реальном времени и адаптируется к стилю соперника прямо во время игры.

Что поражает, так это никаких заранее прописанных сценариев. Ace учится на ходу, анализируя траекторию и подбирая ответный удар. В тестах он выиграл три матча из пяти против «элитных игроков» (с более чем 10 годами опыта) и смог набрать очки даже против профессионалов (выступают в официально признанных профессиональных лигах).

Так Sony отрабатывает технологии для реального мира, где роботам нужно быстро думать и действовать.

Процесс обучения робота принципиально отличался от классического программирования. Оно проходило с помощью метода искусственного интеллекта, известного как обучение с подкреплением.

Обучение с подкреплением— один из способов машинного обучения, в ходе которого система обучается методом проб и ошибок. Она взаимодействует со средой, параллельно обучаясь, и получает вознаграждение за выполнение действий. Со временем система учится избегать негативных действий и совершает только позитивные.