Робот, який грає в настільний теніс як професіонал

Фахівці підрозділу Sony AI показали робота-маніпулятора Ace. Він на рівних грає у настільний теніс із гравцями високого рівня. Система навчена діяти за офіційними правилами Міжнародної федерації настільного тенісу.

Робот бачить м'яч за допомогою дев'яти камер, зчитує його обертання у реальному часі та адаптується до стилю суперника прямо під час гри.

Що вражає, то це ніяких заздалегідь прописаних сценаріїв. Ace навчається на ходу, аналізуючи траєкторію і підбираючи удар у відповідь. У тестах він виграв три матчі з п'яти проти «елітних гравців» (з більш ніж 10 роками досвіду) та зміг набрати очки навіть проти професіоналів (виступають в офіційно визнаних професійних лігах).

Так Sony відпрацьовує технології для реального світу, де роботам потрібно швидко думати та діяти.

Процес навчання робота принципово відрізнявся від класичного програмування. Воно проходило за допомогою методу штучного інтелекту, відомого як навчання з підкріпленням.

Навчання з підкріпленням - один із способів машинного навчання, в ході якого система навчається методом проб та помилок. Вона взаємодіє із середовищем, паралельно навчаючись, і отримує винагороду за виконання дій. Згодом система вчиться уникати негативних дій і робить лише позитивні.