Создатели PUBG учат роботов понимать людей: Ludo Robotics показала Ludi 0.2

Обычно от игровых компаний ждут новых игр, а Krafton, издатель PUBG: Battlegrounds, решила заняться роботами. Её дочерняя компания Ludo Robotics 30 октября выпустила Ludi 0.2 — вторую версию ИИ-системы, с помощью которой роботы должны лучше понимать людей.

Что умеет Ludi 0.2

Первую версию показали в августе. Тогда это была связка из визуально-языковой модели, которая отвечает за диалог и рассуждения, и отдельных модулей для передвижения и работы с предметами. В Ludi 0.2 разработчики добавили «социальный интеллект»: система помнит контекст, распознаёт жесты, следит за движениями человека и решает, какой инструмент взять в нужный момент. Цель — собрать восприятие, речь и действия в один «мозг». Тогда робот сможет одновременно слушать просьбу, смотреть, куда вы показываете, и сразу подстраиваться под происходящее.

Технический директор Ludo Канук Ли (он же директор Krafton по ИИ) объясняет так: с физическими задачами роботы уже справляются всё лучше, а вот понимать людей им пока трудно. По его словам, Ludi 0.2 — ещё один шаг к тому, чтобы робот улавливал, чего от него хотят, и реагировал на подсказки.

При чём тут игры

Связь тут вполне прямая. Компания уже работает над ИИ-напарниками для игр вместе с Nvidia: это персонажи, которые в реальном времени понимают, что делает игрок. По сути, Ludo переносит тот же навык из игры в реальный мир. Штаб компании находится в Пало-Альто, а исследовательская лаборатория — в Сеуле. Обеими структурами руководит один человек — CEO Krafton Чханхан Ким.

Мне это направление кажется любопытным. Игровые студии годами учились делать NPC, которые хоть как-то понимают игрока, и теперь этот опыт пригодится не только в играх. Правда, есть оговорка: пока что известно только то, что рассказала сама компания. Независимых тестов Ludi 0.2 ещё не было.