ИИ Microsoft ставит рекорд в игре Ms. Pac-Man (+видео)

Искусственный интеллект все активнее используется в играх. В игре Ms. Pac-Man ИИ от Microsoft установил новый рекорд в 999,99 очков – это максимально возможный результат в данной игре. Предыдущий рекорд 933,58 баллов был установлен жителем Нью-Йорка Абнером Эшманом.

Microsoft объясняет, как технология под названием «архитектура с гибридным вознаграждением» (Hybrid Reward Architecture) использует 150 агентов для выполнения определенных задач в игре, чтобы найти пеллеты, избегая призраков.

Это позволило ИИ MIcrosoft использовать совершенную игровую стратегию. Затем исследователи создали руководящего агента с функциями старшего менеджера в компании, он принимает предложения от всех агентов и использует их, чтобы решить, как действовать дальше.

Руководящий агент полагается на количество голосов агентов, выступающих за определенный ход в игре, но он также учитывает интенсивность с которой они предлагают сделать этот ход. Например, если 100 агентов хотят идти направо, потому что это лучший путь к их пеллету, но трое хотят пойти налево, потому что справа смертельно опасный призрак, наибольший вес получит предложение того, кто заметил призрака и предлагает идти налево.

Microsoft также отмечает, что «лучшие результаты были достигнуты, когда каждый агент действовал абсолютно индивидуально, например, ориентируясь только на лучший способ добраться до своего пеллета, пока руководящий агент решал, как использовать информацию от каждого агента, чтобы сделать лучший ход для всех».

ИИ был запущен на игровой версии компьютера Atari 2600. Исследователи отмечают, что они выбрали Ms. Pac-Man, так как она гораздо менее предсказуема, чем оригинальная версия игры.

Они утверждают, что методика ИИ, которая была освоена в Ms. Pac-Man, также может быть использована для достижения результатов в области обработки естественного языка. Другие возможные области применения включают помощь компаниям в организации продаж, чтобы сделать точные прогнозы о потенциальных целевых клиентах в определенный момент времени или определенный день.