OpenAI Five 基准测试

OpenAI Five 基准测试概述

OpenAI Five 是一个用于玩《Dota 2》的强化学习代理。OpenAI 宣布将在 2018 年 8 月 5 日进行一场基准赛,以测试该代理在技能上位于 99.95 百分位的人类玩家的能力。

技术更新与游戏机制

OpenAI Five 已更新,以加入更复杂的游戏机制和更多样的角色。这些改进得益于 “Rapid” 训练系统的通用性,该系统允许集成新特性和随机化。

扩展的英雄池与能力

该代理的英雄池已增加至 18 位英雄,包括:

  • Axe
  • Crystal Maiden
  • Death Prophet
  • Earthshaker
  • Gyrocopter
  • Lich
  • Lion
  • Necrophos
  • Queen of Pain
  • Razor
  • Riki
  • Shadow Fiend
  • Slark
  • Sniper
  • Sven
  • Tidehunter
  • Viper
  • Witch Doctor

此外,系统已更新,能够处理 ward 和 Roshan,这些机制此前受到限制。

游戏限制

为容纳剩余未集成的特性,比赛将遵循以下限制:

  • Items: 不使用 Divine Rapier、Bottle、Quelling Blade、Boots of Travel、Tome of Knowledge 或 Infused Raindrop。
  • Mechanics: 不使用召唤物、幻象或 Scan。
  • Couriers: 使用五个无敌信使,禁止利用它们进行侦查或担任坦克。
  • Invisibility: 不使用隐身消耗品或相关物品。

人类水平的反应时间

OpenAI 将 OpenAI Five 的反应时间从 80 ms 提高到 200 ms。此调整旨在使代理的反应时间更接近人类水平。OpenAI 报告称,代理的强大来源于团队合作与协同,而非单纯的反射速度。

比赛事件详情

基准赛于 2018 年 8 月 5 日在 San Francisco 举行。赛事包括对阵 99.95 百分位 Dota 玩家的一场三局两胜系列赛,之前还有一系列 “for fun” 观众游戏。

Sources