OpenAI Five ベンチマーク

OpenAI Five ベンチマーク概要

OpenAI Fiveは、Dota 2をプレイするように設計された強化学習エージェントです。OpenAIは、エージェントの能力をスキルの99.95パーセンタイルに位置する人間プレイヤーと比較テストするため、2018年8月5日にベンチマークマッチを開催すると発表しました。

OpenAI Fiveは、より複雑なゲームメカニクスと多様なキャラクターを取り入れるように更新されました。これらの改善は、新機能やランダム化の統合を可能にする「Rapid」トレーニングシステムの汎用性によって実現しました。

エージェントのヒーロープールは18体に増加し、以下が含まれます：

Axe, Crystal Maiden, Death Prophet, Earthshaker, Gyrocopter, Lich, Lion, Necrophos, Queen of Pain, Razor, Riki, Shadow Fiend, Slark, Sniper, Sven, Tidehunter, Viper, and Witch Doctor.

さらに、システムは以前は制限されていたワードとロシャンの操作能力を含むように更新されました。

未統合の機能を考慮し、試合は以下の制限の下で行われます：

アイテム: Divine Rapier、Bottle、Quelling Blade、Boots of Travel、Tome of Knowledge、Infused Raindrop は使用不可。
メカニクス: 召喚、幻影、Scan の使用は不可。
配達ユニット: 5体の無敵配達ユニットが使用され、偵察やタンクとしての利用は禁止されています。
透明化: 透明化消費アイテムや関連アイテムは使用不可。

OpenAIはOpenAI Fiveの反応時間を80msから200msに増加させました。この調整はエージェントの反応時間を人間レベルに近づけるために行われました。OpenAIによると、エージェントの強さは生の反射神経ではなく、チームワークと協調性に由来すると報告されています。

ベンチマークマッチは2018年8月5日にサンフランシスコで開催されました。このイベントは、"for fun" の観客ゲームのシリーズに続き、スキルの99.95パーセンタイルに位置するDotaプレイヤーとのベストオブスリーシリーズを特徴としました。