TextArena/TextArena

A Collection of Competitive Text-Based Games for Language Model Evaluation and Reinforcement Learning

解决的问题

TextArena 提供了一种标准化的方法,使用文本游戏对大型语言模型(LLMs)进行基准测试和训练。它解决了在无需依赖传统视觉界面的情况下,测试模型推理、策略制定和多玩家互动能力的需求。

工作原理

该框架采用类似 OpenAI Gym 的接口,可与各种强化学习(RL)和语言模型框架集成。它提供了一个包含 100 多个游戏的套件(包括单人、双人和多人游戏),其中代理——仅需一个接收字符串观测并返回字符串动作的 call 函数——可以进行竞争或解决谜题。

适用人群

专为关注 LLM 训练、评估以及模型推理能力的 AI 研究人员和开发者设计,尤其适合对多智能体强化学习和心智理论感兴趣的用户。

主要亮点

  • 超过 100 个用于基准测试和训练的文本游戏。
  • 类似 OpenAI Gym 的接口,便于与 RL 框架集成。
  • 支持单人、双人和多人游戏环境。
  • 通过简单的字符串输入/输出接口,兼容多种 LLM 代理。

相关

  • Dispatch
  • 项目
  • 项目
  • 项目
  • 项目