aavetis/PRarena

This repo tracks the opened and merged PRs by the top SWE coding agents by OpenAI, GitHub, and others. Updates regularly.

What it solves

PRarena 提供了一種比較不同 AI 程式編寫代理人（例如 Copilot、Codex、Cursor、Devin 與 Jules）效能的方法，透過分析它們在 GitHub 上的 Pull Request（PR）統計資料。它解決了在各種開發者工作流程中，了解哪些 AI 代理人能更有效產出可合併程式碼的問題。

How it works

此專案使用 GitHub 搜尋查詢，追蹤特定 AI 代理人所建立的「全部 PR」(All PRs)、「可合併 PR」(Ready PRs) 與「已合併 PR」(Merged PRs) 數量。透過聚焦於「可合併 PR」(非草稿) 以確保公平比較，計算合併 PR 與可合併 PR 的比例作為成功率。

Who it’s for

開發者與研究人員，對於基準測試 AI 程式編寫助理、比較其實際合併率與貢獻量感興趣的人士。

Highlights

  • own interactive dashboard at prarena.ai
  • Tracks multiple AI agents including Copilot, Codex, Cursor, Devin, Codegen, and Jules.
  • Distinguishes between draft and ready PRs to account for different agent workflows.
  • Uses real‑world GitHub data to measure success rates.