Braintrust の OpenAI Codex 統合

Braintrust は AI 製品向けの可観測性と評価プラットフォームで、OpenAI Codex を統合して新機能の開発を加速させました。Codex を使用することで、Braintrust のエンジニアは顧客のリクエストを数分で動作するコードプレビューに変換でき、バックログベースの優先順位付けシステムからユーザーとのリアルタイムイテレーションへとシフトしました。

顧客リクエストに対するリアルタイムイテレーション

Braintrust は従来の機能リクエストバックログをリアルタイムのアイデア創出プロセスに置き換えました。エンジニアは顧客のリクエストを直接 Codex にコピー＆ペーストしてプレビュー用ブランチを作成し、ほぼ即座に動作するアイデアを顧客に示すことができます。

創業者兼 CEO の Ankur Goyal によれば、この機能によりチームは「顧客とリアルタイムで機能リクエストをイテレートし、アイデアを出す」ことが可能になると述べています。

開発速度とワークフローへの影響

導入から1か月以内に、Braintrust のチームの半数が Codex に移行しました。この採用の主な要因はモデルの速度であり、Goyal はこれが他のモデルとの差別化要因として重要だと指摘しています。

"最大の利点は速度です。"

Goyal は、Codex がターミナルにテキストを出力しても速度が低下しないことを強調しています。このパフォーマンス特性は、他の代替手段と比較してチームのツールとのやり取りの方法を変えます。

自律的な問題解決と実験

Codex の高速性により、Braintrust は手動で段階的にプロンプトを行う方法から脱却できました。その代わりに、チームは問題を示すテストを書き、サンドボックス環境を作成し、Codex にその環境内で解決策を見つけさせるワークフローを採用しています。

このシフトにより、実験コストと新しいアイデアを試すためのセットアップ作業が削減されます。制御された環境で問題を定義し、モデルに自律的に作業させることで、Braintrust のエンジニアは初期のアイデアから実働ソリューションへとより迅速に進むことができます。