Claude 5 Fable: 評估 Mythos-class AI 模型

Claude 5 Fable 是 Mythos-class AI 模型的第一個公開版本,代表了從「AI 作為協作工具」到「AI 作為自主代理」的轉變。在早期測試中,Fable 展示了執行複雜、長達數小時工作流的能力,透過協調下屬 AI 代理來進行研究、驗證程式碼,並在極少的人類干預下產出精密的軟體與數據視覺化成果。

自主執行與多代理協調

Claude 5 Fable 與以往模型的不同之處在於其處理需要研究、判斷與迭代開發的長期自主任務的能力。Fable 不僅僅是提供單一回應,而是能夠在數小時內執行長達數頁的規格說明書。

個案研究:等時線地圖 (The Isochronic Map)

為了建立一份研究充分的等時線地圖(顯示隨時間變化的旅行距離地圖),Fable 利用了多代理工作流:

  • 研究委派: Fable 啟動了多個下屬 AI(主要是 Claude Sonnet)從學術論文中檢索超過 2,200 筆特定的航班、鐵路時刻表(包括 TGV 和 Shinkansen)以及道路速度數據。
  • 並行開發: 在研究代理活躍的同時,Fable 開始編寫應用程式的程式碼。
  • 驗證: 模型啟動了額外的代理與測試來驗證程式碼並記錄進度筆記。
  • 對抗性精煉: 當被要求改進偏遠地區的數據時,Fable 部署了對抗性代理群組來研究並交叉測試結果,成功識別了前往 Pitcairn Island 的航運時刻表以及前往 Grise Fjord 的旅行路線。

個案研究:Concord 軟體

Fable 開發了一款名為 "Concord" 的軟體,旨在為複雜的數據分析校準人類與 AI 的回應。此專案涉及:

  • 設計階段: 建立了一份複雜的 19 頁設計文件。
  • 執行階段: 經歷了長達九個半小時的持續工作期以構建功能完備的軟體。

性能能力與限制

Fable 在廣泛的任務中展現了顯著的通用能力提升,從學術社會科學論文到複雜的數學藝術(僅使用數學而非外部資產來創建 3D 物件與遊戲)。

技術與營運限制

儘管功能強大,Fable 仍有幾項顯著的限制:

  • Token 消耗量: Fable 的成本是 Claude Opus 的兩倍,且 Token 消耗率極高,不過其將任務委派給較便宜模型的能力可能會減輕總成本。
  • 安全護欄 (Safety Guardrails): 模型在網路安全與生物學方面設有嚴格的護欄。當這些護欄被觸發時——有時甚至是因「安全、正常的內容」——系統會預設退回到功能較弱的 Claude 4.8 Opus。
  • 「黑箱」效應: 由於 Fable 會自主做出數百個微小的判斷,使用者的角色從「引導」過程轉變為「委託」結果。內部的決策過程往往過於冗長且複雜,以至於人類無法即時監控。

社群觀點與評論

來自使用者與社群成員的反饋,凸顯了輸出結果的「氛圍」與技術嚴謹性之間的落差。

程式碼品質與驗證

批評者認為 Fable 的自主性質可能會掩蓋潛在的技術債。一些審查了 Concord 專案生成的程式碼的使用者將其描述為「無法維護的混亂狀態」,暗示雖然輸出是功能完備的,但可能缺乏以下內容:

  • 適當的文檔與測試。
  • 長期的可擴展性。 。
  • 安全審計。

準確性與「幻覺」

部分使用者指出生成的等時線地圖存在事實錯誤,並提到與歷史或地理現實相比,前往某些地區(例如俄羅斯腹地)的旅行時間似乎不正確。

使用者體驗與實用性

雖然有些使用者認為自主代理方法具有革命性,但其他人則質疑長達數小時工作流的實用性。一位開發者指出,產業對低於 20 秒回應時間的需求,與一個需要數小時才能完成任務的模型之間存在矛盾。

"工作已從過程轉向結果。我不再是引導者;我是委託者。"

這種轉變暗示著人類操作員的角色正趨向於贊助人或客戶,簽署最終成果的確認書,而非管理逐步執行過程的開發者。

Sources