Apple Siri AI 架構允許第三方大型語言模型(如 Claude 和 ChatGPT)
Apple 的 Siri 架構現已支援第三方大型語言模型
Apple 在 iOS 27 和 macOS Golden Gate 中建立了一個深度整合點,允許 Siri 將請求委派給外部 LLM(如 Anthropic 的 Claude 或 OpenAI 的 ChatGPT),甚至可以替換其自身的伺服器端模型。 此功能由程式碼偵探「pdfu」發布的影片展示,對 Apple 裝置上的 AI 生態系統具有重大影響。
模型委派實現「Ask Claude」作為 Siri 擴充功能
Siri 可以將第三方模型作為外掛擴充功能呼叫。 在影片中,macOS 的「搜尋或詢問」列顯示一個「Ask…」上下文選單,使用者選擇 Claude。啟用 Claude 擴充功能後,使用者說「Ask Claude to set a reminder for tomorrow at 9 am.」(請 Claude 設定明天早上 9 點的提醒)。Claude 解析自然語言請求,然後將任務交回給 Siri,由 Siri 在原生「提醒事項」App 中建立提醒。同樣的流程也適用於 Claude 能處理但 Siri 無法處理的任務,例如產生 CSV 檔案並直接在 Siri 對話視窗中回傳結果。
模型管理服務可以取代 Siri 的伺服器端模型
Apple 私有的「Model Manager Services」框架可以取代整個 Siri 後端模型。 示範中顯示一個基於 ChatGPT 的模型接收 Apple 內部的「規劃器提示詞」和工具定義,使其能夠請求系統動作(例如讀取電子郵件、總結電子郵件、傳送訊息)並接收產生的個人資料。然後模型回傳格式化答案,Siri 以通常的語音和 UI 呈現。影片在 OpenAI 的網頁控制台上記錄了互動,確認請求流經 Apple 的伺服器端 Siri 管道。
為何重要:歐盟《數位市場法》的影響
歐盟的《數位市場法》(DMA)可能促使 Apple 公開這些權限。 DMA 要求平台擁有者讓第三方有效存取平台自身服務所使用的硬體和軟體功能。歐盟執委會已明確表示此原則適用於 Siri。Apple 的程式碼顯示該權限存在但尚未公開,表明這是一個以合規為先的實作,未來可能更廣泛開放。
目前可用性與限制
- 「Ask…」擴充功能 UI 目前僅限於 macOS 27 Golden Gate Release Candidate(最終預發布版本)中的內建 ChatGPT 外掛。Claude 僅在影片中示範,尚無法在 UI 中選取。
- 模型委派權限未向開發者或終端使用者公開,也沒有公開的 API 文件。
- 伺服器端 Siri 模型的替換僅在受控示範中展示;Apple 尚未宣布在 iOS 裝置上進行第三方模型替換的路線圖。
Hacker News 和 MacRumors 論壇上的社群反應
unobtainium (HN): 「本就該如此。當我們日常工作和生活如此依賴裝置時,『圍牆花園』的做法已不再適用。人們應該能選擇他們信任且覺得最有用的服務。感謝歐盟!」
QuarterSwede (MacRumors): 「這完全不正確。Siri AI 是一大改進。它在對話和情境上更有感知力,使其更有用…」
klasma (MacRumors): 「Siri AI——這是我聽過最矛盾的詞。」
akie (HN): 「這是非常聰明的平台策略。如果你讓 Siri / 你的 Mac 成為所有 AI 相關工作流程的中心存取點,並讓模型可互換,那麼 Apple 在 AI 競賽中就擁有了巨大武器。」
TheDong (HN): 「有程式碼用於側載 App、更改預設導航、以及更多 NFC 功能——但僅在歐盟啟用。Apple 可能利用這些隱藏旗標來滿足 DMA 要求,同時保持功能受限。」
這些評論凸顯了三個主題:
- 監管壓力被視為開放 Siri 的催化劑。
- 技術熱情來自於模組化 AI 堆疊,可能將 Siri 轉變為通用編排器。
- 懷疑態度關於更換模型的實用性和使用者體驗,尤其是考慮到 Apple 歷來不願向開發者開放 Siri。
對 AI 領域的潛在影響
- 減少供應商鎖定: 第三方 LLM 提供者無需建立獨立的語音助理即可觸及 iOS/macOS 使用者。
- 新的收入來源: Apple 可以從透過 Siri 存取的模型訂閱費中抽成,類似 App Store 模式。
- 開發者生態系統擴展: 如果 Apple 發布公開 API,開發者可以建立整合專有模型、工具或裝置端推論引擎的自訂「Siri 擴充功能」。
- 隱私考量: 委派給外部模型會引發資料共享問題;Apple 需要實施嚴格的權限檢查,並可能進行裝置端預處理,以符合其隱私承諾。
接下來觀察重點
- Apple 官方公告關於 Model Delegation 權限是否會在未來的 iOS 更新中公開。
- 開發者文件關於 Foundations Models Framework 或任何新的 Siri SDK,說明如何註冊第三方模型。
- 監管後續來自歐盟執委會關於 Apple 在 AI 服務方面對 DMA 的合規情況。
- 第三方回應來自 OpenAI、Anthropic 和其他 LLM 提供者關於與 Siri 整合的潛在合作夥伴關係或 SDK。
結論
Apple 的 iOS 27 和 macOS Golden Gate 程式碼揭示了一條精心設計的途徑,讓 Siri 可以委派給外部 LLM 或被其取代。雖然該功能尚未對使用者開放,但其存在標誌著向更開放 AI 堆疊的戰略轉變——部分由歐盟監管壓力驅動——並可能重塑 Apple 平台上語音助理和 AI 服務的提供方式。
Sources
相關
- Dispatch
- Dispatch
- Dispatch
- Dispatch
- Dispatch