Apple Siri AI 架构允许第三方大语言模型(如 Claude 和 ChatGPT)
Apple 的 Siri 架构现已支持第三方大语言模型
Apple 在 iOS 27 和 macOS Golden Gate 中构建了一个深度集成点,允许 Siri 将请求委托给外部 LLM(如 Anthropic 的 Claude 或 OpenAI 的 ChatGPT),甚至可以替换其自身的服务器端模型。 这一能力在代码侦探“pdfu”发布的视频中得到了展示,对 Apple 设备上的 AI 生态系统具有重大影响。
模型委托使“Ask Claude”成为 Siri 扩展
Siri 可以调用第三方模型作为插件扩展。 在视频中,macOS 的“搜索或询问”栏显示了一个“Ask…”上下文菜单,用户在其中选择 Claude。启用 Claude 扩展后,用户说“Ask Claude to set a reminder for tomorrow at 9 am.”(让 Claude 设置明天早上 9 点的提醒)。Claude 解析自然语言请求,然后将任务交回给 Siri,Siri 在原生“提醒事项”应用中创建提醒。同样的流程也适用于 Claude 可以处理但 Siri 无法处理的任务,例如生成 CSV 文件并直接在 Siri 对话窗口中返回结果。
模型管理器服务可以替换 Siri 的服务器端模型
Apple 私有的“Model Manager Services”框架可以替换整个 Siri 后端模型。 演示显示,一个基于 ChatGPT 的模型接收了 Apple 内部的“规划器提示”和工具定义,使其能够请求系统操作(例如,读取电子邮件、总结邮件、发送消息)并接收由此产生的个人数据。然后,模型返回一个格式化答案,Siri 用其惯用的语音和界面呈现。视频在 OpenAI 的 Web 控制台上记录了交互,确认请求流经 Apple 的服务器端 Siri 管道。
为何重要:欧盟《数字市场法案》的影响
欧盟的《数字市场法案》(DMA)可能促使 Apple 公开这些权利。 DMA 要求平台所有者让第三方有效访问平台自身服务所使用的硬件和软件功能。欧盟委员会已明确表示,这一原则适用于 Siri。Apple 的代码显示该权利存在但尚未公开,这表明其可能是一种以合规为先的实现,未来可能会更广泛地开放。
当前可用性和限制
- “Ask…”扩展界面目前仅限于 macOS 27 Golden Gate Release Candidate(最终预发布版本)中的内置 ChatGPT 插件。Claude 仅在视频中演示,尚不能在界面中选择。
- 模型委托权利未向开发者或最终用户公开,也没有公开的 API 文档。
- 服务器端 Siri 模型的替换仅在受控演示中展示;Apple 尚未宣布在 iOS 设备上第三方模型替换的路线图。
Hacker News 和 MacRumors 论坛上的社区反应
unobtainium (HN): “理应如此。当我们的日常工作和生活如此多地存在于设备上时,‘围墙花园’的做法已不再适用。人们应该能够选择他们信任且觉得最有用的服务。感谢欧盟!”
QuarterSwede (MacRumors): “这完全不对。Siri AI 是一个巨大的改进。它在对话和上下文方面具有感知能力,这使它更有用……”
klasma (MacRumors): “Siri AI——如果这不是矛盾修辞,那我就不知道什么是了。”
akie (HN): “这是一个非常聪明的平台策略。如果你让 Siri / 你的 Mac 成为所有 AI 相关工作流程的中心访问点,并让模型可互换,那么 Apple 在 AI 竞赛中就拥有了一件强大的武器。”
TheDong (HN): “有用于侧载应用、更改默认导航以及更多 NFC 功能的代码——但仅在欧盟启用。Apple 可能正在利用这些隐藏标志来满足 DMA 要求,同时保持功能受限。”
这些评论突出了三个主题:
- 监管压力被视为开放 Siri 的催化剂。
- 技术热情,认为模块化 AI 堆栈可以将 Siri 转变为通用编排器。
- 怀疑态度,对交换模型的实用性和用户体验表示怀疑,尤其是考虑到 Apple 历来不愿向开发者开放 Siri。
对 AI 格局的潜在影响
- 减少供应商锁定: 第三方 LLM 提供商无需构建单独的语音助手即可触达 iOS/macOS 用户。
- 新的收入来源: Apple 可以对通过 Siri 访问的模型订阅费进行抽成,类似于 App Store 模式。
- 开发者生态系统扩展: 如果 Apple 发布公开 API,开发者可以构建自定义的“Siri 扩展”,集成专有模型、工具或设备端推理引擎。
- 隐私考量: 委托给外部模型会引发数据共享问题;Apple 需要执行严格的权限检查,并可能进行设备端预处理,以遵守其隐私承诺。
接下来关注什么
- Apple 官方公告,关于 Model Delegation 权利是否会在未来的 iOS 更新中公开。
- 开发者文档,关于 Foundations Models Framework 或任何新的 Siri SDK,描述如何注册第三方模型。
- 监管后续行动,欧盟委员会对 Apple 在 AI 服务方面遵守 DMA 的情况进行跟进。
- 第三方回应,来自 OpenAI、Anthropic 和其他 LLM 提供商,关于与 Siri 集成的潜在合作伙伴关系或 SDK。
结论
Apple 的 iOS 27 和 macOS Golden Gate 代码揭示了一条精心设计的路径,使 Siri 能够委托给外部 LLM 或被其替换。虽然该功能尚未面向用户,但其存在标志着向更开放的 AI 堆栈的战略转变——部分由欧盟监管压力驱动——并可能重塑语音助手和 AI 服务在 Apple 平台上的交付方式。
Sources
関連
- Dispatch
- Dispatch
- Dispatch
- Dispatch
- Dispatch