Siri AI 一周体验封面,展示 Siri 设置、聚焦搜索和对话界面

上周我将我的 iPhone 17 更新到了 iOS 27 Developer Beta 4。好巧不巧,从那时起之前的 Siri AI“电子围栏”似乎放宽了,我也很幸运地没有通过修改定位等复杂的方式就顺利用上了 Siri AI。头两天我的部分联网任务无法运行,不知道是不是因为我修改了分流,从周四开始整个 Siri AI 就完全正常了。

使用了一个多星期的 Siri AI,这款迟到的“苹果 AI”体验到底怎么样?我的评价是,这是一款基本符合预期的产品,但离真正能派上用场还有很长的一段距离。

初觅 Siri AI

Siri AI 目前只推出了英文版,只有将手机语言和 Siri 语言都设为美国英语方可使用。在实际使用中 Siri AI 的大模型是能够完美用中文等各种语言执行操作并应答的,但由于“嘿 Siri”会使用英文,输入法的“听写”功能由于不明原因有时也会只识别英文,所以要使用 Siri AI,你最好还是希望自己有一定英语能力的。

设置语言为英语后,你将可以看到“Try Siri AI (Beta)”的选项。点按之后会加入等候名单并下载所需资源。我点按之后没过多久就收到了 Siri AI 可用的提示。

iPhone 设置中启用 Siri AI Beta 的过程

调用 Siri AI 最新的方式是从屏幕中部的顶部下滑打开基于灵动岛的新版聚焦搜索界面。我最开始以为是按住灵动岛下滑,但尝试后发现,就和原来在这个位置打开通知中心的手势一样,你还是必须从灵动岛到屏幕顶部的那条缝开始滑动,而按住灵动岛的逻辑和原先是一样的,仍然是触发一个小的振动反馈。而通知中心下滑、主屏幕下滑和主屏幕上的搜索按钮等等,原先打开聚焦搜索的地方也都会打开这个新界面。

顺带一提主屏幕底部的搜索按钮,这个 iOS 16 加入的按钮我从一开始就非常讨厌,虽然可以在设置中关闭,但是现在也没有原先胶囊变输入框的过渡动画了,我实在不理解这个按钮仍然保留还有什么意义。

在实机上看,Siri AI 的这个渐变玻璃效果倒是没有那么丑;但是这个过渡显然没有做好,从我的截图中也能隐约看出灵动岛的痕迹,在拉动的过程中则是更明显,灵动岛会“吃掉”模糊的搜索占位符。输入文本时,光标和光标周围的彩色光晕效果也都会被摄像头模组“挡住”,让人很难忽视灵动岛模组的存在。当然,iOS 系统对灵动岛摄像头模组的适配一直都是差强人意,除了 Siri AI 入口外,其他位置的穿帮也是时有发生的。

灵动岛下方的 Siri AI 聚焦搜索界面

和以前一样,你可以在这里输入关键词搜索内容,输入货币换算或者做数学计算,这都是可以的,但是大家不是来看这个的。当你在这里输入自然语言后,“— Ask Siri”就会出现在最后,提示你按下键盘上的回车键就可以开始和 Siri AI 对话。不过在输入比较少的文字时,聚焦搜索的结果会出现在最前面,你需要一路滚动到最下方才能看到“Ask Siri”的选项。由于 iOS 上聚焦搜索结果的排序功能不知道哪个版本起就没有了,你也无法隐藏部分搜索结果或者让“Ask Siri”选项显示在更前面。

聚焦搜索中的 Ask Siri 入口与普通搜索结果

点击一下输入框,在出现的菜单中还有一个“Ask…”选项,点击之后你可以选择要询问 Siri 还是 ChatGPT。

一个很有意思的细节是,当你在其中输入内容时,输入框的玻璃背景会变得模糊;如果没有输入文本,背景则是完全透明的。不过考虑到输入框的透明度,我并不认为这样的设计有太大的意义。

还有一个召唤 Siri 的新办法,就是上下文菜单。“Ask Siri”选项大量渗透到了系统和第三方 App 的上下文菜单,而且还是始终在菜单中固定显示的,通过这些选项可以就选中的内容提问。

照片 App 上下文菜单中的 Ask Siri 选项

除了选中文本时显示在输入法的“校对”和“重写”之外,写作工具也被“Write with Siri”取代。

备忘录中的 Write with Siri 写作工具

当然,“嘿 Siri”和按住电源键这些国行用户熟悉的方法也仍然可以调出 Siri,但是目前这个阶段你就必须说英文了。值得注意的是,跑马灯时代双击底部“小白条”打开 Siri 的方式不再可用,小白条上炫酷的彩色动画效果也不再能见到。不过考虑到跑马灯时代通过打字使用 Siri 的体验很糟糕,加上小白条从 iOS 26 开始已经不再始终显示了,砍掉了倒也并不可惜。

另外,如果你将支持 Apple 智能的外版 iPhone 和国行 Apple Watch 搭配使用,那么目前为止,watchOS 27 新增的 Siri App 能够在 App 列表显示和打开,但无法正常发起对话。

国行 Apple Watch 上 Siri App 无法使用的提示

索引

得益于优化的索引,Siri 可以从本地索引设备上的数据。让 Siri 查看你的信用卡账单、找出上次看的短信、询问你妈妈的飞机几点降落,这都是可以的。

不过实测下来,新的索引并没有那么理想,在需要查找时,你还是希望自己能够回忆起准确的关键词。例如我让 Siri 查找我在“Apple 武汉”或西湖的照片,Siri 没有一次能返回准确的结果;在一个文档中要求 Siri 查找“CCTV1”,Siri 也未能找到就在开头几行的 IPTV 直播源。

Siri 未能在文档中找到 CCTV1 直播源

另外,由于 Siri 在运行任务时在设备端搜索数据需要消耗一定的算力资源,运行需要搜索本地数据的任务时,设备发热和电量消耗还是非常明显的,至少在我的 iPhone 17 上基本上连续运行几轮之后就会出现掉电和轻微发热的情况,而且整个 Siri AI 的界面帧率也会降低。

好消息是,大多数情况下 Siri 生成回复的速度是相当快的,你不会花太多时间在等待回复上;我确实不能理解影视飓风的 Tim 在 WWDC26 的视频中为什么会认为 Siri 回复的速度慢。

同样的,你也可以把 Siri 当作一个正常的大模型来用:询问它各种问题,访问网页内容等都是可以做到的。有意思的是,Siri 有时会在回答的中间或末尾加上“顺便提醒一句,AI 可能犯错误,所以请注意核查事实”之类的声明。这些声明的显示级别和消息正文一样,但即使我用中文对话,声明也是英文的,我怀疑这是提示词里的强制要求,或者是插入到回复中的特殊短语。

除了显示在灵动岛上的摘要内容,Siri 还会附加上更多在下拉时才会显示的详细内容。如果你想了解详情,就把灵动岛拉下来查看更多内容,这个体验相当自然。

执行任务

通过 Siri AI 查询本地内容和联网搜索的体验总体来说是差强人意的;然而如果你要完成任务,Siri AI 的表现就有些一言难尽了。

理论上,发微信这种旧版 Siri 的操作应该都可以通过 Siri AI 完成吧;但事实并非如此。在我的测试过程中,我几乎没有一次成功发送微信、Telegram 消息,甚至短信都不能 100% 成功发送:Siri 总是会返回各种各样的奇葩错误。我也尝试了让 Siri 选取照片发给朋友的场景,但不知道为什么,每次 Siri 的筛选条件都不能正常应用,我仍然需要从所有照片中进行选择。

Siri 尝试发送消息时出现错误和确认界面

设置闹钟和计时器、添加备忘录等等基础操作倒是不会受到影响,在速度方面和原来相比不会有太大变化;如果你的要求复杂到 Siri 必须先额外确认信息再添加,速度上当然会稍微更慢,不过仍然在可接受的范围。

视觉智能

在 iOS 27 中,视觉智能整合到了相机的“Siri 模式”中,同时也不再依赖 ChatGPT 的视觉能力介入,由 Siri AI 直接完成。

iOS 26 视觉智能与 iOS 27 相机 Siri 模式对比

显然,我认为这是比原先视觉智能和相机独立入口更好的做法,让你不用那么纠结自己究竟是要短按相机控制按钮还是长按。不过虽然有 Siri App 保存聊天记录,如果在使用视觉智能的同时还能选择拍张照片就更好了。

Siri App

于是我们就来说说 Siri App。不同于灵动岛上的全黑界面,Siri App 有着 iOS 第一方 App 少见的纯白色背景,聊天历史以列表形式呈现时也没有额外的卡片布局,看起来简洁得滞,甚至有些简陋。而功能性上也的确如此,你甚至没有办法编辑自己的消息或重新生成回复,这为操作手感带来了一丝尴尬。

Siri App 的对话历史列表和聊天界面

理论上,从灵动岛发起的对话、视觉智能对话等所有的记录都应该出现在 Siri App 里。然而在我使用的这一周里,我注意到并不是所有对话都会在 Siri App 里出现,我也暂时没有摸清它在什么情况下会将聊天保存到记录中。

屏幕感知能力

在跑马灯时代,Siri 的所谓“屏幕感知能力”其实就是你可以说“让 ChatGPT 翻译屏幕上的内容”,Siri 会在要求你确认后,将截图发送给 ChatGPT。不过在最近几个月,我就没有见过这项功能顺利生效过。

如今,真正的满血版 Siri AI 终于可以直接感知屏幕上的内容了。使用时,我们完全不需要附加任何提示,直接问“他讲了什么”,Siri AI 就非常聪明地意识到你问的是屏幕上的内容。

Siri 根据当前屏幕内容回答问题

然而,这个所谓的“屏幕感知能力”真的只是屏幕感知能力,换句话说,当前没有在屏幕上显示的内容它完全看不到。举个例子,如果你的朋友向你发送了好几屏的消息,除非你复制或者截屏,否则 Siri AI 将始终只能看到当前屏幕上的消息。

更糟糕的是,当你打字使用的时候,Siri AI 的输入法还会触发 App 的键盘事件,在微信和 Telegram 等应用中这会给下方的元素带来布局偏移,不仅屏幕内容范围进一步受限,而且你还必须和何晨光一样打好提前量,这样你想问的内容才能正常出现在 Siri AI 能看到的范围内。我不确定这是 bug 还是设计如此,但我可以确定这个问题非常影响体验。

当我询问 Siri AI 它的屏幕感知能力是如何实现时,它的回答是它会使用计算机视觉和多模态大语言模型实现;但当我询问它是不是截屏时,它又嘴硬地说不只是截屏;经过我的诱导,它最后又说还使用了无障碍 API 和布局 API 实现。

事实果真如此吗?为了测试,我让 AI 写了一个非常简单的网页:除了标题,正文全部使用和背景完全一样的纯白色。如果 Siri AI 使用了无障碍技术,它理应能获取正文内容。但测试的结果是,Siri AI 说它只看到了标题,它并不知道有正文内容。

使用白色文字网页测试 Siri 屏幕感知能力

所以我们可以基本确认,Siri AI 的所谓“屏幕感知能力”这项重要的能力,现阶段只是截了一张图放进上下文。我本来以为 Apple 有更好的办法处理这项能力,但就目前的情况看,Siri 的屏幕感知能力甚至还不如国产手机,毕竟豆包手机发现内容空白时还知道尝试访问原始页面呢。

优雅永不过时

虽然 Siri AI 的屏幕感知能力和“豆包手机”坐一桌了,但在执行任务方面,Siri AI 却远远不如这些国产对手。

究其原因,Siri AI 所谓的跨应用操作,无非是整合了原先 Siri 建议、快捷指令这些框架所使用的 App Intents 接口和类似的技术,这是需要开发者适配的。然而,还不用说前智能体时代的 App、小型 App、不愿意暴露这些数据的国产 App,实际上绝大多数的 App 都并不是所有的操作和数据都可以通过 App Intents 接口完成和获得的;在下面这个任务中,Siri 获取 App Store 热榜也没有通过自己的接口,而是依赖第三方服务来完成。

Siri 借助第三方服务查询 App Store 应用榜单

而安卓厂商的智能助手在执行任务时,往往采用另一种方式,就是直接让 AI 接管用户屏幕来操作。这种做法相对要求 App 支持来的更直接,考虑到安卓生态对开发者的约束力更低,也是合乎情理的。

先说说我的看法,这是一种很现实的过渡性做法。优点在于所见即所得,用户能操作的内容,AI 几乎也全部能操作,基本赋予了 AI 替用户执行绝大多数操作的能力;但缺点也很明显,速度和精度都偏低,目前为止看到的实现也基本上都会在执行时夺取用户对设备的使用权(除了 macOS 上 Codex 的 Computer Use)。

Apple 肯定是不会采取在前台帮助用户点击这种极不优雅的做法的,不过我认为他们可能会让这个步骤在后台完成,来避免对用户造成影响。但终究这都是一个难度高又耗时间的操作方式,我认为 Apple 仍然会选择更好的方式,即鼓励 App 开发者尽可能多的使用 App Intents,并且提供一些能快速从现有 App 中提取 App Intents 的方式,尽可能简化这个为智能体“扫盲”的过程。但这也同样预示着,除非 Apple 提出一种创造性的新 App 框架,Siri AI 在接下来的几年内仍然更像是一个“玩具”性质,它能做什么全靠 App 开发者暴露了多少方法,而 App Intents 显然不使用于复杂操作,它的能力顶破天也就是发送消息和发送朋友圈了。

Siri AI 也不支持 MCP、技能、自定义提示、记忆等已经被各类 AI 工具玩烂了的功能,因此你想自定义 Siri AI 的体验,或者给他添加上自己的功能,难度是相当大的。甚至于我在测试的时候,Siri AI 似乎都无法正常运行我的快捷指令。这种能做什么全仰仗开发者给什么的智能,很难成为真正的智能。

总结一下

2026 年发布的 Siri AI 总算圆了 Apple 自己在两年前画下的大饼。考虑到现在的 Siri AI 预览版的表现,WWDC24 上宣布的功能基本上是平稳落地。但跨 App 操作能力的局限、自定义程度的缺失和实际体验的限制使得 Siri AI 又不那么好,我可以通过它快速的就屏幕上的内容提问或者让它回答我的问题,但当我真的需要完成一件大过设置闹钟的事时,我大概率还是会选择自己完成,而不是让 Siri AI 为我代劳。