Siri Recap 实测:能听对话,但摘要不太够用

Apple Watch Series 12 上的 Siri Recap

watchOS 27.3 测试版里,苹果开始测试 Siri Recap:让 Apple Watch Series 12 与 Ultra 4 听周围的对话,再生成一段”刚才聊了什么”的简要摘要。真实的音频与 App、苹果以及系统其余部分相互隔离,摘要生成之后就被丢弃。这套隐私优先的设计确实到位,但连续用上两周之后,它到底能不能派上用场,答案是偏向否定的。

先把前提说清楚:Siri Recap 还是测试版功能,苹果没做完,也要等 12 月 watchOS 27.3 正式推出才会面向公众。但问题分两类。一类上线前还能改,另一类由它的结构本身决定。

最容易踩到的是后者。第一批摘要来自 YouTube 视频和 Instagram 短视频:它能分辨出你在看剧或看电影,却分不清一段 YouTube 视频和一段真实对话,于是把使用者没有参与的对话也总结了出来,而不是等到识别出机主的声音,识别机主声音这件事 Siri 本来就会。旁听周围对话的感觉有点吓人:Siri Recap 只要打开就一直在听,身边的人不会收到任何提示。

Apple Watch 屏幕上显示 Siri Recap 界面
开启后手表持续收音,旁边的人没有任何提示

更多摘要来自一些无关紧要的短对话:早餐多吃了几片素培根、猫在玩一个硅胶小包、聊了一句游戏、车道上出现过一只兔子。这些内容没有人需要回头再看一遍。设置里确实有”只在一天中某些时段或某些地点开启”的选项,可以避开这类噪声。有点反讽的是,Siri 摘要效果最好的,恰恰是这些本来就不在意的短对话。

Siri Recap 生成的简短对话摘要
短对话的摘要质量反而比长对话稳定

真正需要它的时候问题就来了。近期几次带猫就诊提供了大量值得记录的信息,结果是:摘要对较长的对话过于简略,而且不准确。有一段对话里,主人先说猫只吃某一种干粮、但因为喝很多水所以水分充足,接着又提到它在吃处方粮却仍在增重,因为那种粮不适合幼猫。这两段本来分属不同话题的内容,被合并成了一段读不通的摘要。这个问题几乎出现在每一次长对话里。

更麻烦的是说话人。另一段只有几分钟的对话里,宠物主人请兽医推荐心丝虫药,因为读到过某些产品会让猫生病;兽医讲了她自己的经历:她必须用某个特定品牌,因为家里养着兔子,而兔子对很多药物很敏感。Siri Recap 不区分说话人,这段对话的摘要就变成一团混乱的合并,读起来像是养兔子的那个人是提问的自己。

摘要中把兽医的情况写成用户的情况
不标注说话人,是摘要张冠李戴的直接原因

把不相关的概念合并,大概率属于上线前能修的问题;不标注说话人则是有意为之。在术前咨询那一次,试用的人撞上了另一个限制。苹果说过”潜在有害的内容不会被摘要”,这个范围可以非常宽。与兽医对话里一些重要的部分确实没有出现在摘要中,包括几项比较可怕的手术风险和复苏意愿的选择。而 Siri 不会说明是否因为内容原因跳过了什么,所以外界无法判断这些是没被当作重要信息,还是被过滤掉了。

摘要遗漏了部分内容但没有提示
被跳过的内容不会给出任何标记

它也有真正有用的时候。对话里事实密度越高,Siri 记得越好,尤其涉及日期:复诊预约的时间它记对了,兽医口头念出的账单总额也记对了。苹果说过 Siri Recap 不包含财务信息,所以这条界线怎么划并不清楚。它对念出口的药品名也意外地拿手,能把 benazepril、clopidogrel 这类发音拗口的名字听写下来并猜对含义。

摘要里正确记录了药物名称
听写专业药名是它表现最好的一类任务

到第三次就诊,摘要抓到了大部分要点,但回头翻看这些笔记时,一个更微妙的问题浮出来:这种摘要即便准确也未必适用。使用的人自己记得哪些内容是重要的,而 Siri 保留下来的并不是同一批;一周后重读这些笔记,被记进去的细节反而在记忆里压过了别的信息,悄悄改变了她对那次就诊的回忆。这就像脑子里本来有一幅画面,然后有人告诉你那件事的经过其实不是那样。

翻看 Siri Recap 生成的就诊摘要
别人替你选的要点,会改写你自己的记忆

出于隐私考虑,Siri Recap 不保存完整对话;代价是由 Siri 来决定一场对话里留什么、不留什么,而没有录音可以回查它漏掉了什么。两周用下来的结论很直接:不会把这个功能留在自己的手表上,也不建议别人用。它并没有做错什么,”不录音”和”够用”这两件事,眼下还没被同时做到。