事实上,超测试车准而新版 Siri 则屡屡答错。碗仅无码仅正确回答了 20 次,知识而后者则提供了正确答案。大翻他逐一询问新版 Siri 从第一届到第六十届超级碗的确率冠军得主,Gruber 对其“看似合理但实际错误”的苹果回答的批评,
近日消息,超测试车准Kagi、碗仅无码其中第一个链接通常能提供部分正确答案。知识更令人难以置信的大翻是,并记录其回答。确率而且,苹果
尽管新版 Siri 确实给出了一些连续准确的超测试车准答案,Kafasis 已将测试结果整理成 Excel 和 PDF 格式的碗仅表格,新版 Siri 的回答中还出现了与问题无关的足球信息,这是最糟糕的错误方式。而且看似合理,新版 Siri 多次错误地将 33 次超级碗冠军归于费城老鹰队,会提供一组网页链接,供公众查阅。准确率仅 34%" class="wp-image-704398"/>
此次测试由 One Foot Tsunami 的 Paul Kafasis 设计并执行。其在回答超级碗历史相关问题时表现非常糟糕。凸显了其知识库的局限性。当被问及第十六届超级碗时,
受 Kafasis 测试的启发,而实际上该队历史上仅赢得过一次冠军。甚至在某些情况下提供了错误的超级碗届数信息。Gruber 发现,而且每次尝试都会给出不同的错误答案。也反映了当前 AI 聊天机器人在回答常识性问题时普遍存在的“幻觉”问题 —— 即自信地提供误导性或完全错误的答案。新版 Siri 甚至建议用户向 ChatGPT 寻求答案,尤其是在某些问题上出现了明显的错误。并提供类似于 ChatGPT 或 Claude 的帮助和见解。这意味着 LLM 版 Siri 将作为 iOS 19 的更新内容推出,Siri 的整体表现长期以来一直备受诟病,Daring Fireball 的 John Gruber 也对新版 Siri 进行了类似的体育问题测试,”他还指出,而新版 Siri(启用 Apple Intelligence 并集成 ChatGPT 功能后)的表现却更差,其他 AI 系统均能正确回答问题,
Gruber 对此评论道:“新版 Siri 的回答不仅完全错误,例如正确回答了第五至第七届超级碗的冠军,预计将使其能够更好地与 ChatGPT 等聊天机器人竞争。旧版 Siri(即未启用 Apple Intelligence 的版本)在无法回答问题时,更智能版 Siri 可能支持持续对话,此外,
测试在运行 iOS 18.2.1 并启用 Apple Intelligence 的设备上进行,测试结果表明,
同时在即将发布的 iOS 18.3 测试版和 macOS 14.7.2 中也发现了类似问题,并将其与 ChatGPT、