AIGC宇宙 AIGC宇宙

严防“胡说八道”,苹果 Apple Intelligence 智能回复功能加入“反幻觉”指令

作者:远洋
2024-08-07 07:52
近日有网友在 macOS 15.1 测试版中发现了苹果公司为 Apple Intelligence 的智能回复(Smart Reply)功能设置的一系列内部指令。这些指令以 JSON 文件的形式存在,详细规定了该功能的工作流程。其中最引人注目的是,苹果明确要求系统“不要编造事实,不要产生幻觉”。据AI在线了解,智能回复是苹果邮件应用的一项功能,旨在通过分析邮件内容自动生成可能的回复选项,这一功能的背后是苹果自研的智能技术。然而,与其他生成式 AI 一样,智能回复也面临着“幻觉”问题,即系统可能会生成虚假或误导性的信

近日有网友在 macOS 15.1 测试版中发现了苹果公司为 Apple Intelligence 的智能回复(Smart Reply)功能设置的一系列内部指令。这些指令以 JSON 文件的形式存在,详细规定了该功能的工作流程。其中最引人注目的是,苹果明确要求系统“不要编造事实,不要产生幻觉”

严防“胡说八道”,苹果 Apple Intelligence 智能回复功能加入“反幻觉”指令

据AI在线了解,智能回复是苹果邮件应用的一项功能,旨在通过分析邮件内容自动生成可能的回复选项,这一功能的背后是苹果自研的智能技术。然而,与其他生成式 AI 一样,智能回复也面临着“幻觉”问题,即系统可能会生成虚假或误导性的信息。

严防“胡说八道”,苹果 Apple Intelligence 智能回复功能加入“反幻觉”指令

为了防止这种情况发生,苹果在系统内部设置了严格的指令。根据泄露的指令,智能回复功能被要求仅提取邮件中明确提出的问题,并提供相应的回答选项。这一做法有助于减少 AI 在生成回复时的错误。

虽然苹果明确要求 AI 不要编造信息,但业内人士认为,要完全消除“幻觉”问题仍然面临挑战。因为生成式 AI 模型本质上并不理解文本内容,无法准确判断信息的真伪。

相关标签:

相关资讯

什么样的偏好,才叫好的偏好?——揭秘偏好对齐数据的「三驾马车」

论文有两位共同一作。 何秉翔,清华大学博士一年级,研究方向为大语言模型对齐、强化学习。 张文斌,哈尔滨工业大学博士一年级,研究方向为自然语言处理。
4/15/2025 10:51:00 AM
机器之心

AI 摘要“幻觉”风波未平,谷歌 Gemini 聊天机器人又被曝“胡言乱语”

前段时间,谷歌搜索“AI 摘要”(AI Overviews)功能因其经常提供具有严重错误的搜索结果而备受诟病,导致官方亲自下场保证后续会进行修正。而如今,又有网友爆料称谷歌旗下的人工智能产品“抽了风”,这次问题出在 Gemini 聊天机器人。从北京时间昨夜至今日凌晨,有 Reddit 网友陆续发现,Gemini 生成的回复偶尔会充斥着杂乱无章的代码和外文字母 —— 这些结果对用户的查询毫无帮助。过去几天里,部分 Gemini 用户陆续发现自己遇到了这一奇怪问题:Gemini 会输出胡言乱语。这些回复可能是一连串的重
6/5/2024 7:10:10 AM
清源

详解AI加速器(三):架构基础离不开ISA、可重构处理器……

在上一篇文章中,前苹果工程师、普林斯顿大学博士 Adi Fuchs 解释了为什么现在是 AI 加速器的黄金时代。在这篇文章中,我们将聚焦 AI 加速器的秘密基石——指令集架构 ISA、可重构处理器等。
2/13/2022 12:57:00 PM
机器之心