关于苹果即将在 iPhone、Mac 和 iPad 上推出的 AI 功能，你需要知道的一切
苹果刚刚举行了其最具开创性的 全球开发者大会 (WWDC) 主题演讲之一，宣布主要的人工智能 (AI) 功能将在今年晚些时候出现在其 iPhone、iPad 和 Mac 操作系统上。
虽然我们并没有想到该公司会推出一系列让我们大吃一惊的华丽生成式 AI 功能，但新的 AI 公告仍然足以让 WWDC 活动的观众震惊。
苹果预计将重点将人工智能融入其应用程序，以简化用户的日常任务，并将此类人工智能功能归类为“Apple Intelligence”。我们并没有错过这个文字游戏。
Apple Intelligence 专注于具有广泛吸引力的 AI 功能，而不是高级图像和视频生成。为此，该公司开发了内部 AI 模型，并与 OpenAI 合作开发聊天机器人，将 ChatGPT集成 到 iOS、iPadOS 和 MacOS 中。
ChatGPT中文网页版
苹果智能是做什么的？
Apple Intelligence 的一些最重要的 AI 功能包括：
- 改进了 照片编辑功能，例如使用照片中的 AI 去除对象。
- 更好地控制 Siri 应用程序和操作，包括要求 Siri 查找电子邮件或编辑照片。
- 根据文本提示AI生成自定义表情符号。
- 生成笔记、短信线程、电子邮件和其他文本的快速摘要。
- 自动建议对电子邮件和消息的回复。
- 改进的邮件应用程序可以对电子邮件进行分类并生成消息。
- 自动转录语音备忘录。
- Xcode 的 AI 增强功能可自动完成代码。
除了这些 AI 功能外，iOS 18 还将为控制中心、设置和消息添加新的可自定义图标和界面更新。Apple 还将推出一款新的 密码应用程序 来取代 iCloud 钥匙串，为用户提供更人性化的选项，类似于 1Password 和 LastPass。
Siri 是否会进行 Apple Intelligence 改造？
Siri 正在从内到外进行升级。虚拟助手有了新的外观和一系列新功能供用户使用。Siri 徽标经过重新设计，用户与 Siri 对话时看到的不是气泡，而是环绕设备边缘的全新彩色灯光，照亮显示屏。
除了外观之外，Siri 现在能够更自然地理解和响应，使互动感觉更像人类。人工智能助手还能够保持从一个请求到下一个请求的上下文，以准确回答后续问题。
借助 iPhone、iPad 或 Mac 上的上下文和屏幕感知，Siri 还可以从电子邮件、图库中的照片或信息中获取信息，做出推断。苹果分享了一个例子，Siri 能够在朋友通过短信分享地址后，将地址添加到联系人卡片中。
语音助手还可以在 Apple 和第三方应用程序中执行数百项新操作，例如从阅读列表中打开文章或在图库中查找特定照片。
苹果还在升级 Siri，使其能够理解文本，让用户可以根据需要键入内容或与 Siri 对话。
Apple 的照片编辑和搜索功能有哪些新功能？
与 Google Pixel 的 Magic Eraser 一样，Apple 为其设备提供了一项名为 Clean Up 的全新 AI 照片编辑功能。此工具可识别背景中分散注意力的物体，将其移除并重新生成背景。这非常适合移除照片干扰物和其他物体。
苹果正在为其照片应用添加自然语言照片和视频搜索功能。这样一来，用户就可以输入提示来搜索图片、视频，甚至是视频的某个片段。用户可以说“找到去年夏天我们在海滩上发现的那只海星的照片”，然后他们的 iPhone 就会调出一张照片，而不必滚动数千张照片来找到那张。
在照片应用中，用户还可以通过文字提示来制作“回忆”视频。这些视频将根据描述编辑视频和照片，并附带 Apple Music 的音乐建议。
系统范围的 AI 文本生成如何工作？
Apple 为 iPhone、iPad 和 Mac 推出了全新的系统级写作工具，可帮助用户使用 AI 重写、校对和总结文本。您可以快速生成回复或总结长电子邮件以了解其内容。
同样的功能可以帮助用户对文本进行重大编辑，例如改变语气以使其更具同理心或校对以发现错误。
苹果设备还将获得语音备忘录和电话中录音和转录的 AI 升级，因为用户可以使用 AI 快速转录语音笔记。
什么是图像游乐场？
苹果将允许用户使用 AI 在 Messages、Photos Notes、Keynote、Freeform、Pages 和第三方应用中通过 Image Playground 生成图像。图像可以采用动画、插图和 Sketch 样式生成。
例如，在 Notes 应用中，一个名为 Image Wand 的新工具可让您圈出一个粗略的草图，并使用设备上的 AI 让 Image Playground 从周围区域提取想法来生成图像。
Image Playground 将于今年秋季推出测试版，部分功能将于明年发布。
ChatGPT 会登陆 iPhone、iPad 和 Mac 吗？
在苹果忙于向我们推送 AI 更新的同时，它还证实了与ChatGPT背后的公司OpenAI 建立新合作伙伴关系的传闻。此次合作将使 ChatGPT 与 Siri 和系统范围的写作工具集成。
当用户发出 Siri 请求，而语音助手认为 ChatGPT 更适合处理该请求时，虚拟助手会询问他们是否可以与 AI 聊天机器人分享他们的提示。然后，它会在同一窗口中显示 ChatGPT 响应。
Apple Intelligence 是在设备上还是在云端处理？
几个月来，有传言称苹果正在研究各种方法，以确保其人工智能在设备和隐私方面严格在设备上运行。然而，预计 Apple Intelligence 至少会依赖云端来完成部分任务，尽管该公司优先考虑在设备上处理以增强隐私。具体任务是在设备上还是在云端处理，将取决于任务的复杂性、资源可用性、数据隐私考虑和延迟要求。
从本质上讲，如果任务足够简单，可以在本地处理，充分利用设备的处理能力和电池寿命，并且需要立即得到结果，那么它更有可能在设备上处理。涉及敏感数据的任务也可以优先在设备上处理，因为苹果优先考虑数据隐私。
反过来，基于云的 AI 处理需要将数据从设备发送到可以处理复杂或计算量大的任务的远程服务器。在 Apple 的案例中，需要处理大量数据或更新模型的任务可能包括复杂的分析和高级生成 AI请求。
苹果正在利用所谓的私有云计算来完成需要云服务器的复杂任务。这些流程利用更大的基于服务器的模型，同时保护用户隐私。服务器基于 Apple Silicon 构建，数据永远不会保存在云端。
根据任务的复杂性和系统要求，算法将决定需要 AI 的任务是在设备上处理还是转移到云端。Siri 请求等简单任务和其他基本 NLP 任务可以在设备上处理。生成大型文档的详细摘要等更复杂的任务将被发送到云端，在那里可以进行更强大的处理。
Apple Intelligence 真的是私密且安全的吗？
苹果软件工程高级副总裁 Craig Federighi 在 WWDC 2024 主题演讲中表示：“Apple Intelligence 具有开创性的隐私保护功能。”苹果在发布 Apple Intelligence 时大力强调消费者隐私，Federighi 表示其“架构以隐私为核心”。
该公司正努力通过多种机制确保人工智能功能的安全。其中包括：
- 设备上处理：本地计算过程可确保敏感和私人信息始终处于用户的控制之下。任务直接在设备上处理，这需要强大的计算能力。这就是为什么 Apple 要求其 AI 功能在 A17 Pro、M1 和更新的处理器上运行。
- “私有云计算”或安全云处理： Apple 使用安全、专用的 Apple 硅片服务器来处理无法在设备上处理的复杂任务。它还使用加密验证，只允许已公开记录软件以供检查的服务器与 Apple 设备通信。
- 限制数据共享，不保留：苹果向消费者保证，当需要将数据发送到云服务器时，只会发送必要的信息，从而减少暴露。它还表示，这些数据不会被保留，从而进一步保护消费者的隐私。
- 独立代码审查：借助私有云计算，苹果解释说，代码可供独立专家检查并验证其是否符合隐私标准。
- 数据加密： Apple 对其服务器发送和接收的所有数据进行加密，以增加另一层安全保障。
- 选择退出的能力：也许最重要的是，用户可以选择加入 Apple Intelligence 功能，该功能将作为测试版推出，因为 Apple 会不断努力改进其 AI 功能。
Apple Intelligence 的技术要求是什么？
苹果的新 AI 功能将与最新的苹果设备兼容，包括搭载 A17 Pro 芯片的 iPhone 15 Pro 或更新型号，以及搭载 M1 芯片或更新芯片的 iPad 和 Mac。
虽然这些 AI 功能可能有助于推动新款 iPhone 和 Mac 的销售，但作为 iPhone 14 Pro Max 的现有用户，我希望至少其中一些功能能够扩展到旧款 iPhone 机型上。
