Apple Intelligence:这是迄今为止我们所知道的一切

Apple 智能功能。
苹果

Apple Intelligence 是苹果公司对人工智能的诠释,它希望从根本上改变我们与技术交互的方式,将先进的机器学习和人工智能功能融入日常设备中。

苹果的人工智能生态系统承诺通过 Siri 提供更多对话式散文、跨应用程序的自动校对和文本摘要以及闪电般快速的图像生成,旨在增强用户体验并简化其产品系列的操作。以下是您需要了解的有关 Apple 变革性新 AI 的所有信息。

Apple Intelligence 发布日期和兼容性

Apple Intelligence 最初定于 9 月正式发布,与iOS 18iPadOS 18macOS Sequoia的推出同时进行。然而,正如彭博社的马克·古尔曼报道的那样,苹果随后决定稍微推迟 Intelligence 的发布。据 Gurman 称,它目前已向开发者开放,不过 Apple Intelligence 不太可能在 10 月推出的 18.1 版本之前公开发布。

该公司已明确表示,至少在最初阶段,AI 功能将在iPhone 15 Pro15 Pro Max以及配备M1 或更新芯片的 iPad 和 Mac 上提供(可能还有 iPhone 16 手机,因为它们“都将运行 iOS 18)。此外,这些功能仅在用户语言设置为英语时才可在启动时使用。

为什么要停产?苹果公司坚称,这些处理对于旧硬件来说过于密集,因为它们利用了这些新芯片的更先进的神经引擎、GPU 和 CPU。

随着 iOS 18.1 beta 的发布,运行iPhone 15 Pro 或 iPhone 15 Pro Max的 Apple 开发者计划的用户可以在 7 月份访问早期版本的 Intelligence

新的人工智能功能

无论您在什么设备上使用 Apple Intelligence,AI 将主要专注于三个功能:书写辅助、图像创建和编辑以及增强 Siri 的认知能力。

Apple Intelligence 旨在跨越公司产品线的广度和宽度。因此,几乎 macOS 版本 Apple Intelligence 中的所有功能都将反映在 iOS 和 iPadOS 版本中。其中包括书写工具、图像游乐场、照片记忆以及 Siri 的改进。
此外,iPadOS 与Apple Pencil搭配使用时,将解锁更多功能。例如,Notes 应用程序中的智能脚本将实时拉直和平滑手写文本。新的数学笔记计算器将自动求解用户自己手写的方程式,并只需点击一下即可根据这些方程式生成交互式图表。
Digital Trends已经使用 MacOS Sierra beta 试用了 Apple Intelligence ,但对我们迄今为止从数字代理中看到的情况感到相当失望。首先,只有一小部分人工智能工具实际上可以在测试版中使用。我们可以使用的工具,包括写作助手、Siri 和音频转录,都被证明存在缺陷且不可靠。诚然,是的,这些只是原型,在获准公开发布之前肯定会进一步完善,但从我们目前所看到的情况来看,Apple Intelligence 预计 10 月份发布的截止日期可能过于雄心勃勃。

书写工具

Apple 在 WWDC 2024 上展示 Apple Intelligence 功能。
苹果

新的书写工具功能将在发布后集成到 iOS 18、iPadOS 18 和 macOS Sequoia 中。它可以校对用户的写作并根据需要重写部分内容,以及总结 Apple 应用程序生态系统(包括 Mail、Notes 和 Pages)中的文本。第三方开发人员将能够通过 API 调用在自己的应用程序中利用编写工具。

例如,在“邮件”应用程序中,Apple Intelligence 将为用户提供收件箱内容的简短摘要,而不是向他们显示电子邮件本身的前几行。智能回复将根据邮件内容建议回复,并确保回复解决原始电子邮件中提出的所有问题。该应用程序甚至可以通过优先消息将更及时和相关的信件移至收件箱顶部。

笔记应用程序也将得到显着改进。通过 Apple Intelligence,Notes 将提供新的音频转录和摘要功能,以及一个名为 Math Notes 的集成计算器,可以求解输入到笔记正文中的方程。

图像游乐场

iPadOS 18 上的 Apple Intelligence Image Playground。
苹果

图像创建和编辑功能将主要由新的 Image Playground 应用程序处理,用户将能够在几秒钟内以三种艺术风格之一旋转生成的图片:动画、插图和素描。 Image Playground 将作为一个独立的应用程序存在,其许多特性和功能与消息等其他 Apple 应用程序集成。

Apple Intelligence 也将出现在您的相机胶卷中。 照片应用程序中的记忆功能已经能够自动识别用户生活中最重要的人物、地点和宠物,然后将这组图像整理成一个连贯的音乐集。借助 Apple Intelligence,记忆变得更加美好。

AI 将选择最符合用户输入提示的照片和视频(例如“2024 年最好的朋友去洛杉矶的公路旅行”)。然后,它会生成一个故事情节——包括基于人工智能在所选图像中找到的主题的章节——并将整个故事组合成一部短片。一旦 Apple Intelligence 清除公开测试版,照片用户还可以使用 Clean Up (类似于 Google 的 Magic Eraser 的工具)和改进的搜索功能。

西里

更新了 Siri 激活界面。
苹果
也许 Apple Intelligence 新功能的最大受益者将是 Siri。苹果长期饱受困扰的数字助理将更加深入地融入操作系统,提供更多对话式语音并改进自然语言处理。
更重要的是,Siri的记忆力将更加持久,让代理能够记住之前对话的细节,而用户将能够在口头和书面提示之间更无缝地切换。

Apple 情报隐私

该图显示了苹果人工智能计算的整个设置。
苹果

为了避免近几个月来一些竞争对手遭受的代价高昂且令人尴尬的数据泄露,苹果将隐私置于苹果智能体验的首要和中心位置,甚至构建了自己的私有且安全的人工智能计算云,称为私有云计算(PCC),用于处理复杂的用户查询。

Apple 软件工程高级副总裁 Craig Federighi 在 WWDC 2024 期间表示,Apple Intelligence 的大部分日常操作将在设备上处理,使用该公司最新一代的 A17 和 M 系列处理器。 ,而不收集您的个人数据,”他补充道。

“当你提出请求时,Apple Intelligence 会分析该请求是否可以在设备上处理,”Federighi 继续说道。 “如果需要更大的计算能力,它可以利用私有云计算,并仅发送与要在 Apple 芯片服务器上处理的任务相关的数据。”这将大大减少私人用户数据在设备和 PCC 之间传输时被黑客攻击、拦截、监视和以其他方式窥探的机会。

“苹果永远不会存储或访问你的数据,”他解释道。 “它专门用于满足您的请求,就像您的 iPhone 一样,独立专家可以检查这些服务器上运行的代码以验证这一隐私承诺。”

Apple Intelligence 的 ChatGPT 合作伙伴关系

iPhone 提示用户进行 ChatGPT 批准。
苹果

Apple Intelligence 不会是今年秋天唯一出现在你的 Apple 设备中的尖端生成人工智能。在 WWDC 期间, Apple 和 OpenAI 高管宣布两家公司将建立合作伙伴关系,将 ChatGPT 功能(由GPT-4o提供支持)(包括图像和文本生成)集成到 Siri 和书写工具中。与 Apple Intelligence 一样,如果 Siri 的板载功能不足以满足用户的查询,ChatGPT 也会介入,只不过 ChatGPT 会将请求发送到 OpenAI 的公共计算云而不是 PCC。

在利用 ChatGPT 的功能时,用户无需离开 Siri 屏幕,无论查询在何处处理,Siri 都会给出答案。为了至少确保表面上的隐私保护,设备将在传输请求以及用户附加的任何文档或图像之前提示用户许可。

Apple Intelligence 在 Google 张量处理单元上进行训练

谷歌的 Tensor G2 芯片。
谷歌/谷歌

苹果公司 7 月份发表的一篇研究论文显示,该公司选择使用谷歌的张量处理单元(TPU)而不是英伟达备受追捧的基于 GPU 的系统来训练苹果智能模型的关键组件。研究团队表示,利用 TPU 可以让他们利用足够的计算能力来训练其庞大的 LLM,并且比使用独立系统更加节能。

这标志着与人工智能培训中通常的业务开展方式的显着不同。英伟达目前预计占据人工智能芯片市场 70% 至 95%的份额,因此苹果选择其直接竞争对手的产品(并公开披露这一事实)至少可以说是非常不寻常的。这也可能是未来事情的征兆。英伟达的市场主导地位不可能永远持续下去——我们已经看到当今的超大规模企业正在转向专有芯片生产。除了谷歌正在进行的 TPU 工作之外,亚马逊最近还宣布正在开发自己的芯片线,该芯片线的性能将比 Nvidia 目前的产品高 50%,而功耗却只有 Nvidia 的一半。 微软于 5 月份宣布将采用 AMD 的 AI 芯片系列。


Posted

in

by

Tags: