Siri超进化!苹果AI「Apple Intelligence」完整功能介绍

记者苏晟彦/

苹果 11日凌晨正式公布旗下个人智慧系统「Apple Intelligence」,在彻底保护用户隐私下,将可以替用户大幅增加工作效率等,但目前仅能搭载A17 Pro(iPhone 15 Pro以后机种) 、M系列晶片,而苹果也随即在官网公布完整直播内容,让大家一同见证崭新的「AI时代」。

Apple Intelligence为一款适用于 iPhone、iPad 和 Mac 的个人智慧系统,将生成式模型的强大功能与个人情境互相结合,提供极其实用且合乎需求的智慧功能。Apple Intelligence 与 iOS 18、iPadOS 18 和 macOS Sequoia 深度整合。此功能充分利用 Apple 晶片的强大实力,从而理解并建立语言和图片、在各种 App 中采取动作,并根据个人情境来简化及加速日常任务处理。透过「Private Cloud Compute」,Apple 为 AI 的隐私性订定全新标准,而且不管是装置端处理过程,或在专属的 Apple 晶片伺服器上所运行的更大、以伺服器为基础的模型,皆能灵活展现其运算能力。

Apple 执行长 Tim Cook 表示:「我们很高兴能够开启 Apple 研发创新的新篇章。Apple Intelligence 将彻底改变用户使用我们产品的方式,并提升我们产品对使用者的帮助。我们独特的技术将生成式 AI 与使用者的个人资讯结合,并提供真正有用的智慧技术。它可以透过完全隐私且安全的方式取得资讯,协助使用者执行最重要的事情。这是只有 Apple 才能实现的 AI 技术,而我们迫不及待地想让使用者体验它的能力了。」

语言理解和创作的全新能力

Apple Intelligence 为使用者开启强化写作能力和沟通效率的全新方法。借由 iOS 18、iPadOS 18 和 macOS Sequoia 中新推出的全系统内建「Writing Tools」,使用者几乎可以在任何地方进行改写、校对与文本摘要,包括「邮件」、「备忘录」、Pages 及第三方 App。

无论是整理课堂笔记、确认部落格文章通顺流畅,或是确保电子邮件呈现完美文笔,「Writing Tools」都可以帮助使用者对自己的写作更有信心。借由「Rewrite」,Apple Intelligence 让使用者能够从他们所书写的不同版本当中,挑选最适合受众和当前任务的语气。「Rewrite」可以协助提供适合不同场合的文字,从精心设计的求职信、到充满幽默感与创意的派对邀请函都可以。「Proofread」功能可以检查文法、词汇选择和句子结构,并提供修改建议和说明,使用者能校阅或快速接受这些建议。借由「Summarize」功能,使用者可选取文字,将内容概括成容易理解的段落、重点条列、表格或清单。

用「邮件」处理电子邮件变得前所未有地简单。「Priority Messages」是收件匣置顶的新区块,会显示最紧急的电子邮件,例如当天的晚餐邀请或登机证。在收件匣中,使用者不再只能预览电子邮件的前几行文字,而是无须点开邮件就能检视摘要。针对长邮件串,使用者只须轻点,即可查看相关细节。「Smart Reply」可以提供快速回信的建议内容,并能辨识电子邮件中的提问,确定所有问题都有相应的答复。

▼「邮件」里的「Priority Messages」是收件匣置顶的新区块,会显示最紧急的电子邮件。

对语言的深度理解也扩展至「通知」功能。「Priority Notifications」会将最重要的内容显示在堆叠的顶部,而摘要功能可以协助使用者浏览冗长或堆叠的通知讯息,并在「锁定萤幕」上显示重点资讯,当有聊天群组特别活跃时尤其实用。此外,为了帮助使用者专注于当前的工作,新推出的「Reduce Interruptions」专注模式只会显示可能需要立即处理的通知,例如幼稚园通知要提早去接小孩的简讯。

使用者现在可以在「备忘录」和「电话」App 中录制、转录及摘要音讯内容。当通话期间启动录音时,参与者会自动收到通知;通话结束后,Apple Intelligence 便会产出摘要,帮助使用者回顾重点资讯。

「Image Playground」让沟通和自我表现变得更有趣

Apple Intelligence 提供令人兴奋的图像创作功能,协助使用者以全新方式沟通、表现自我。透过「Image Playground」,使用者可以在几秒钟内创作出有趣的图像,并从动画、插图或素描等三种风格中进行挑选。「Image Playground」操作简单,更直接内建在「讯息」等 App 中。它还可以在指定的 app 中使用,非常适合用来尝试不同的概念及风格。所有图像都在装置端生成,让使用者可以自由地尝试各种图像且不限数量。

透过「Image Playground」,使用者可从主题、服装、配件和地点等分类里,挑选一系列概念;输入描述来定义图像内容,并从图库中挑选某个人,指定他出现在图像里,并挑出他们最喜欢的风格。

借由「讯息」中的「Image Playground」体验,使用者可以快速为朋友创作有趣的图像,甚至可以看到与对话有关的个人化建议设计。例如,若使用者正在与一群朋友讨论要去健行时,他们就会看到与朋友、目的地和活动相关的建议概念,使图像创作更快速且更切题。

在「备忘录」中,使用者可以透过 Apple Pencil 调色板工具中的全新 Image Wand 功能使用「Image Playground」,使笔记更吸睛。潦草的素描可以变成令人喜爱的图像,使用者甚至可以选择空白背景,并利用周遭环境来创造图像。在 Keynote、「无边记」和 Pages 等 App,以及采用全新 「Image Playground」 API 的第三方 App 中,皆可使用 「Image Playground」。

创作适合任何时刻的 Genmoji

使用者可以创作原创的 Genmoji 来表现自我,并将表情符号带至全新境界。只要简单地输入描述,就能产生专属的 Genmoji 及其他额外选项。使用者甚至可以根据照片创作朋友和家人的 Genmoji。就像表情符号一样,Genmoji 可以穿插在文字讯息里、作为贴图分享,或用作「点按回应」。

「照片」新功能让使用者更具掌控力

透过 Apple Intelligence,搜寻照片和影片变得更加便利。使用者可以自然的语言搜寻特定照片,例如输入「Maya 穿着扎染衬衫滑板」或「脸上贴着贴纸的 Katie」。影片搜寻也变得更强大,能够在片段中找到特定时刻,让使用者能够直接跳到相关段落。此外,新的「Clean Up」可以辨别并移除照片背景中不相干的物品,而不会不小心影响到主体。

透过「回忆」,使用者只需输入描述,即可创作他们想看的故事。Apple Intelligence 将利用语言和图像理解,根据描述挑选出最适合的照片和影片,接着依据照片中辨别出来的主题,拟定故事情节和章节,并将它们编排成具备独特剧情发展的影片。使用者甚至可以从 Apple Music 中取得与回忆相符的歌曲建议。与所有 Apple Intelligence 功能一样,使用者的照片和影片都保存在装置上,且不会与 Apple 或任何其他人共享。

▼「照片」里新的「Clean Up」可以辨别并移除照片背景中不相干的物品,而不会不小心影响到主体。

Siri 进入全新时代

Apple Intelligence 使 Siri 更深度地整合到系统体验之中。借由更丰富的语言理解能力,Siri 变得更自然、更配合情境,也更加个人化,能够简化并加速日常任务的执行。即便使用者口语不流畅,Siri 也能理解并维持指令脉络依序处理。此外,使用者还可以对 Siri 打字,并在文字和语音之间切换,以当下最适合的方式与 Siri 进行交流。Siri 也采用全新设计,运作时萤幕边缘会发出优雅的光芒。

▼现在使用者还可以对 Siri 打字,并在文字和语音之间切换,以当下最适合的方式与 Siri 进行交流。

Siri 现在可以随时随地为使用者提供装置支援,并回答数千个关于如何操作 iPhone、iPad 和 Mac 的问题。使用者可以学习各种知识,例如在「邮件」app 中排程电子邮件,或如何从浅色模式切换至深色模式。

透过萤幕感知,Siri 将能随时间理解并处理更多 App 中的使用者内容。例如,如果朋友在「讯息」中传来了一个新地址,使用者可以说:「将这个地址新增到他的联络人名片中。」

有了 Apple Intelligence,Siri 将能够在 Apple 和第三方 App 中执行数百项新动作。例如,使用者可以对 Siri 说:「从我的『阅读列表』中找出那篇关于蝉的文章」或「将周六烤肉的照片传送给 Malia 」,Siri 就会处理好。

Siri 将能提供为使用者及其装置端资讯量身定做的智慧能力。例如,使用者可以对 Siri 说:「播放 Jamie 推荐的 Podcast 」,Siri 就会找到并播放该节目,使用者甚至不用记得对方是在简讯或电子邮件中推荐的。或是他们可以问 Siri:「妈妈的航班什么时候降落?」Siri 将找出航班资讯,并与即时航班动态交叉比对后,回答航班抵达时间。

AI 隐私新标准

为了提供实质助益,Apple Intelligence 仰赖着对于个人资讯的深度了解,并同时保护使用者隐私。Apple Intelligence 的技术基石是装置端处理,在其背后的许多模型都完全于装置端运作。为了执行更复杂且需要更高处理效能的动作,「私有云运算」将 Apple 装置的隐私和安全性延展至云端,以解锁更多智慧技术。

借由「私有云运算」,Apple Intelligence 可以灵活展现其运算能力,并利用更大且以伺服器为基础的模型来执行更复杂的指令。这些模型在由 Apple 晶片提供支援的伺服器上运行,为 Apple 确保资料永远不会保留或泄漏奠定基础。独立专家可以检查在 Apple 晶片伺服器上运行的程式码以验证隐私,「 Private Cloud Compute 」以加密方式确保 iPhone、iPad 和 Mac 不会与伺服器通讯,除非其软体已被公开记录以供检查。Apple Intelligence 与「 Private Cloud Compute 」为 AI 隐私订定了全新标准,解锁更多使用者可以信任的智慧技术.

ChatGPT 与 Apple 进行跨平台整合

Apple 正在将 ChatGPT 的使用整合进 iOS 18、iPadOS 18 和 macOS Sequoia 的体验中,让使用者无须在工具之间切换,即可运用其专业技术,以及图像与文件的理解能力。

若有需要时,Siri 可以直接仰赖 ChatGPT 的专业技术。使用者的任何提问、文件或照片在被传送至 ChatGPT 之前,都将先征求同意,再由 Siri 直接回答。

此外,ChatGPT 将可在 Apple 的全系统「Writing Tools」中使用,协助使用者撰写任何文稿。有了「Compose」,使用者还可以利用 ChatGPT 的图像工具来生成各种风格的图像,以丰富撰写内容。

使用 ChatGPT 时可享内建隐私保护,使用者的 IP 位址会被隐藏,而且 OpenAI 也不会记录指令。ChatGPT 的资料使用政策适用于选择连结 ChatGPT 帐户的使用者。

ChatGPT 将于今年稍晚在 iOS 18、iPadOS 18 和 macOS Sequoia 上推出,并由 GPT-4o 驱动。使用者无须建立帐户即可免费使用,ChatGPT 订阅者则可以连结至他们的帐户,并直接在系统中使用已付费功能。推出日期

Apple Intelligence 无须额外付费即可使用。测试版将于今年秋季随着 iOS 18、iPadOS 18 和macOS Sequoia 一并推出,支援英文 (美国)。部分功能、软体平台和其他语言将在明年陆续推出。Apple Intelligence 将在搭载 M1 及更高阶晶片,并且将 Siri 和装置语言设定为英文 (美国) 的 iPhone 15 Pro、iPhone 15 Pro Max 以及 iPad 和 Mac 上提供。