iOS 18 新特性详解:GPT-4o的融合与AI的重新定义

发表时间: 2024-06-11 06:01

如果不是本届 WWDC24(苹果全球开发者大会)最后阶段,苹果重新定义了 AI,用「Apple Intelligence」取代「Artificial Intelligence」,那么这场苹果年度盛会的高光时刻将会变成「iPad 终于有了计算器应用」这种愚人节玩笑水平的更新。

但好在,苹果玩的「谐音梗」,经得起推敲和琢磨。没有「改变世界」,没有「一夜变天」,也没有「人类一败涂地」,苹果的 AI,不会让你失业,不会让你很焦虑,只是想让你的 iPhone,iPad 和 Mac 更好用更聪明。

当然也会有一点小焦虑,毕竟只有最新的设备才会有更好的苹果 AI 体验,但最新的设备也有最贵的价格。

所以,果式 AI,有何不同?

在看 Apple 智能之前,我们作为碳基生物,还是例行先汇总了 iOS 18 的更新重点,先带你把系统的升级看一遍,然后再迎接硅基时代的序曲:

桌面:可自定义排序,可统一桌面色调

控制中心:可加入更多控制可选项

锁屏界面:手电筒和相机可换成其他功能

隐私方面:推出「应用锁」

iMessage:字体样式、表情自定义选项增加,可以设置稍后发送

邮件:自动整理分类

地图:新型地形图

钱包:tap to cash 功能,新增两种 Apple pay 支付方式

手记:搜索功能从过往手记找到内容

游戏模式:即将登陆 iPhone

照片:引入智能功能「精选集」,照片分类、查找更精准

Apple 智能,苹果 AI 的答卷

这是个人智能,也是苹果的下一个重大举措。

苹果对 Apple 智能(Apple Intelligence)的期待很高,他们把这称为一种新的个人智能系统,将生成模型集成到 iPhone,iPad 和苹果电脑中。

注意,这里画个重点,Apple 智能生而是系统级产品,而非功能或者服务,这意味着它的战略地位生而不同,与什么 Siri 或者 Apple Music 不在一条水平线上。

官方一点的说法是,该系统利用先进的人工智能和机器学习,通过理解个人情境、确定通知的优先级、提供智能写作工具、创建自定义图像以及自动执行跨应用程序的操作来增强用户体验。

通俗一点说,就是你的 iPhone、iPad 和 Mac,真的带脑子了,会主动思考和理解用户了。对,之前的思考都是假的。

在聊具体功能之前,Apple 智能毕竟是苹果家的东西,自然有传统艺能傍身,两个最大的亮点先说:

隐私保护

苹果设备间的无缝操作

在苹果,我们的目标一直是设计强大的个人产品,通过让人们尽可能简单轻松地做最重要的事情来丰富人们的生活。

内置于 iPhone、iPad 和 Mac 中的 Apple 智能,可以轻松完成书写、通知管理和自我表达等工作。

Apple 智能将使你的 iPhone、iPad 和 Mac 能够理解和创建语言和图像,用最简单的交互方式,完成比较复杂的指令任务。

当中的智能写作工具,可以校对文本、重写不同版本直到语气和措辞恰到好处,在任何需要写作的场景中,都可以通过它找到合适的用词措辞,比如更友善一点,或者更专业一点。

但你不想友善或者专业的时候,你也可以自定义文风,比如「要写得像首诗歌」一样,于是 Apple 智能就会一步成诗。

借助增强的语言功能,用户可以在几秒钟内总结整个讲座/会议/演说的内容,获取较长的群组讨论的浓缩版,熟悉吧,这个功能不光苹果有,ChatGPT 有,其实飞书、WPS、Kimi 等等 AI 工具都有,属于谁都会的功能。

当然集成在系统层面的好处就是这个写作工具几乎可以在任何需要文字创作的界面使用,包括第三方应用,这就是生在苹果家的先天优势。

Apple 智能中内置的大型语言模型提供了深度自然语言理解,可以帮助你自动管理消息通知。

例如,iPhone 可以优先处理重要通知,且减少非紧急消息的干扰,同时确保你不会错过一些重要的事。

这里就呼应了前面所说的,设备这次真的是会思考了。

手机略加思索,会优先通知显示在堆栈顶部,第一眼就能让人看到最重要的事情。通知也会实时汇总,以便用户可以更快地浏览。

邮件中的优先消息,会将时间优先级较高的消息放到收件箱的顶部,例如今天截止的邀请或今天下午航班的登机提醒。

通过 Apple 智能,可在邮件应用中显示长电子邮件的摘要,直奔主题,重要信息点一目了然。

除了玩转文字,Apple 智能还支持文生图功能,让 iMessage 对话过程更有趣。

例如,当你祝朋友生日快乐时,你可以根据朋友的形象创建一个被蛋糕,气球和鲜花包围的图像贺卡,使得氛围更加地喜庆。

当然,实话实说,Apple 智能的文生图水平不怎么样,你的朋友看到了未必觉得喜庆。

目前在对话过程中,该功能支持生成手绘、插画和动画三种风格的图片,并且这种功能的内置在整个系统的所有 App 中,如备忘录,无边记等。

如果说以上的 Apple 智能表现只能说在及格线附近徘徊,聊胜于无的话,属于苹果真正的实力在下面。

Apple 智能能够简化跨多个 APP 的使用体验。

无论是调用上周同事分享的文件,还是播放妻子前几天分享的博客,Apple 智能能够协调这些以及数百个其他操作,以帮助用户可以完成更多事项,同时极大提高效率。

此外,Apple 智能还有一个重要的部分,那就是对个人情境的理解。

苹果智能以个人信息和使用情境为基础,能够检索和分析应用程序中的相关数据,并参考屏幕上的内容,例如正在查看的电子邮件或日历事件等。

苹果在 WWDC24 为我们举了这样一个例子:假设我的一个会议被重新安排到下午晚些时候,我想知道这是否会影响到我按时参加我女儿的演出。

这个时候,Apple 智能就能派上用场。它能知道:我女儿是谁,她几天前发送的演出详情、我的会议时间和地点,以及我的办公室和剧院之间路程的预计占用时长。

这个场景很好地解释了,为什么 Apple 智能是一个系统,以及为什么它真正拥有了理解用户的能力,因为它打通了用户的诸多不同应用数据,知晓这些数据组合起来有何逻辑,并且推导出用户的问题和需求,还给出了解决方案。

爱范儿和 APPSO 认为,这是 Apple 智能真正的厉害之处,也是其他手机 AI 难以企及的地方。

但问题随之而来,毕竟如果把生活中的所有细节都交到别人的 AI 云中进行储存和分析,就有点吓人了。因此,苹果认为应该做到「强大的智能与强大的隐私齐头并进」。

首先,个人智能系统的核心,其实就是设备上的处理能力,苹果表示其 Apple 智能已经集成到了 iPhone、iPad 和Mac 以及应用程序中,使其能在「不收集个人数据的情况下理解个人数据」。

得益于苹果独特的硬件和软件系统构建的芯片,为设备提供了深度集成深度大模型所需的处理能力。

换言之,A17 Pro 及苹果 M 系列芯片,为苹果智能提供了算力的基础。

再换言之,其他机型可能会无缘 Apple 智能。

苹果介绍,当用户提出请求时,Apple 智能会使用其语义索引来识别相关的个人数据,并结合使用的情境,将其提供给相应的模型来处理任务。

通常,如果我们想要用到更大型的模型,就得求助于云服务器。但问题在于,这些服务器可能会在我们不知情的情况下存下数据,而且哪怕公司声称他们不会乱用你的数据,但作为用户,我们其实很难去核实这一点。

不过这个问题在 Apple 智能或许不会出现。苹果表示,当你使用像 iPhone 这样的苹果设备时,你可以控制你的数据存储在哪里以及谁可以访问它。

苹果还想让 iPhone 的隐私和安全扩展到云端,同时还提供好的 AI 服务,这就是私有云计算。

当用户提出请求时,Apple 智能会先看看能不能在设备上处理,然后在使用苹果芯片作为算力输出的服务器上处理时,你的数据不会被存储,也不会被苹果独占。

苹果还表示,私有云计算加密确保了 iPhone、iPad 和 Mac 在软件未经公开记录和检查的情况下不能与服务器通信,也就是为 AI 隐私保护设定了一个新标准。

别人考虑 AI 好不好用的时候,苹果会优先考虑 AI 安不安全。

大模型上机,你的 Siri 变得更聪明了

在变得「聪明」的这条道路上,Siri 摸索了十三年,但直到今天,我们才再次见证其初心的回归。

GPT-4o 的出现一夜之间改写了人机交互的历史,直接干翻所有语音助手。

苹果一看,这势头,打不过就加入吧,在 Apple 智能的加持下,你手机上的 Siri 不仅变得更聪明,流畅的对话能力也迎来质的飞跃。

例如,周末想去海滩玩,但不知道当地天气如何,无他,只需向 Siri 发出询问就能得到你想要的答案。从演示效果上看,这种交流方式好比跟你的天气助手聊天,既方便又舒服。

另外,Siri 支持在文字与语音之间随意切换,比如随手在屏幕下方打字就能轻松调用 Siri。

在交流过程中,AI+ 的 Siri 具备更强大的上下文理解能力,对个人情景的理解能力也有大幅度改进。

例如,当你想要去机场接人,新版 Siri 能够帮助你规划路线,并且根据平时聊天内容的信息,帮你提前订好吃饭的餐厅。

在发布会上,苹果也正式宣布与 OpenAI 达成合作。

未来 ChatGPT 将被整合到 Siri 当中 ,并且被融入全系统的书写工具当中。用户无需注册账户,即可直接免费使用这一功能。

而 ChatGPT 的付费订阅用户可以在这些操作系统中直接连接他们的账户,并享受付费功能的便捷访问。

爱范儿和 APPSO 在苹果发布会现场也看到了 OpenAI CEO Sam Altman 的身影,不过,Altman 并未在预先录制好的发布会视频现身。

他在社交平台 X 上表示:「非常高兴能与苹果合作,ChatGPT 今年晚些时候将整合到苹果设备中!我想你一定会喜欢它。」

Siri 的初心是让生活更简单,但我们过去往往需要花费更多的时间去教会 Siri 如何理解我们的问题。

希望在新版 Siri 正式推送后,能够真正成为如苹果营销主管菲尔·席勒所描述的那样——通过语音指令就能帮助你搞定事情的智能助手。

可以说,iOS 18 和 ChatGPT 的合体是一场众望所归的各取所需,也是拯救 Siri 的一步大棋,也正是因为 Apple 智能和 ChatGPT 的加入,才让你我手上的 iPhone、iPad 和 Mac 重获新生,说是史诗级更新,并不为过。

iOS 被 AI 接管?没有大张旗鼓,却已深入你我生活

在一些系统级应用上,iOS 18 也有了一些新构思。

iOS 18 上的邮件功能,可以通过设备分类来控制和管理传入的电子邮件,分类功能可以阻止用户的新消息,并且帮助个人旗下所有的账户都保持最新的消息状态,不错过任何一条重要信息。

其中,「主要类别」中的消息,可以使用户专注于最重要的事情,这个类别的信息主要来自于熟人朋友的电子邮件和时间上比较紧急的信息。

其余部分将被列为「新的类别」,例如收据和订单确认交易、新闻通讯更新、社交媒体通知以及市场营销和销售消息中的促销活动。

iOS 18 的邮件还创建了一个新摘要视图,将用户从企业收到的所有相关电子邮件汇集在一起,使与这些相似信息的交互更加容易,我们可以在同一个界面获取所有的相关消息,查看和这些内容有关的内容。

苹果官方的地图 App 在 iOS 18 上,增加了全新的地形图。

地形图中有许多新的细节信息,其中包括详细的步道网络和远足路线,这些新的地图信息可以保存在手机端离线访问。

用户还能实用连续的智能语音提示,以及创建独属于自己的徒步旅行路线,在没有网络的环境里,依然能够正常使用。

钱包 App 的更新则集中在了便利性上。

苹果在发布会上称,他们将推出一种快速而私密的方式来付款,称为「Tap to Cash」,无需共享电话号码或电子邮件地址就能面对面交钱。

用户只需将手机放在一起,就可以成功付款。

从发布会的演示视频看,这是一种快速私对私的转账方式。转账时的动画交互很有质感,非常像 iOS 17 上隔空投送的动效。

另外,苹果称目前正在增加来两种新的在线苹果支付方式,让世界各地的客户能够从银行和卡提供商兑换奖品。

比如活动门票功能有了新功能和新设计,根据门票信息,用户将能在手机上看到和演出场地有关的各种信息,通过智能推荐,和演出相关的 App 也会出现在建议当中。

前段时间的网红应用「手记」也有更新,现在的手记可以记录用户的每日心情,并且通过显示个人的日历、安排等统计数据的见解视图,帮助用户来跟踪相关的事宜。

「游戏模式」的更新能为游戏爱好者提升不少游玩体验,按照苹果的说法,那就是带来「身临其境」的感受。

现在开启游戏模式后,设备将最大限度地减少后台活动,从而最大限度地提高游戏帧率,并改善 AirPods 和游戏控制器的响应速度。

苹果去年已经在 macOS Sonoma 中添加了类似的游戏模式,现在的 iOS 上引入了这项功能,其实是通过游玩体验的提升,让更多的玩家加入到 Apple Gaming 的生态中。

拍照和相册

对许多人而言,相册都是保存回忆的最佳载体。

iOS 18 为我们提供了全新的相册界面,我们可以直接滑动选择照片的日期,快速缩小范围,甚至还能智能过滤掉截图,找到我们想要的照片,让不断增加的图库保持整齐有序。

在相册 App 中,还能自定义人物群组,并根据旅行信息分类,支持动态海报等形式展示照片,让我们一键回忆拍照的时刻,还可以一次性分享整个「精选集」。

iMessages 的 AI 更新

最近几年几乎每一代 iOS 更新都会带来 iMessage 的新功能,iOS 18 预计也不会例外。

除了 AI 建议回复,iMessage 还将能支持对单字添加动画效果,之前 iMessage 已经能够实现对整个对话气泡添加像全屏、镭射光、五彩纸屑等等动画效果,用户现在能够利用新功能创建自己的表情符号。

另外,新的消息功能将提供由苹果设备上的 Ajax LLM 生成的建议回复,相当于你有了个智能助理,帮你处理琐事。

Safari

Safari 虽然在推出之初一直被诟病,但在后续更新中渐渐变得越来越好用。

而 AI 的加入为 Safari 增加了一项名为 Reader 功能,能够进行内容总结,帮助我们更快地掌握文章的核心内容,有点「量子速读」内味儿了。

此外,在地址栏中还整合了页面工具,用户只需一键点击,即可直接收听博客,这类似于一些便捷的插件功能。

应用锁

隐私是当下生活中最重要的问题,应用锁是 iOS 18 针对隐私保护的另一项重要更新。

现在 iOS 18 支持上锁或隐藏某个 App,用户在解锁时必须使用 Face ID 密码等方式,从而进一步增强隐私保护能力。

以往 App 会请求查找你通讯录上的权限,但 iOS 18 将这一权限的更多控制权归还给用户。

用户界面和控制中心

除了 AI 功能的升级外,iOS 18 还将在用户界面和交互体验上做出重大改进。

iOS 18 可以自由排列 App 图标,不受到当前的固定网格布局限制。

同时 iOS18 也进一步开放自定义 App 风格,新增暗色模式,并支持更改应用程序图标的颜色。

例如,iOS 18 可以推荐合适的色调来搭配墙纸,帮助用户打造想要的外观,让主屏幕真正属于用户。

iOS 18 不仅整体界面给人焕然一新的感觉,还重新设置了控制中心。

除了控制中心采用多页面布局,第三方开发者可以为其提供更多富有创意的组件。

控制中心增加了更多的控制选项,并且用户可以自由调整选项的布局、大小,让分门别类的布局也更有条理。

此外,用户还可以自定义显示在锁屏界面的应用,比如相机和手电筒可以更换其他控制功能。

不过不少熬夜观看 WWDC24 的人会有一种「分裂感」,一方面是 iOS18 等系统的更新属于缝缝补补,锦上添花,并无真正的 Amazing 更新,一些「甜点级」的更新也只是让人会心一笑。

时至今日,手机系统的问题已经不是功能太少,而是功能太多,系统更新几乎进入了死胡同,也只有苹果号召力强,大家还会关心 iOS 更新了什么,隔壁 Android 的更新除了酷安用户之外,已经几乎无人在意了。

此时,AI 就成了人们想象中身披金甲脚踏祥云的盖世大英雄,大家的意中系统,应该是无所不能,多智近妖,书画双绝的天顶星技术载体,但苹果还是把我们拉回现实:

醒醒,2024 年最好的 AI 设备,依旧是手机,2024 年最好的 AI 手机,将会是 iPhone。