扫码打开虎嗅APP
本文来自微信公众号:APPSO (ID:appsolution),作者:在 Apple Park 的 APPSO,原文标题:《iOS 18 正式融合 GPT-4o,苹果重新定义“AI”,你的 iPhone 喜提史诗级更新!》,题图来自:视觉中国
如果不是本届WWDC24(苹果全球开发者大会)最后阶段,苹果重新定义了AI,用“Apple Intelligence”取代“Artificial Intelligence”,那么这场苹果年度盛会的高光时刻将会变成“iPad终于有了计算器应用”这种愚人节玩笑水平的更新。
但好在,苹果玩的“谐音梗”,经得起推敲和琢磨。没有“改变世界”,没有“一夜变天”,也没有“人类一败涂地”,苹果的AI,不会让你失业,不会让你很焦虑,只是想让你的iPhone,iPad和Mac更好用更聪明。
当然也会有一点小焦虑,毕竟只有最新的设备才会有更好的苹果AI体验,但最新的设备也有最贵的价格。
所以,果式AI,有何不同?
在看Apple智能之前,我们作为碳基生物,还是例行先汇总了iOS 18的更新重点,先带你把系统的升级看一遍,然后再迎接硅基时代的序曲:
桌面:可自定义排序,可统一桌面色调
控制中心:可加入更多控制可选项
锁屏界面:手电筒和相机可换成其他功能
隐私方面:推出“应用锁”
iMessage:字体样式、表情自定义选项增加,可以设置稍后发送
邮件:自动整理分类
地图:新型地形图
钱包:Tap to Cash功能,新增两种Apple pay支付方式
手记:搜索功能从过往手记找到内容
游戏模式:即将登陆iPhone
照片:引入智能功能“精选集”,照片分类、查找更精准
Apple智能,苹果AI的答卷
这是个人智能,也是苹果的下一个重大举措。
苹果对Apple智能(Apple Intelligence)的期待很高,他们把这称为一种新的个人智能系统,将生成模型集成到iPhone,iPad和苹果电脑中。
注意,这里画个重点,Apple智能生而是系统级产品,而非功能或者服务,这意味着它的战略地位生而不同,与什么Siri或者Apple Music不在一条水平线上。
官方一点的说法是,该系统利用先进的人工智能和机器学习,通过理解个人情境、确定通知的优先级、提供智能写作工具、创建自定义图像以及自动执行跨应用程序的操作来增强用户体验。
通俗一点说,就是你的iPhone、iPad和Mac,真的带脑子了,会主动思考和理解用户了。对,之前的思考都是假的。
在聊具体功能之前,Apple智能毕竟是苹果家的东西,自然有传统艺能傍身,两个最大的亮点先说:
隐私保护
苹果设备间的无缝操作
在苹果,我们的目标一直是设计强大的个人产品,通过让人们尽可能简单轻松地做最重要的事情来丰富人们的生活。
内置于iPhone、iPad和Mac中的Apple智能,可以轻松完成书写、通知管理和自我表达等工作。
Apple智能将使你的iPhone、iPad和Mac能够理解和创建语言和图像,用最简单的交互方式,完成比较复杂的指令任务。
当中的智能写作工具,可以校对文本、重写不同版本直到语气和措辞恰到好处,在任何需要写作的场景中,都可以通过它找到合适的用词措辞,比如更友善一点,或者更专业一点。
但你不想友善或者专业的时候,你也可以自定义文风,比如“要写得像首诗歌”一样,于是Apple智能就会一步成诗。
借助增强的语言功能,用户可以在几秒钟内总结整个讲座/会议/演说的内容,获取较长的群组讨论的浓缩版。熟悉吧?这个功能不光苹果有,ChatGPT有,其实飞书、WPS、Kimi等等AI工具都有,属于谁都会的功能。
当然,集成在系统层面的好处就是这个写作工具几乎可以在任何需要文字创作的界面使用,包括第三方应用,这就是生在苹果家的先天优势。
Apple智能中内置的大型语言模型提供了深度自然语言理解,可以帮助你自动管理消息通知。
例如,iPhone可以优先处理重要通知,且减少非紧急消息的干扰,同时确保你不会错过一些重要的事。
这里就呼应了前面所说的,设备这次真的是会思考了。
手机略加思索,会优先通知显示在堆栈顶部,第一眼就能让人看到最重要的事情。通知也会实时汇总,以便用户可以更快地浏览。
邮件中的优先消息,会将时间优先级较高的消息放到收件箱的顶部,例如今天截止的邀请或今天下午航班的登机提醒。
通过Apple智能,可在邮件应用中显示长电子邮件的摘要,直奔主题,重要信息点一目了然。
除了玩转文字,Apple智能还支持文生图功能,让iMessage对话过程更有趣。
例如,当你祝朋友生日快乐时,你可以根据朋友的形象创建一个被蛋糕,气球和鲜花包围的图像贺卡,使得氛围更加地喜庆。
当然,实话实说,Apple智能的文生图水平不怎么样,你的朋友看到了未必觉得喜庆。
目前在对话过程中,该功能支持生成手绘、插画和动画三种风格的图片,并且这种功能内置在整个系统的所有App中,如备忘录,无边记等。
如果说以上的Apple智能表现只能说在及格线附近徘徊,聊胜于无的话,属于苹果真正的实力在下面。
Apple智能能够简化跨多个APP的使用体验。
无论是调用上周同事分享的文件,还是播放妻子前几天分享的博客,Apple智能能够协调这些以及数百个其他操作,以帮助用户可以完成更多事项,同时极大提高效率。
此外,Apple智能还有一个重要的部分,那就是对个人情境的理解。
苹果智能以个人信息和使用情境为基础,能够检索和分析应用程序中的相关数据,并参考屏幕上的内容,例如正在查看的电子邮件或日历事件等。
苹果在WWDC24为我们举了这样一个例子:假设我的一个会议被重新安排到下午晚些时候,我想知道这是否会影响到我按时参加我女儿的演出。
这个时候,Apple智能就能派上用场。它能知道:我女儿是谁,她几天前发送的演出详情、我的会议时间和地点,以及我的办公室和剧院之间路程的预计占用时长。
这个场景很好地解释了,为什么Apple智能是一个系统,以及为什么它真正拥有了理解用户的能力,因为它打通了用户的诸多不同应用数据,知晓这些数据组合起来有何逻辑,并且推导出用户的问题和需求,还给出了解决方案。
我们认为,这是Apple智能真正的厉害之处,也是其他手机AI难以企及的地方。
但问题随之而来,毕竟如果把生活中的所有细节都交到别人的AI云中进行储存和分析,就有点吓人了。因此,苹果认为应该做到“强大的智能与强大的隐私齐头并进”。
首先,个人智能系统的核心,其实就是设备上的处理能力,苹果表示其Apple智能已经集成到了iPhone、iPad和Mac以及应用程序中,使其能在“不收集个人数据的情况下理解个人数据”。
得益于苹果独特的硬件和软件系统构建的芯片,为设备提供了深度集成深度大模型所需的处理能力。
换言之,A17 Pro及苹果M系列芯片,为苹果智能提供了算力的基础。
再换言之,其他机型可能会无缘Apple智能。
苹果介绍,当用户提出请求时,Apple智能会使用其语义索引来识别相关的个人数据,并结合使用的情境,将其提供给相应的模型来处理任务。
通常,如果我们想要用到更大型的模型,就得求助于云服务器。但问题在于,这些服务器可能会在我们不知情的情况下存下数据,而且哪怕公司声称他们不会乱用你的数据,但作为用户,我们其实很难去核实这一点。
不过,这个问题在Apple智能上或许不会出现。苹果表示,当你使用像iPhone这样的苹果设备时,你可以控制你的数据存储在哪里以及谁可以访问它。
苹果还想让iPhone的隐私和安全扩展到云端,同时还提供好的AI服务,这就是私有云计算。
当用户提出请求时,Apple智能会先看看能不能在设备上处理,然后在使用苹果芯片作为算力输出的服务器上处理时,你的数据不会被存储,也不会被苹果独占。
苹果还表示,私有云计算加密确保了iPhone、iPad和Mac在软件未经公开记录和检查的情况下不能与服务器通信,也就是为AI隐私保护设定了一个新标准。
别人考虑AI好不好用的时候,苹果会优先考虑AI安不安全。
大模型上机,你的Siri变得更聪明了
在变得“聪明”的这条道路上,Siri摸索了十三年,但直到今天,我们才再次见证其初心的回归。
GPT-4o的出现一夜之间改写了人机交互的历史,直接干翻所有语音助手。
苹果一看,这势头,打不过就加入吧,在Apple智能的加持下,你手机上的Siri不仅变得更聪明,流畅的对话能力也迎来质的飞跃。
例如,周末想去海滩玩,但不知道当地天气如何,无他,只需向Siri发出询问就能得到你想要的答案。从演示效果上看,这种交流方式好比跟你的天气助手聊天,既方便又舒服。
另外,Siri支持在文字与语音之间随意切换,比如随手在屏幕下方打字就能轻松调用Siri。
在交流过程中,AI+的Siri具备更强大的上下文理解能力,对个人情景的理解能力也有大幅度改进。
例如,当你想要去机场接人,新版Siri能够帮助你规划路线,并且根据平时聊天内容的信息,帮你提前订好吃饭的餐厅。
在发布会上,苹果也正式宣布与OpenAI达成合作。
未来ChatGPT将被整合到Siri当中,并且被融入全系统的书写工具当中。用户无需注册账户,即可直接免费使用这一功能。
而ChatGPT的付费订阅用户可以在这些操作系统中直接连接他们的账户,并享受付费功能的便捷访问。
我们在苹果发布会现场也看到了OpenAI CEO Sam Altman的身影,不过,Altman并未在预先录制好的发布会视频现身。
他在社交平台X上表示:“非常高兴能与苹果合作,ChatGPT今年晚些时候将整合到苹果设备中!我想你一定会喜欢它。”
Siri的初心是让生活更简单,但我们过去往往需要花费更多的时间去教会Siri如何理解我们的问题。
希望在新版Siri正式推送后,能够真正成为如苹果营销主管菲尔·席勒所描述的那样——通过语音指令,就能帮助你搞定事情的智能助手。
可以说,iOS 18和ChatGPT的合体是一场众望所归的各取所需,也是拯救Siri的一步大棋,也正是因为Apple智能和ChatGPT的加入,才让你我手上的iPhone、iPad和Mac重获新生,说是史诗级更新,并不为过。
iOS被AI接管?没有大张旗鼓,却已深入你我的生活
在一些系统级应用上,iOS 18也有了一些新构思。
iOS 18上的邮件功能,可以通过设备分类来控制和管理传入的电子邮件,分类功能可以阻止用户的新消息,并且帮助个人旗下所有的账户都保持最新的消息状态,不错过任何一条重要信息。
其中,“主要类别”中的消息,可以使用户专注于最重要的事情,这个类别的信息主要来自于熟人朋友的电子邮件和时间上比较紧急的信息。
其余部分将被列为“新的类别”,例如收据和订单确认交易、新闻通讯更新、社交媒体通知以及市场营销和销售消息中的促销活动。
iOS 18的邮件还创建了一个新摘要视图,将用户从企业收到的所有相关电子邮件汇集在一起,使与这些相似信息的交互更加容易,我们可以在同一个界面获取所有的相关消息,查看和这些内容有关的内容。
苹果官方的地图App在iOS 18上,增加了全新的地形图。
地形图中有许多新的细节信息,其中包括详细的步道网络和远足路线,这些新的地图信息可以保存在手机端离线访问。
用户还能使用连续的智能语音提示,以及创建独属于自己的徒步旅行路线,在没有网络的环境里,依然能够正常使用。
钱包App的更新则集中在了便利性上。
苹果在发布会上称,他们将推出一种快速而私密的方式来付款,称为“Tap to Cash”,无需共享电话号码或电子邮件地址就能面对面交钱。
用户只需将手机放在一起,就可以成功付款。
从发布会的演示视频看,这是一种快速私对私的转账方式。转账时的动画交互很有质感,非常像iOS 17上隔空投送的动效。
另外,苹果称目前正在增加两种新的在线苹果支付方式,让世界各地的客户能够从银行和卡提供商兑换奖品。
比如活动门票功能有了新功能和新设计,根据门票信息,用户将能在手机上看到和演出场地有关的各种信息,通过智能推荐,和演出相关的App也会出现在建议当中。
前段时间的网红应用“手记”也有更新,现在的手记可以记录用户的每日心情,并且通过显示个人的日历、安排等统计数据的见解视图,帮助用户来跟踪相关的事宜。
“游戏模式”的更新能为游戏爱好者提升不少游玩体验,按照苹果的说法,那就是带来“身临其境”的感受。
现在开启游戏模式后,设备将最大限度地减少后台活动,从而最大限度地提高游戏帧率,并改善AirPods和游戏控制器的响应速度。
苹果去年已经在macOS Sonoma中添加了类似的游戏模式,现在的iOS上引入了这项功能,其实是通过游玩体验的提升,让更多的玩家加入到Apple Gaming的生态中。
拍照和相册
对许多人而言,相册都是保存回忆的最佳载体。
iOS 18为我们提供了全新的相册界面,我们可以直接滑动选择照片的日期,快速缩小范围,甚至还能智能过滤掉截图,找到我们想要的照片,让不断增加的图库保持整齐有序。
在相册App中,还能自定义人物群组,并根据旅行信息分类,支持动态海报等形式展示照片,让我们一键回忆拍照的时刻,还可以一次性分享整个“精选集”。
iMessages的AI更新
最近几年几乎每一代iOS更新都会带来iMessage的新功能,iOS 18预计也不会例外。
除了AI建议回复,iMessage还将能支持对单字添加动画效果,之前iMessage已经能够实现对整个对话气泡添加像全屏、镭射光、五彩纸屑等等动画效果,用户现在能够利用新功能创建自己的表情符号。
另外,新的消息功能将提供由苹果设备上的Ajax LLM生成的建议回复,相当于你有了个智能助理,帮你处理琐事。
Safari
Safari虽然在推出之初一直被诟病,但在后续更新中渐渐变得越来越好用。
而AI的加入为Safari增加了一项名为Reader功能,能够进行内容总结,帮助我们更快地掌握文章的核心内容,有点“量子速读”内味儿了。
此外,在地址栏中还整合了页面工具,用户只需一键点击,即可直接收听博客,这类似于一些便捷的插件功能。
应用锁
隐私是当下生活中最重要的问题,应用锁是iOS 18针对隐私保护的另一项重要更新。
现在iOS 18支持上锁或隐藏某个App,用户在解锁时必须使用Face ID密码等方式,从而进一步增强隐私保护能力。
以往App会请求查找你通讯录上的权限,但iOS 18将这一权限的更多控制权归还给用户。
用户界面和控制中心
除了AI功能的升级外,iOS 18还将在用户界面和交互体验上做出重大改进。
iOS 18可以自由排列App图标,不受到当前的固定网格布局限制。
同时iOS18也进一步开放自定义App风格,新增暗色模式,并支持更改应用程序图标的颜色。
例如,iOS 18可以推荐合适的色调来搭配墙纸,帮助用户打造想要的外观,让主屏幕真正属于用户。
iOS 18不仅整体界面给人焕然一新的感觉,还重新设置了控制中心。
除了控制中心采用多页面布局,第三方开发者可以为其提供更多富有创意的组件。
控制中心增加了更多的控制选项,并且用户可以自由调整选项的布局、大小,让分门别类的布局也更有条理。
此外,用户还可以自定义显示在锁屏界面的应用,比如相机和手电筒可以更换其他控制功能。
iPadOS
和 iOS 18 一样,iPadOS 18 同样支持自定义屏幕,支持用户任意设置应用程序图标。而在控制中心里,iPadOS 18 还支持创建多个列表和视图,想怎么排就怎么排。
问世 14 年后,iPad 终于迎来了内置计算器,搭配上 Apple Pencil,手写算数,主打的就是一气呵成。
与此同时,苹果还推出了智能手写体(Smart Script),它不仅能够通过机器学习让你的字迹看起来更美观,同时还能模仿你的手写风格,甚至自动拼写检查。
macOS
最新发布的 macOS 15 名为 Sequoia(红杉),Apple 软件工程高级副总裁 Craig Federighi 这样描述:强大的 Apple 芯片与易用的 macOS 相结合,令 Mac 设备空前强大。
但不少观众在看到新功能后,却一致想起了遥远的友商,认为同步镜像与分屏与其他厂商的功能非常相似。
全新 iPhone mirroring 功能支持将 iPhone 屏幕无线镜像到 Mac 上,我们可以直接从 Mac 上完全控制 iPhone。不仅壁纸和图标会同步显示,我们还可以直接在 Mac 主屏幕上滑动切换页面、开启和浏览所有应用。
当然,键盘、触控板也都能一起互动,甚至 iPhone 的音频也能在 Mac 上播放,文件拖拽传送也非常符合直觉。
另一个非常实用的功能是智能多窗口管理功能,我们只需将窗口拖至屏幕边缘,窗口便会自动吸附并调整大小,简化了工作空间的布局与管理。
对于游戏玩家而言,Mac 常常是第一个要排除的选项,而为了告别“不能玩游戏”的称号,苹果也付出了很多努力。
此次又将其游戏开发套件 Game Porting Toolkit 将更新至 2.0 版本,在 Xcode 的支持下,游戏的一直过程将会进一步简化,相信不久的将来我们可以在 Mac 上看到更多游戏。
不过事实上,正如我们前面提到的,苹果的优势在于打通用户的诸多不同应用数据,并根据需要对数据组合。这种打通应用的智能化系统优势,在生活场景中体现为“便捷”,在工作场景中就是“高效”。这或许才是 Apple 智能比 AI 更“聪明”的真正含义。
Apple Vision Pro
苹果今天在发布会上宣布,Vision Pro 将面向新的国家和地区发售,其中中国大陆、香港、日本和新加坡的用户可于 6 月 14 日(星期五)上午 9 点(北京时间)起对 Apple Vision Pro 进行预购,6 月 28 日(星期五)起正式发售。起售价为 ¥29,999,提供 256GB、512GB 和 1TB 存储容量选项。跟着国行一同发布的,还有 visionOS 2,在一代系统的基础上,把空间计算的概念玩得更彻底。
一是 Vision Pro 可以用一张普通的 2D 照片,生成具有纵深感的空间图片,并且能和线上的亲朋好友一同分享。
二是空间手势更加全面,抬手并双指互点,就能打开主屏幕;翻转手掌并双指互点,就能打开控制中心。
另外,Mac 的虚拟屏也做了优化升级,现在投影在 Vision Pro 中的屏幕,不仅提高了分辨率,更可以选择三种尺寸,甚至能变成一个环绕超宽屏,相当于两台 4K 显示器并排摆放。
更多的应用场景,更全面的“空间功能”,虽然价格依旧离我们很远,但 Vision Pro 已经成功把“空间计算”的概念,带到了我们的生活里。
不过,不少熬夜观看WWDC24的人会有一种“分裂感”,一方面是iOS18等系统的更新属于缝缝补补,锦上添花,并无真正的Amazing更新,一些“甜点级”的更新也只是让人会心一笑。
时至今日,手机系统的问题已经不是功能太少,而是功能太多,系统更新几乎进入了死胡同,也只有苹果号召力强,大家还会关心iOS更新了什么,隔壁Android的更新除了酷安用户之外,已经几乎无人在意了。
此时,AI就成了人们想象中身披金甲脚踏祥云的盖世大英雄,大家的意中系统,应该是无所不能,多智近妖,书画双绝的天顶星技术载体,但苹果还是把我们拉回现实:醒醒,2024年最好的AI设备,依旧是手机,2024年最好的AI手机,将会是iPhone。
本文来自微信公众号:APPSO (ID:appsolution),作者:在 Apple Park 的 APPSO