图1:WWDC 2024下周开幕
北京时间6月6日,美国太平洋时间6月10日10点(北京时间6月11日凌晨1点),苹果公司2024年全球开发者大会(WWDC)将拉开帷幕,此次大会将成为苹果历史上的一个关键时刻。尽管苹果在去年WWDC上发布了Vision Pro头戴设备 ,但不要指望硬件会成为今年WWDC的主要看点。
WWDC面向的是开发者,今年的重中之重将是iOS 18.苹果将展示如何将人工智能(AI)技术整合到其设备和软件中,其中包括与OpenAI达成的历史性合作伙伴关系。随着这场大会的临近,各种关于iOS 18 AI应用和功能的传言已经在网上出现。
根据科技网站The Information报道,苹果将使用其Ajax大语言模型驱动部分AI新功能。该公司计划采用虚拟黑盒技术处理AI应用上的数据,就连其员工也无法接触到这些数据,这有助于苹果兑现向用户做出的数据隐私承诺。
以下是iOS 18中各项应用和服务在AI方面的升级,以及其他改进与变化:
Siri:AI驱动未来
·苹果的数字助手准备进行一次AI大升级。Siri将基于苹果自己的大语言模型,允许Siri控制应用程序内部的单独功能,无需开发者或用户进行任何必要的设置,就像App intenents框架或Siri捷径一样。相反,用户可以要求Siri做一些事情,比如删除电子邮件或编辑照片。
图2:Siri将迎来大升级
·一些升级后的Siri AI功能要到明年才能准备就绪。例如,Siri处理多步骤任务功能或许会推迟。
·更高级版本的Siri也将登陆Apple Watch,供用户随时随地使用。有报道称,用户可以使用手表上的Siri在其他设备上播放音乐。
·Siri将能够接收听起来更自然的声音。
·Siri将能够概述通知,包括人员、公司、日历事件、地点、日期等。
照片:换新颜
·一个新的界面即将到来。
·用户将可以使用AI修饰照片,也许会让苹果在这个领域挑战谷歌相册。
·例如,“清除”功能可以让用户使用生成式AI技术从照片中删除物体,类似于谷歌的魔力橡皮擦(Magic Eraser)。
图3:苹果照片的AI清除功能
·有报道指出,苹果开发了一款名为“生成游乐场”(Generative Playground)的内部应用程序,该应用使用生成式AI来创建和编辑图像。目前还不清楚这一功能将如何呈现给终端用户,尽管信息(iMessage)已被发现以应用扩展的形式整合了它。
Safari:整合更多AI
Safari将通过新的智能搜索功能提供网页和新闻文章的AI摘要。
备忘录:融合AI
·用户将能够要求AI提取备忘录摘要。
·生成式AI还将帮助转录备忘录中的音频。
·应用内录音将支持音频转录和AI摘要。
·数学笔记(Math Notes)将通过AI识别数学方程的文本,帮助用户创建图形和解决方程。
·用户还可以选择在输入时自动完成数学方程。
·苹果内部有一个“智力计划”(Project Greymatter),它是一组AI工具的代号,这些工具将被集成到Safari、照片和备忘录等核心产品中。
·语音备忘录的实时转录也即将到来。
信息:AI大变脸
·将支持生成式AI表情符号,让用户可以利用AI技术创建自己的表情符号。
·AI可以概述未读短信。
·总体上更深入地集成Siri。
·“点按回应”(Tapbacks)将拥有新的图标。
·除了消息本身的效果外,还将支持单个单词的消息效果。
·短信将提供由苹果设备上的Ajax大模型生成的建议回复,使短信回复更容易。
·信息有望在今年支持富媒体通信(RCS)。当用户通过信息与Android用户发短信时,它将带来已读回执、正在输入提示以及高质量的视频和图像。
日历
用户在回复短信时,苹果的大语言模型将能够与日历应用通信,查询安排。
邮件
邮件也将获得由Ajax生成的建议回复内容。
设置
设置将改进界面和更新,使得组织更有序,搜索功能更强,整体更条理。
控制中心
·一个新的音乐小组件即将推出。
·HomeKit将得到改进,以便更好地集成智能家居。
通知
·AI将通过摘要的形式提供错过的通知。
·苹果正在开发一种叫做“增强”通知的功能。
聚焦搜索
聚焦搜索将变得更快,搜索更可靠。
主屏
·iOS 18将让你随心所欲地放置应用图标,而不用让它们与网格对齐。
·用户还可以改变应用图标的颜色,这可能是苹果对谷歌多彩设计语言“Material You”的回应。
地图
在iOS 18中,地图将支持定制化路线创建,用户可以设计自己的旅行路线。
音乐
Apple Music可能会推出自己的AI自动生成播放列表,与流媒体音乐服务Spotify展开竞争。
更多改进
其他计划更新的应用包括Freeform、Xcode以及苹果的生产力应用,例如Keynote和Pages,它们可能会获得生成式AI功能。