苹果AI升级大泄露 Siri将在iOS18重生 Apple重新定义AI

万众期待的苹果WWDC在即，有关AI的升级细节全泄露了！知名网站Apple Insider称收到了新功能的确切细节，并总结评价：Siri将在iOS18中重生。 从相机相册、日历备忘录到浏览器电子邮件……几乎系统中所有原生应用都将被AI全面武装。


不仅如此，彭博社爆料苹果将推出针对iPhone、iPad、Mac的全生态AI能力，定名为Apple Intelligence： 将自动选择运行本地AI或云端AI，苹果技术侧重于日常实用功能，把聊天机器人等花里胡哨的留给OpenAI。 有不少网友感叹：Apple Intelligence是最聪明的营销手法，库克直接把AI一词中原本的Artificial（人工的）劫持替换了。





此外，从苹果ML实验室公开的论文中也能看到新功能的影子，如“一句话修图”技术就有传言将在此次更新中落地。


惯例先上总结，具体细节，后面挑重点展开。 相机：拍特定模式的照片/视频，一句话就能设定倒计时、切换前后镜头 照片：编辑修图、整理相册，甚至还能根据关键词找出特定的人、宠物、风景…… 备忘录：录音转文字、语音总结大意、公式识别，学习笔记全能王驾到 语音备忘录：录音、转录、存档、整理文件夹，会议笔记更高效 提醒事项：新建购物清单、差事待办，还能加标签、整理归类 邮件：写邮件、存草稿、设置提醒，还能自动归类广告垃圾邮件 图书：导航到特定书籍、章节，一键翻页、切换主题 Safari：总结网页摘要、整理标签页 Keynote：一句话插入音频、视频、图片，自动编辑幻灯片


更智能的相机和相册 新版Siri将能够直接控制摄像头，用户可以通过Siri完成相机模式设置等操作，具体包括： 切换到视频录制模式 将相机打开到特定模式，如照片、肖像、视频、慢动作等 设置计时器 切换至前/后置摄像头 除了相机之外，Siri也将给相册应用带来显著功能增强，用户可以选择通过Siri编辑、移动和隐藏照片或相册。 Siri还能够通过Visual Look Up识别照片中的特定物体、风景或人物，这意味着用户可以要求查看某人或特定场景的照片。 用户还可以选择编辑照片、视频、屏幕截图等内容——所有这些都可以通过苹果的虚拟助手 Siri 进行。 在相册里，Siri将能够： 搜索并打开本地和网络中包含特定对象的照片 旋转、复制、移动、隐藏、收藏照片 创建、打开、重命名相册，或向其中添加照片 创造新的回忆、专辑 打开照片和视频进行编辑、对照片应用滤镜、增强照片 此外，苹果相册还将进行一些小的 UI 更改，加入新的AI编辑功能，还将推出Clean Up工具，支持从图像中移除特点对象。


△粉丝自制概念图，来源@oofus用Siri管理备忘录和录音 苹果在备忘录中设置的Siri增强功能将使得浏览、标记和移动笔记变得更加容易。 在备忘录中，搭载了Apple全新大模型支持的Siri将能够： 创建、重命名和删除注释文件夹 为笔记添加或删除标签，筛选、打开、创建和删除备忘录中的特定标签 在备忘录中打开特定帐户下的内容（例如 iCloud、Outlook 等） 打开、移动、删除或固定/取消固定特定笔记 在笔记视图和文件夹视图之间切换


△新版备忘录概念图，来源：Apple Insider 新版备忘录预计还将具有应用程序内录音、音频转录以及由大模型支持的摘要功能，这将允许用户将录音、摘要和转录与其他材料（例如文本或图像）一起存储在一张笔记中。 Math Notes是苹果为备忘录准备的另一项升级，它将集成全新GreyParrot计算器的集成，帮助用户将复杂的数学方程和图表嵌入到个人笔记。 同样在开发中的键盘数学预测功能，将允许苹果软件将数学表达式识别为文本输入的一部分，通过AI自动补全数学方程。 除了备忘录，语音备忘录（录音机）中也将有新功能上线。通过 Siri，用户将能够创建、暂停、删除和移动单个录音或录音文件夹。 借助语音备忘录应用程序，Siri 将可以： 搜索、打开个人语音备忘录/录音 创建或暂停新录音 创建、打开和删除语音备忘录中的文件夹 按名称、创建日期和音频内容删除特定录音


△新版语音备忘录概念图，来源：Apple Insider 新的功能将使用户能够更轻松地找到他们可能正在寻找的特定文件，因为Siri将能够按名称、日期或位置查找录音，预计还将接收应用程序内的音频转录。 处理邮件、做PPT，让办公更高效 除了备忘录，苹果的邮件应用也将迎来重大变革，同样将搭载AI功能，使其能够根据文本内容自动对电子邮件进行分类。 具体来说，邮件应用将能够将电子邮件分为商业、新闻、社交等类别， Siri将能够使用这些信息在应用内执行不同的操作。 例如识别带有促销代码的电子邮件或来自特定公司的电子邮件，并将其标记为垃圾邮件。 在邮件应用程序中，Siri将拥有的能力包括： 撰写、发送/取消发送电子邮件，或设置定时发送 将电子邮件另存为草稿，或删除草稿 将电子邮件标记为垃圾邮件，或设置不提醒、阻止、删除特定发件人/特定主题的邮件 回复电子邮件或其所有收件人，启用基于AI的智能回复 将电子邮件标记为“稍后阅读”并设定具体日期，或取消设定 取消订阅电子邮件，尤其是与营销相关的电子邮件 启用来自特定发件人或有关特定主题的电子邮件的通知设置 总结电子邮件内容，归档、移动、转发电子邮件 苹果的邮件应用程序还将搭载一项名为“智能回复”的功能，通过该功能，用户将能够发送人工智能生成的电子邮件回复。 在办公方面，不只是邮件，新版Keynote也将搭载AI相关功能——通过Siri，用户将能够轻松查看Keynote演示文稿，并自行进行更改。


通过虚拟助手，用户可以向Keynote中插入音频、图像和视频，使PPT的创建、修改、演示变得更加容易： 向特定幻灯片中添加图像、音视频、文本框或注释等内容 创建新PPT或新页面，显示具体幻灯片 播放和停止主题演示文稿 显示主题演讲的活动流，显示更改内容以及更改者 将网络视频从Safari添加到幻灯片 为特定幻灯片设置标题、要点 用Siri创建提醒列表 Siri 的提醒功能将帮助用户创建诸如家务、要阅读的书籍、学习用品、旅行安排等列表，还可以在特定提醒中添加或删除主题标签，并生成提醒概述。


△新版日历和提醒概念图，来源：Apple Insider 利用这一功能，企业用户可以创建他们需要会面的人的提醒，而学生可以列出新学年所需的用品清单。 据Apple Insider透露，提醒事项预计还将与苹果默认的日历应用程序集成，这意味着用户将能够直接从内置日历应用程序创建和编辑提醒，支持的操作包括： 创建新的提醒列表或其部分 从特定提醒中添加或删除主题标签 显示提醒列表/概述 Siri一键总结网页 随着Siri升级，Safari也被全面改进。 爆料称，Siri将引入新的智能浏览功能，该功能将增强搜索功能并提供文章摘要。 还有一项名为Web Eraser的功能，它是一个内容拦截器。不过这个功能引发了争议，英国新闻媒体协会和一些法国出版商都向苹果公司投诉了该功能。消息称该功能已经构建完善可用，但是在WWDC之前苹果可能会删除它避免争议。


其他 Siri还可以打开系统设置的不同区域，例如亮度设置、主屏幕和应用程序库设置，以及多任务处理和手势设置。系统设置应用程序预计也将在 iOS 18 和 macOS 15 中被重新布局。 同时Siri还能在“文件”应用中扫描文档、将特定文件移入垃圾箱。编辑通讯录中联系人的详细信息。 在放大镜功能里，Siri可以描述物体、识别视野中的人等，有点类似于Rabbit 1等产品的识别方式，同时利用苹果现有的框架和 Visual Lookup 等功能。 此外，Siri 还能够通过苹果内部的 Generative Playground 应用程序生成各种不同的图像，但目前尚不清楚最终用户是否可以使用此功能。 “灰质计划” 值得一提的是，一些Siri新功能被放入“灰质计划”（Project Greymatter）中，包括生成文章、电子邮件等，以及对消息、通知等摘要。 一个名为Greymatter Catch-Up的功能将为用户提供最新通知的回顾。 据了解，苹果的人工智能软件能够生成不同级别的摘要，范围从三个主题词一直到三个句子。 并且，Siri、Spotlight 和Mail都将通过苹果的人工智能软件获得先进的搜索功能和更好的上下文理解。创建回复时，Siri 将能够考虑不同的实体，例如人和公司、地点和日历事件。 据知情人士透露，生成式人工智能软件还将允许即时创建智能回复，该回复将在邮件、Siri和消息中提供。 最后爆料来源AppleInsider也强调，并非所有功能都会发布。 相关消息来自熟悉苹果操作系统预发布版本和测试环境的人士，可能并不反映最终发布版本。