1. Apple Intelligence for iPhone, iPad, and Mac (www.apple.com)
Apple Intelligence:为iPhone、iPad和Mac打造的个人智能系统
核心概述
苹果公司于2024年6月10日推出了Apple Intelligence,这是一个深度集成于iOS 18、iPadOS 18和macOS Sequoia中的个人智能系统。它将强大的生成式模型与用户的个人情境相结合,旨在提供高度相关且实用的智能功能。该系统充分利用Apple芯片的能力,在保护用户隐私的前提下,实现语言与图像的理解与创建、跨应用操作,并简化日常任务。
主要功能与特性
1. 语言理解与创建
- 系统级写作工具:集成于邮件、备忘录、Pages及第三方应用中,提供改写、校对和总结功能,帮助用户优化文本。
- 邮件管理:
- 优先邮件:在收件箱顶部显示最紧急的邮件。
- 邮件摘要:无需打开邮件即可预览关键内容,长邮件串可快速查看要点。
- 智能回复:提供回复建议,并能识别邮件中的问题以确保完整回复。
- 通知管理:
- 优先通知:将最重要的通知置顶。
- 通知摘要:在锁屏界面展示长通知或堆叠通知的关键信息。
- 减少干扰专注模式:仅显示可能需要立即关注的通知。
- 音频处理:在备忘录和电话应用中,可录制、转录和总结音频。通话录音时会自动通知参与者,并在通话结束后生成摘要。
2. 图像创建与表达
- Image Playground:
- 允许用户在数秒内生成有趣图像,支持动画、插图和素描三种风格。
- 深度集成于信息等应用,并拥有独立应用。所有图像均在设备端生成,保障隐私。
- 用户可选择主题、服饰等概念,或输入描述、选择个人照片中的对象来创作图像。
- 在信息中,可基于对话上下文提供个性化图像创作建议。
- Genmoji:
- 用户可通过文字描述创建原创的个性化表情符号。
- 可基于照片为亲友创建专属的Genmoji。
- 可像普通表情一样在信息中内联使用,或作为贴纸、点回反应。
3. 照片功能增强
- 智能搜索:支持使用自然语言(例如“Maya穿着扎染衬衫玩滑板”)搜索照片和视频,并能定位视频中的特定片段。
- 清理工具:可识别并移除照片背景中分散注意力的物体,且不会意外改变主体。
- 回忆影片:用户只需输入文字描述,Apple Intelligence即可根据描述选取最佳照片和视频,构建故事情节,并将其剪辑成具有叙事弧线的影片,还会提供Apple Music的歌曲推荐。
4. Siri的革新
- 更深度的集成:具备更强的语言理解能力,更加自然、语境相关和个性化。能理解用户未说完的话,并在多次请求间保持上下文。
- 文本输入:用户现在可以打字与Siri交互,并能在语音和文本输入间自由切换。
- 设备支持与执行能力:
- 能够解答数千个关于如何在设备上操作的问题。
- 逐渐具备屏幕感知能力,可理解和处理屏幕上的内容(例如,将信息中的地址添加到联系人卡片)。
- 能够在Apple及第三方应用中执行数百种新操作(例如“把周六烧烤的照片发给Malia”)。
- 可基于设备端个人信息提供个性化智能(例如“播放Jamie推荐的那个播客”、“妈妈的航班几点到”)。
隐私与安全标准
- 核心原则:许多驱动Apple Intelligence的模型完全在设备端运行。
- 私有云计算:对于需要更多计算资源的复杂请求,通过私有云计算将设备的隐私和安全性扩展到云端。该技术运行在基于Apple芯片的专用服务器上,确保用户数据永不被保留或暴露。
- 透明度与验证:独立专家可以检查服务器上运行的代码,以验证隐私保护。私有云计算会以加密方式确保设备仅连接至软件已公开接受审查的服务器。
ChatGPT集成
- Apple将ChatGPT集成到iOS 18、iPadOS 18和macOS Sequoia的体验中。
- Siri集成:在用户授权后,Siri可调用ChatGPT的专业知识来回答问题,并直接呈现答案。
- 写作工具集成:ChatGPT可用于系统级写作工具中的创作功能,帮助用户生成内容。用户还可以使用ChatGPT的图像工具来生成不同风格的图像以配合写作。
- 隐私保护:用户使用ChatGPT时,其IP地址会被隐藏,OpenAI不会存储请求。
可用性
- 价格:对用户免费。
- 推出时间:将于2024年秋季以测试版形式随iOS 18、iPadOS 18和macOS Sequoia推出,初始仅支持美式英语。
- 支持设备:iPhone 15 Pro、iPhone 15 Pro Max,以及搭载M1或更新芯片的iPad和Mac。需将Siri和设备语言设置为美式英语。
- 后续计划:部分功能、软件平台和更多语言将在未来一年内陆续推出。