原创 关注AI的 机器之心
机器之心报道
机器之心编辑部
还有史诗级更新:iPhone 加通话录音,iPad 加计算器。
不止 Siri 或 iPhone,整个苹果,向前迈进了一大步。
Apple intelligence:完整 AI 体系
这些应用可以在设备端运行,超出设备端能力的部分也可以在云上运行。通过 Private Cloud Compute,苹果在 AI 领域设立了新的隐私标准,能够在设备端处理和基于服务器的大型模型之间灵活调整计算能力,这些服务器运行在专用的苹果芯片上。
库克表示,Apple Intelligence 是苹果创新的新篇章,将改变用户使用产品的方式。他强调,苹果独特的方法结合了生成式人工智能和用户的个人信息,能提供真正有用的智能服务。此外,Apple Intelligence 能够以完全私密和安全的方式访问信息,帮助用户完成对他们最重要的事情。这是苹果独有的 AI 体验。
脱胎换骨的 Siri
不出所料,今天苹果发布会的一大亮点在于与 OpenAI 的合作。
苹果宣布,Apple 正在将 ChatGPT 集成到 iOS 18、iPadOS 18 和 macOS Sequoia 内的体验中,使用户无需在工具之间跳转即可访问 ChatGPT,包括图像和文档理解功能。
至于上线时间,苹果表示 ChatGPT 将于今年晚些时候登陆 iOS 18、iPadOS 18 和 macOS Sequoia,由 GPT-4o 提供支持。用户无需创建帐户即可免费访问它,ChatGPT 订阅者可以连接他们的帐户并直接从这些体验中访问付费功能。
最后,Apple Intelligence 对用户完全免费,并将于今年秋季作为 iOS 18、iPadOS 18 和 macOS Sequoia 的一部分提供英语测试版。更广泛地功能、软件平台和其他语言将在明年推出。Apple Intelligence 将在 iPhone 15 Pro、iPhone 15 Pro Max 以及搭载 M1 及更高版本的 iPad 和 Mac 上提供。
也就是说想要用到这些大模型能力,你就要花钱买最新的苹果设备了。
新的语言理解和创造能力
Apple Intelligence 为用户解锁了提升写作能力和更有效沟通的新途径。
全新的系统级写作工具被内置于 iOS 18、iPadOS 18 和 macOS Sequoia 中,用户几乎可以在任何写作场合重写、校对和总结文本,包括邮件、备忘录、页面以及第三方应用程序。
利用重写功能,用户可以从多个版本中挑选,调整文风以适应不同的读者和场合。无论是为求职信增加说服力,还是为派对邀请函注入幽默与创意,重写功能都能帮助用户找到恰如其分的表达。
校对功能则深入检查语法、词汇和句式结构,并提供建议性的编辑意见及其解释,让用户轻松审查或快速采纳。例如,当用户在撰写邮件时,写作工具菜单会弹出,提供校对和重写的选项,用户可以根据自己的需要选择相应的功能。
Apple Intelligence 提供令人兴奋的图像生成功能,可以帮助用户以新的方式沟通和表达自己,这主要体现在新应用功能 Image Playground 上。借助 Image Playground,用户可以在几秒钟内创建有趣的图像,还能选择三种风格:动画、插图或素描。
从主题、服装、配饰和地点等类别的一系列概念中进行选择;
输入描述来定义图像;
从个人照片库中选择某人加入图像中;
Genmoji:将表情符号提升到一个全新水平
照片中新增功能,为用户提供了更多控制
Apple Intelligence 要想真正为用户提供帮助,就必须了解深层次的个人上下文,同时保护用户隐私。Apple Intelligence 的基石是在设备上(on-device)进行处理,许多模型完全在设备上运行。对于需要更多处理能力的更复杂请求,Private Cloud Compute 将苹果设备的隐私和安全性扩展到云端,以解锁更多的智能功能。
通过 Private Cloud Compute,Apple Intelligence 能够灵活扩展其计算能力,并利用基于服务器的更大模型来处理更复杂的请求。这些模型在由苹果芯片驱动的服务器上运行,为苹果提供了一个基础,确保数据永远不会被保留或暴露。
独立专家可以检查在苹果芯片服务器上运行的代码,以验证隐私保护措施。Private Cloud Compute 通过加密确保 iPhone、iPad 和 Mac 不会与服务器通信,除非其软件已被公开记录以供检查。带有 Private Cloud Compute 的 Apple Intelligence 为 AI 领域的隐私保护设立了新的标准,为用户提供了可信赖的智能服务。
Andrej Karpathy:苹果智能非常激动人心
苹果的 Apple Intelligence 吸引了全世界科技从业者的关注。OpenAI 创始成员 Andrej Karpathy 发帖总结说,他非常喜欢苹果发布的「苹果智能」。他个人观察到了以下几个主题:
多模态输入 / 输出。苹果启用了文本 / 音频 / 图像 / 视频读写功能。可以说,这些都是原生的人类 API。
Agentic。苹果允许操作系统和应用程序的所有部分通过「函数调用」进行互操作;内核进程 LLM 可根据用户查询安排和协调它们之间的工作。
无摩擦。苹果以一种高度流畅、快速、always on 和上下文的方式全面集成这些功能。无需四处复制粘贴信息、提示工程等。还对用户界面进行了相应调整。
主动性。苹果没有根据提示执行任务,而是预测提示、提出建议并主动执行任务。
分级授权。尽可能多地将智能移动到设备上(苹果芯片非常有帮助且适合),但允许将工作可选地派发到云端。
模块化。允许操作系统访问并支持整个不断增长的 LLM 生态系统(例如 ChatGPT 公告)。
隐私。
此次,苹果 macOS 系统也迎来了重大的版本更新,包括系统名称、新增一系列功能等。
虽然 Mac 上已能运行 iOS 应用,但直接操作手机界面显然更直观。这方面 Mac 可谓是跟上了安卓、鸿蒙的步伐。
macOS Sequoia 还添加了一个类似于 Windows 的新窗口排列工具,可以自动调整应用窗口大小以平铺并填满屏幕。当用户将窗口拖到屏幕边缘时,系统会自动建议将其放在桌面的哪个位置,从而让桌面井然有序。
可以看到,全新 macOS 系统加持下的 Mac 体验更加地轻松、便捷、高效。
违背祖训,给 iPad 装计算器
对于 iPad 用户来说,最大的进步莫过于终于有原生的计算器应用了。乔布斯曾经说过,把计算器装进 iPad 是「反直觉」的,所以十几年来这种全球最为流行的平板设备一直没有计算器 App。
现在生成式 AI 来了,苹果立马「违背了祖训」。
当然,这一切的前提是,你得有个 Apple Pencil。
One More Thing
「Apple intelligence」能不能让苹果在生成式 AI 的赛道上反超,或许还有待时间的检验。
参考链接:
https://www.apple.com/newsroom/2024/06/introducing-apple-intelligence-for-iphone-ipad-and-mac/
https://www.apple.com/newsroom/2024/06/macos-sequoia-takes-productivity-and-intelligence-on-mac-to-new-heights/
原标题:《苹果智能炸裂登场:直接GPT-4o加持,全家桶都上生成式AI,Siri脱胎换骨》