刚刚,苹果将ChatGPT集成在iPhone 16,一夜重塑手机!

2024-09-10 12:24
摘要:苹果在今天凌晨1点举办的产品发布会上宣布,将最新开发的 “Apple Intelligence”集成在iPhone16、iPad 平板和Mac笔记本中,全面拥抱生成式AI。其中,Siri已经集成了OpenAI的ChatGPT(GPT-4o)功能,使其理解、生成..

苹果在今天凌晨1点举办的产品发布会上宣布,将最新开发的 “Apple Intelligence”集成在iPhone16、iPad 平板和Mac笔记本中,全面拥抱生成式AI。

其中,Siri已经集成了OpenAI的ChatGPT(GPT-4o)功能,使其理解、生成、执行能力更强,例如,你在计划一次旅行时,想要了解目的地的景点推荐、美食特色、文化等,Siri 可以通过 ChatGPT 获取丰富的信息更好的帮助你。

此外在图片、文档、应用等产品中也集成了大量Apple Intelligence功能。下面「AIGC开放社区」就为大家详细介绍一下本次发布会上,与生成式AI相关的主要内容。

Siri支持ChatGPT

本次Siri在iPhone16、iPad 、Mac中获得了重大升级,用户通过 ChatGPT、GPT-4o 提供的多模态语音推理功能,能轻松理解电子邮件、消息、照片、日历事件、文件等,并能轻松回答、执行与这些相关的问题。

例如,可以通过语音询问,上周三我去看的那部电影叫什么名字;在填写表格时说 “在此处添加我的护照号码”,Siri 都能快速帮你完成。

Siri的屏幕感知功能也得到了加强,可以识别屏幕上的内容并采取相关的行动。例如,当用户收到推荐新咖啡店的短信时,Siri可以理解上下文并提供步行到达咖啡店的预计时间。

Siri的多模态推理功能,现在能够更好地处理用户在说话时的犹豫和更改,即便用户在发出指令时改变主意,Siri也能够理解并执行正确的操作,这在以前却很难做到。

持续记忆对话上下文是Siri的另一个亮点,能够记住用户在近期请求中的对话内容,这样用户就可以更自然地继续对话,而不需要重复上下文。Siri还通过访问大量语言模型训练的苹果支持文档,扩展了其产品知识库,能够回答关于苹果产品特性和设置的数千个问题。

在视觉反馈方面,Siri现在在与用户对话时,手机屏幕边缘会显示优雅的发光效果,不仅能响应用户的声音,还允许用户在与Siri交流时继续滚动、打字或导航设备。此外,用户现在可以通过文本与Siri交流,Siri键盘提供预测文本功能,极大提升了Siri的使用体验。

Image Playground

Image Playground这个新应用为用户提供了更好的图像体验,轻松创建新图像、访问以前创建的图像、重新混合以前的图像,并使用喜欢的社交和通信应用与朋友和家人分享创作等。

例如,你可以根据主题、服装、配饰和地点等来生成图片,也可以根据照片库中人物的理解,合成一些匪夷所思有趣的图像。

苹果对照片功能中的“回忆”功能也进行了优化,现在,你通过自然语言就能搜索特定的照片,例如,帮我查找一下2019年10月的某一张照片。这对于那些拥有数千甚至上万张图片的用户来说非常有用。

也可以使用内置的AI功能,清除特定的区域而不会影响整个图像的质量。例如,你在风景区拍照时经常会出现其他人的身影,通过该功能就能轻松去除。

在邮件和信息中使用生成式AI

苹果在邮件和信息中集成了Apple Intelligence,帮助用户提升沟通效率节省大量时间。邮件应用引入了优先消息功能,它能够根据紧迫性自动将最重要的邮件置于收件箱的顶部,让用户能够立即注意到并处理最相关的消息。

预览摘要功能为用户提供了在打开邮件之前快速了解邮件内容的便捷方式,邮件预览不再只是显示邮件的前几行文字,而是提供了更全面的摘要信息。

对于长邮件,邮件应用提供了线程摘要功能,用户只需轻点一下,就可以看到整个邮件线程的详细摘要,使得理解长篇邮件或一系列相关邮件变得更加容易。智能回复功能基于邮件内容为用户提供快速回复的选项,这些选项能够添加细节,例如,回答邮件中提出的特定问题,使得回复邮件更加快捷和准确。

信息应用在预测栏中,可为用户提供了基于对话内容的生成回复选项。用户在回复消息时,可以迅速选择系统提供的、与上下文相关的回复建议。信息应用中的消息摘要预览功能,使得用户在对话列表中就能看到消息的简要摘要,而不必打开整个聊天。

同时引入了新的笔记转录摘要功能,可以从音频记录中智能创建关键点摘要,帮助用户无需完整听取录音就能快速了解内容。图像魔杖工具允许用户从笔记中选择绘图并将其转换为图像。

文本写作功能

在Apple Intelligence加持下,用户可以使用类似的ChatGPT来完成多种文档写作了。文本重写功能允许用户创建文本的多个版本,同时保持原有的语调。用户可以轻松地尝试不同的表达方式,选择最符合需求的版本。

该功能特别适合需要对文本进行微调的用户,无论是为了改进表达的清晰度还是为了适应不同的读者群体。

风格重写功能可以根据用户的需要,调整文本的风格,例如,将其改写成“专业”、“简洁”或“友好”的文本样式。这对于那些需要根据不同场景写作风格的用户来说非常有用,例如,将一篇随意的博文改写成一份正式的报告。

摘要功能则可以帮助用户将任意长文本内容并生成高质量的摘要。无论是文档、文章还是通信内容,这项功能都能帮助用户快速抓住要点,节省阅读和理解的时间。

目前,苹果的上述等功能将在下个月的iOS18.1、iPadOS18.1和 macOS Sequoia15.1系统中推出。未来,苹果会持续推出相关的生成式AI功能,重塑产品矩阵提供更好的AI体验。

更新于:3个月前