揭秘iOS 18 Project Greymatter:苹果大招背后的科技力量

发表时间: 2024-06-03 16:04

【CNMO科技】苹果即将推出的操作系统将融入Project Greymatter,为用户带来一系列AI驱动的功能升级。

据内部消息,苹果正紧锣密鼓地在WWDC年度大会前测试一系列人工智能新特性,项目内部代号为“Greymatter”。

在最新的预览版系统中,一项名为“Greymatter Catch Up”的通知汇总功能正在开发中,它与Siri深度整合。用户可通过Siri获取并听取近期通知的概括,使信息管理更为便捷。

Siri将迎来显著升级,包括引入智能回应框架及在苹果设备上运行的LLM技术,以此提升响应生成能力。未来,Siri生成回复和摘要时,能综合考虑人名、公司信息、日历事件、地点、时间等多重因素,使互动更加贴合实际情境。

此前,有外媒报道了Safari 18、Ajax LLM及语音备忘录应用的更新计划,其中提及苹果将利用AI技术在原生应用中加入文本总结与转录功能。最新消息显示,这些智能化功能也将被整合进Siri中。

这意味着Siri将具备直接在设备上回应复杂查询、生成文章摘要或转录音频的能力,就如同升级后的备忘录或语音备忘录应用那样,部分处理依赖于Ajax LLM或云端运算以应对更复杂的任务。

此外,苹果正努力优化Siri的声音表现,使之更加自然流畅,并改进文本转语音功能,力求提供更优质的用户体验。

Siri还将拓展跨设备的媒体与电视控制能力,比如用户将来有望通过苹果手表上的Siri指令,在其他设备上启动音乐播放,尽管这一功能预计要到2024年底才会上线。

苹果决心将人工智能全面渗透到核心系统应用中,根据不同场景和需求加以优化。特别是在照片编辑方面,一系列改进即将到来。

AI照片编辑

iOS 18预计将为照片等应用增添基于AI的照片编辑选项,让用户享受智能编辑的乐趣。苹果内部新研发了一项清理功能,借助生成式人工智能技术,用户能轻松移除照片中的不必要元素。

与Project Greymatter紧密相连的,还有一个内部应用“创意工坊”(Generative Playground),这个应用利用苹果的生成式AI技术进行图像的创作与编辑,并且已经通过专属的iMessage扩展形式整合,方便分享。

在苹果的内部测试环节中,通过AI生成的图像可以直接通过iMessage传递。种种迹象表明,苹果有意将这类创新功能逐步开放给广大用户使用。

还有报道预测用户将能利用AI创造个性化的表情符号,而图像生成技术的潜力远不止于此。

另有知情者透露,苹果Notes的预览版本中也隐藏了生成工具的线索,但目前我们无法确定这项工具是用来生成文本还是图像——类似于“创意工坊”那样的应用功能。

新版Notes笔记

苹果正为自家的Notes应用筹备一场重大升级,这次更新将在iOS 18和macOS 15上首次登场。新版Notes将带来一系列实操性增强,包括应用内的音频录制、语音转文字以及基于AI的语言模型摘要功能。

在iOS 18中,Notes应用让用户能够在笔记里直接录制音频,还能将其自动转换成文字,并生成内容摘要。这样一来,单一笔记就能囊括整场讲座或会议的录音、现场白板照片和相关文字笔记,信息一目了然。

这些新增功能让Notes应用变得异常强大,尤其会受到学生和职场人士的青睐。语音转文字及智能摘要的融入,也让苹果Notes在与Microsoft OneNote、Otter等竞品的比拼中更具竞争力。

除了在应用内集成录音、基于AI的语音转写和摘要这些显著提升外,苹果其实还在暗暗发力,研发更多新功能,以持续优化用户体验。

Notes应用将迎来新面孔——Math Notes,它不仅会支持标准数学符号的输入,还会无缝对接苹果新推出的GreyParrot计算器应用。关于这一数学笔记新特性的更多信息浮出水面。

苹果还计划借助“智能回复”功能,优化用户在信息、邮件和Siri中的输入体验。借助Ajax LLM技术,苹果设备将能自动生成基本的文本回复建议,让用户快速响应消息或邮件。

打得过谷歌吗?

人工智能如今已渗透到各类应用程序和设备中,而以OpenAI的ChatGPT和谷歌双子座为代表的人工智能产品更是显著增强了这一领域的热度。

据苹果内幕消息透露,尽管苹果致力于开发自身的人工智能软件以在竞争中占得先机,但其成果相较于谷歌Gemini Advanced而言,似乎略逊一筹。

在今年5月14日的谷歌I/O开发者大会中,谷歌展示了一项趣味十足的人工智能应用实例:用户可通过视频提问,随即获得人工智能生成的反馈或建议。现场演示中,当面对一台故障的留声机时,谷歌的人工智能不仅能识别出其型号,还精准指出问题可能在于留声机未能平衡导致无法正常工作。

此外,谷歌还推出了Google Veo,这是一款能够利用人工智能技术生成视频的软件,与之相呼应的是OpenAI的视频生成模型Sora。

反观苹果,其Project Greymatter和Ajax LLM项目目前尚不具备视频生成或处理能力,这意味着在面对涉及消费产品的复杂视频问题时,苹果的软件难以提供帮助。这或许正是苹果意图与谷歌、OpenAI等企业建立合作关系,争取授权协议,以期为用户提供更全面功能的原因所在。

相比那些需要专门硬件支持的实体AI产品,比如Humane AI Pin或Rabbit R1,苹果的人工智能项目展现出明显优势,即能够在用户现有的设备上直接运行,无需额外购置专用AI设备即可享受人工智能带来的便利。

值得一提的是,Humane AI Pin和Rabbit R1常被认为产品成熟度不足,尤其是Rabbit R1,实质上仅是一款定制版的Android应用程序。

随着iOS 18和macOS 15的到来,苹果预计将于6月10日的年度全球开发者大会(WWDC)上揭晓其人工智能相关的新进展,同时,“日历”“自由格式”及“系统设置”等应用也将迎来更新。