酷游九州-官网首页

酷游九州自成立以来遵循的理念:“唯有创新才能领导业界,唯有服务才能永续经营”因为创新与服务一直是我们秉持的经营理念,酷游九州跨足事业起源于2003年,以当时的市场来说起步已晚,但是在领导的领导之下,坚持“唯有自创品牌”才能与业界竞争的构思下,我们开发出有别于最强的线上真人体验

酷游九州-官网首页

苹果:别争了,AI时代的新「iPhone」,还是iPhone

所有人都想知道,在看似即将到来的AI时代,谁会成为新的「iPhone」?

有很大可能,AI时代的「iPhone」,依旧是「iPhone」。

近日的一篇论文显示,苹果公司的研究人员已经解决了在内存有限的设备上部署大模型的关键难题——通过构建一个与闪存行为相协调的推理成本模型,指导两个关键领域的优化:减少从闪存传输的数据量,以及在更大、更连续的块中读取数据。

如此一来,大模型的适用性和可访问性被扩大,苹果将生成式AI集成到iOS 18的计划或许也将因此而加速进行。

过去一年里,自2022年11月ChatGPT首次向公众推出、全世界进入生成式人工智能热潮之中,苹果作为全球最大的科技公司,对过去十年中最重要的这项科技发展——生成式人工智能,很少正面提及。

图片

苹果公司|来源:medium

外界可能认为苹果在人工智能领域的布局相对落后,但一系列动向表明,其实苹果早已部署,只是没有正式公之于众。

2023年以来,苹果加快了自主人工智能技术的开发步伐。苹果不仅组建了专门的AI团队,开发出大型语言模型,还在产品端大力应用语音、图像等识别技术;更早之前,数十起并购已经为苹果奠定了技术基础,特别是语音助手Siri背后的技术积累,使其在语音交互等领域占据优势;而20亿活跃设备在手,苹果更是有望在AI消费应用领域成为头号玩家。

更明显的变化是从10月底的那场「Scary Fast(快得吓人)」发布会开始的。在这场发布会上,苹果发布了比M3快40%的M3 Pro和快250%的M3 Max芯片,并强调具有16核CPU、40核GPU的M3 Max将可以被用于研发AI软件。同时,苹果明确地将新款MacBook Pro定位为开发人员打造AI产品的工具。

支持AI的超强芯片的现身,为苹果AI的爆发,奠定了基础。但其实,苹果在AI上的积累,远比任何一家巨头更深。

01 苹果「做好准备」

每年10亿美元,这是传闻里苹果AI计划的投入数字。

据彭博社报道,2023年7月,苹果建立了自己的大型语言模型Ajax,并推出代号为「AppleGPT」的内部聊天机器人,用于测试Ajax的功能。关键的下一步是确定这项技术是否符合竞争标准,以及苹果将如何将其应用到现有产品中。

这10亿美元,都砸在了什么地方?

重金打造 AI 团队

苹果负责人工智能和软件工程的高级副总裁约翰·詹南德雷亚JohnGiannandrea和克雷格·费德里吉CraigFederighi负责牵头这些工作。在库克的团队中,他们被称为推动生成式人工智能项目的「执行发起人」。据悉,苹果服务高级副总裁埃迪·库伊EddyCue也参与其中,上述三人当前每年在该项目上可支出约10亿美元。

图片

John Giannandrea |图片来源:apple

核心团队之外的AI团队招聘和建设则从4月底就在进行了。当时的招聘页面上的十几条广告都在寻求生成式人工智能领域「热衷于构建非凡自主系统」的机器学习专家,这些职位空缺分布在圣地亚哥、旧金山湾区和西雅图的多个团队,包括集成系统体验团队、输入体验NLP团队、机器学习研发团队和技术开发团队。

其中一些职位特别关注视觉生成人工智能应用,应聘者将会从事「视觉生成建模,为计算摄影、图像和视频编辑、三维形状和运动重建以及头像生成等应用提供支持」。

9月有报道称,苹果在从谷歌和MetaPlatforms的人工智能队伍中积极招募人才。自从AXLearn于今年7月在GitHub上传以来,对其做出贡献的18人中,其中7人曾在谷歌或Meta工作过。

事实上,Giannandrea和神经网络领域专家RuomingPang都来自谷歌,Giannandrea在谷歌的8年时间里一直在开发先进的人工智能系统,Giannandrea和Pang说服了苹果使用谷歌云,特别是利用谷歌云的定制张量处理单元(TPU)芯片进行机器学习训练。为训练AjaxGPT而开发的机器学习框架AXLearn部分正是基于Pang的研究而进行的。

10月的招聘信息上,苹果对生成式人工智能的人才要求变得更加明确了,比如AppStore平台上的一个职位描述是这样的:「公司正在开发一个基于生成式人工智能的开发者体验平台,供内部使用,并协助我们的应用开发团队」,零售部门的另一个职位则提到苹果正在开发一个「对话式人工智能平台(语音和聊天)」,以便与客户互动,「长文本生成、摘要、问题解答」这样的构建文本生成技的任务也出现在了苹果的招聘信息里。

在苹果人工智能/机器学习领域的其他职位招聘中,一些职位强调基础模型的重要性,并将「类人对话代理」列为可能通过这些模型开发的应用示例。同时,苹果还发布了一些涉及Siri信息智能等部门的职位需求,该部门负责处理Siri和Spotlight搜索等产品的功能。此外,苹果还在积极寻找能够在本地设备上实现模型运算的人才。

加快研发底层技术

人才之外,技术的准备也在进行之中。据报道,Giannandrea正在监督新人工智能系统底层技术的开发,他的团队正在对Siri进行改造,以深入实施这一系统。更智能版本的Siri最快将于明年问世。

软件方面,Federighi正在领导开发新的人工智能iOS,iMessage和Siri在内的应用体验将被改善。据称苹果下达了一项指令,要求在iOS中加入在大语言模型上运行的功能,该模型将利用大量数据来提升人工智能能力,而新功能将改善Siri和信息应用处理问题以及自动完成句子的能力。

图片

苹果 iOS 17 系统 |图片来源:apple

软件工程团队还在考虑将生成式人工智能整合到Xcode等开发工具中,此举可以帮助应用程序开发人员更快地编写新的应用程序。这将使它与微软的GitHubCopilot等服务保持一致,后者在开发人员编写代码时能够为他们提供自动完成建议。

EddyCue则在推动为尽可能多的应用程序添加人工智能,包括AppleMusic、Pages、Keynote等,比如探索音乐自动生成播放列表,今年早些时候,Spotify与OpenAI合作推出了此类功能;研究如何利用生成式人工智能来帮助人们在Pages等应用中写作,或在Keynote中自动创建幻灯片(与微软已经推出的Word和PowerPoint应用程序类似)。此外,苹果也在为其AppleCare小组的内部客户服务应用测试生成式人工智能。

大模型上「iPhone」

不过到底要将生成式人工智能部署在设备端,还是基于云端设置,或者以介于两者的方式运行,此前似乎未有定论:设备上运行无疑速度更快,也有利于保护用户隐私,但通过云端部署,苹果的大语言模型可以实现更加复杂精细的运算。这两种方案各有利弊,苹果正在试图在本地计算和云端计算之间寻找出一个平衡点。

有报道称苹果将提供基于云的人工智能和设备上处理的人工智能的组合。但多位前苹果机器学习工程则师称,出于提高隐私和性能的考虑,苹果的领导层更倾向于在设备上运行软件,而不是在云服务器上。

高级副总裁Giannandrea开发苹果人工智能的基本原则之一正是尊重隐私。他曾在接受采访时说:「我理解数据中心的模型越大越准确,但最好是在靠近数据的地方运行模型,而不是把数据搬来搬去。」

不过这可能有很高的实现难度。有分析称,以AjaxGPT为例,它已经在超过2000亿个参数上进行了训练。参数反映了机器学习模型的规模和复杂程度;参数数量越多,表示复杂程度越高,需要的存储空间和计算能力也越大。一个参数超过2000亿的LLM可能无法合理地放在iPhone上。

但最新的消息表明,苹果可能已经做出了终端决策。近日,苹果发布的研究论文显示,其已经找到了在iPhone上运行大模型的方法,「构建一个与闪存行为相协调的推理成本模型,以指导两个关键领域的优化:减少从闪存传输的数据量,以及在更大、更连续的块中读取数据」。

该论文称,新技术使大模型在内存有限的设备上的运行速度提高了25倍,这意味着原本因为资源限制而无法在小型设备上运行的复杂AI模型,很快就能在iPhone和iPad等消费类移动设备上运行起来。

02 AI 头号买家:「花小钱办大事」

虽然外界感知到的苹果在生成式AI等前沿技术上的布局速度有所不及其他巨头,但苹果在AI领域也有自己的底气。

研究公司PitchBook在跟踪了苹果的多次人工智能收购后总结称,苹果着眼于收购各个领域的顶尖人才团队,这些团队可以将机器学习技术应用到特定的消费产品中。可以看出,苹果的收购战略主要集中在人工智能的消费应用上,但也包括机器学习部署和边缘设备的操作技术,以及对深度学习和更多横向技术的有限押注。

据统计,从2010年收购Siri开始,苹果在10年时间里收购多达30多起AI初创公司,包括Shazam、primeSense、Turi、LatticeData、Xnor.ai等五家公司的收购额都不超2亿美元。自2017年以来,苹果收购了21家人工智能初创公司,几乎是微软和Meta收购数量的两倍,可以称得上「AI头号买家」。2021年起,苹果收购AI公司的节奏看起来有所放缓,但依旧拿下了CuriousAI、AIMusic、WaveOne等初创AI公司。

图片

2010 年至今苹果在 AI 领域收购的不完全统计|极客公园

总体而言,苹果在AI领域的收购策略可以概括为「花小钱办大事」。苹果很少进行大额的并购,它的收购目标通常是那些技术可以与现有产品和服务实现紧密结合、有助于完善生态建设的初创企业。当苹果收购一家公司时,主要考量的往往是这家公司的技术如何才能更好地融入到苹果正在开发的项目当中。

整体上看,苹果收购这些企业的交易金额普遍较低,且后者的技术方向主要覆盖语音识别与会话等方向,其次是与面部识别、图像识别相关,在落地应用上,这些被并购的技术则为改进Siri语音助手、支持FaceID人脸识别、优化图片应用、增强音乐服务功能、提高天气预报精度等多个苹果现有产品和服务提供了支持。

苹果的许多收购看起来都是为了改进Siri,可见Siri在苹果系统中的重要地位。比如收购Inductiv是为了改善Siri的数据,收购Voysis是为了提高Siri对自然语言的理解,收购PullString则是为了让iOS开发人员更容易在应用中使用Siri功能。

还有一些收购则是针对未来产品的,比如苹果在2019年收购自动驾驶初创公司Drive.ai,可能是为了推动其自动驾驶汽车项目的发展。苹果并没有公开所有的收购信息,因此可能还有其他被苹果并购的人工智能公司未被人所知。

03 AI早已融入苹果系统

数目众多的并购之外,苹果自身的AI发展可以追溯到很多年前。早到从1987年推出知识导航仪,到1990年启动语音识别项目,再到2011年推出Siri成为首个消费级语音助手,苹果其实在很早期就展现了对AI的探索,只是一直相对低调。

苹果历来不会率先推出新技术,尤其是未经消费者验证的技术。比如在MP3播放器被推出不久,市场前景已经有所验证,但苹果也没有立刻进入市场,而是在确定了iPod这种更优越的解决方案后才加入的。

手机领域也是一样,虽然其他公司在早期推出了智能手机,但苹果选择在确保能够提供卓越客户体验的前提下才在2007年开始进入市场。类似地,尽管平板电脑早在1989年就已问世,但这个产品类别一直未能在市场上取得成功,直到苹果推出了iPad。

苹果一直以来都以消费者使用体验为先,通常会等到技术成熟才正式商用,这一谨慎策略规避了初期技术的不稳定风险,也使苹果能更好地把握市场的机遇,推出更加成熟和超越的产品。

所以苹果对ChatGPT类似产品应该也是这个路线——在准备好之前,不会贸然推出。也就是,在保持神秘感的同时,苹果最终应该会以自己的方式推出成熟的AI产品。

事实上,在苹果的现有产品中,也已经有不少机器学习/AI应用:

图像处理

苹果通过运用机器学习技术,优化了iPhone摄像头拍摄的照片,包括用于减少图像噪点的深度融合以及iPhone15人像模式工具。

图片

iPhone 15 能检测到画面中是否有人,并自动捕捉丰富的深度信息|图片来源:apple

可视化查找——机器学习支持了iPhone检测照片内容的功能。

iPhone15升级后的相机可以通过机器学习来区分镜头中的人和动物。

数字人像:AppleVisionPro前置镜头扫描人脸信息的环节——就是苹果基于机器学习技术,为用户生成的「数字分身」。

语音处理

个人语音合成、实时语音转录:iPhone15支持个人语音,它允许用户合成类似自己的语音,以便在FaceTime和电话通话中发音他们输入的文字,还有实时语音邮件,对留言进行实时转录。

搜索引擎和建议系统

Spotlight搜索:Spotlight搜索和整个iOS操作系统的搜索都由人工智能提供支持。

Siri建议:iPhone提供建议时,例如发送生日祝福或将邮件中的事件添加到日历中,背后使用的正是机器学习算法。

输入法:基于设备端的机器学习,输入法可以根据用户每一次的键入自动改进模型,另外基于更为先进的单词预测Transformer语言模型,输入法可以更了解用户的语言习惯,大幅提高输入的准确性等。

自动更正:Apple的自动更正系统和单词建议选项由机器学习提供支持。

健康监测

心电图:AppleWatch上的心电图功能可查看心律数据,以确定使用者是否可能出现心房颤动。

碰撞检测和跌倒检测——通过机器学习功能,苹果设备可以根据各种传感器收集的信息判断使用者是否发生碰撞或跌倒。

(AppleWatchSeries9和Ultra2——将AI集成到双击功能中,以更轻松地执行任务,更亮的显示屏,更智能的Siri和先进的健康监测。)

另一个可能的应用则是在汽车——苹果的ProjectTitan(泰坦计划),一个自动驾驶汽车项目。虽然外界将该秘密项目称为AppleCar,但苹果是否真的会推出汽车目前还并不确定。

据报道,ProjectTitan里正在开发的自主系统需要一个大脑,这也是苹果人工智能的用武之地,为AppleVisionPro引入的许多技术在放大后也可能在汽车项目上发挥巨大作用。

对苹果的高级神经引擎而言,要让系统实时协调、检测物体、理解用户指令并同时产生反馈,是一项艰巨的任务。不过,2021年的一份报告里显示,苹果已经完成了这样一款芯片,并将开始测试。

接下来,苹果产品在AI的应用,应该会在图像处理、搜索推荐、环境感知等方面继续创新。然而,其生态系统存在一个可能的潜在缺陷,那就是苹果坚持对数据隐私和产品设计保持追求,这可能会限制它在生成式AI等前沿技术上的布局速度,正如大众现在感知中的「慢一步」一样。

但这些依旧掩盖不掉苹果在AI领域具有巨大的发展潜力,这主要基于以下三个因素:

一方面,苹果在全球拥有超过20亿运行iOS操作系统的设备,这为其未来发展AI应用奠定了庞大的用户基础。根据苹果财务长LucaMaestri(卢卡·马埃斯特里)透露,截至2023年2月,苹果的活跃设备装机量已经突破20亿大关,并在6月季度末达成了「在每个地区细分市场都创下了历史新高」的记录。

另一方面看,苹果的Siri语音助手每月处理的请求量达250亿次,反映了消费者对语音助手等AI工具的强烈需求。如果苹果未来能推出类似ChatGPT的产品,那么来自其消费者端的AI数据和互动规模将会很庞大。

以及不可忽视的是,苹果付费订阅用户数量在快速增长,已突破了10亿大关并保持两位数增长态势。在2023年8月的第三季度财报中,苹果CEO库克指出,苹果「在服务领域的收入创历史新高」,「付费订阅量超过10亿,并以两位数的速度增长」,这一态势为苹果通过AI类应用实现收入增长奠定了坚实基础。依托如此广阔的用户群体,苹果在消费级AI市场的增长空间广阔。

另外,有消息称,苹果正在大力投资人工智能服务器,并计划在2024年再建造数百台,为其即将到来的人工智能时代做准备。未来,在成为消费级AI应用的第一大平台上,苹果依旧很有潜力。