原文來源：極客公園

作者 | 連冉

編輯 |?靖宇

圖片來源：由無界 AI生成

所有人都想知道，在看似即將到來的 AI 時代,，誰會成為新的「iPhone」,？

有很大可能，AI 時代的「iPhone」,，依舊是「iPhone」,。

近日的一篇論文顯示，蘋果公司的研究人員已經(jīng)解決了在內(nèi)存有限的設(shè)備上部署大模型的關(guān)鍵難題——通過構(gòu)建一個與閃存行為相協(xié)調(diào)的推理成本模型,，指導(dǎo)兩個關(guān)鍵領(lǐng)域的優(yōu)化：減少從閃存?zhèn)鬏數(shù)臄?shù)據(jù)量,，以及在更大、更連續(xù)的塊中讀取數(shù)據(jù),。

如此一來,，大模型的適用性和可訪問性被擴大，蘋果將生成式 AI 集成到 iOS 18 的計劃或許也將因此而加速進行,。

過去一年里,，自 2022 年 11 月 ChatGPT 首次向公眾推出、全世界進入生成式人工智能熱潮之中,，蘋果作為全球最大的科技公司，對過去十年中最重要的這項科技發(fā)展——生成式人工智能,，很少正面提及,。

蘋果公司｜來源：medium

外界可能認為蘋果在人工智能領(lǐng)域的布局相對落后，但一系列動向表明,，其實蘋果早已部署,，只是沒有正式公之于眾。

2023 年以來,，蘋果加快了自主人工智能技術(shù)的開發(fā)步伐,。蘋果不僅組建了專門的 AI 團隊，開發(fā)出大型語言模型,，還在產(chǎn)品端大力應(yīng)用語音,、圖像等識別技術(shù)；更早之前,，數(shù)十起并購已經(jīng)為蘋果奠定了技術(shù)基礎(chǔ),，特別是語音助手 Siri 背后的技術(shù)積累，使其在語音交互等領(lǐng)域占據(jù)優(yōu)勢,；而 20 億活躍設(shè)備在手,，蘋果更是有望在 AI 消費應(yīng)用領(lǐng)域成為頭號玩家。

更明顯的變化是從 10 月底的那場「Scary Fast（快得嚇人）」發(fā)布會開始的,。在這場發(fā)布會上,，蘋果發(fā)布了比 M3 快 40% 的 M3 Pro 和快 250% 的 M3 Max 芯片，并強調(diào)具有 16 核 CPU,、40 核 GPU 的 Ｍ3 Max 將可以被用于研發(fā) AI 軟件,。同時，蘋果明確地將新款 MacBook Pro 定位為開發(fā)人員打造 AI 產(chǎn)品的工具,。

支持 AI 的超強芯片的現(xiàn)身,，為蘋果 AI 的爆發(fā)，奠定了基礎(chǔ),。但其實,，蘋果在 AI 上的積累，遠比任何一家巨頭更深,。

01 蘋果「做好準備」?

每年 10 億美元,，這是傳聞里蘋果 AI 計劃的投入數(shù)字。

據(jù)彭博社報道,，2023 年 7 月,，蘋果建立了自己的大型語言模型 Ajax，并推出代號為「Apple GPT」的內(nèi)部聊天機器人,，用于測試 Ajax 的功能,。關(guān)鍵的下一步是確定這項技術(shù)是否符合競爭標準，以及蘋果將如何將其應(yīng)用到現(xiàn)有產(chǎn)品中,。

這 10 億美元,，都砸在了什么地方？

重金打造?AI?團隊

蘋果負責(zé)人工智能和軟件工程的高級副總裁約翰·詹南德雷亞 John Giannandrea 和克雷格·費德里吉 Craig Federighi 負責(zé)牽頭這些工作,。在庫克的團隊中,，他們被稱為推動生成式人工智能項目的「執(zhí)行發(fā)起人」。據(jù)悉,，蘋果服務(wù)高級副總裁埃迪·庫伊 Eddy Cue 也參與其中,，上述三人當(dāng)前每年在該項目上可支出約 10 億美元。

John Giannandrea ｜圖片來源：apple

核心團隊之外的 AI 團隊招聘和建設(shè)則從 4 月底就在進行了,。當(dāng)時的招聘頁面上的十幾條廣告都在尋求生成式人工智能領(lǐng)域「熱衷于構(gòu)建非凡自主系統(tǒng)」的機器學(xué)習(xí)專家,，這些職位空缺分布在圣地亞哥、舊金山灣區(qū)和西雅圖的多個團隊,，包括集成系統(tǒng)體驗團隊,、輸入體驗 NLP 團隊、機器學(xué)習(xí)研發(fā)團隊和技術(shù)開發(fā)團隊,。

其中一些職位特別關(guān)注視覺生成人工智能應(yīng)用,，應(yīng)聘者將會從事「視覺生成建模，為計算攝影,、圖像和視頻編輯,、三維形狀和運動重建以及頭像生成等應(yīng)用提供支持」。

9 月有報道稱,，蘋果在從谷歌和 Meta Platforms 的人工智能隊伍中積極招募人才,。自從 AXLearn 于今年 7 月在 GitHub 上傳以來，對其做出貢獻的 18 人中,，其中 7 人曾在谷歌或 Meta 工作過,。

事實上，?Giannandrea 和神經(jīng)網(wǎng)絡(luò)領(lǐng)域?qū)＜?Ruoming Pang 都來自谷歌,，Giannandrea 在谷歌的 8 年時間里一直在開發(fā)先進的人工智能系統(tǒng),，Giannandrea 和 Pang 說服了蘋果使用谷歌云,，特別是利用谷歌云的定制張量處理單元（TPU）芯片進行機器學(xué)習(xí)訓(xùn)練。為訓(xùn)練 Ajax GPT 而開發(fā)的機器學(xué)習(xí)框架 AXLearn 部分正是基于 Pang 的研究而進行的,。

10 月的招聘信息上,，蘋果對生成式人工智能的人才要求變得更加明確了，比如 App Store 平臺上的一個職位描述是這樣的：「公司正在開發(fā)一個基于生成式人工智能的開發(fā)者體驗平臺,，供內(nèi)部使用,，并協(xié)助我們的應(yīng)用開發(fā)團隊」，零售部門的另一個職位則提到蘋果正在開發(fā)一個「對話式人工智能平臺（語音和聊天）」,，以便與客戶互動,，「長文本生成、摘要,、問題解答」這樣的構(gòu)建文本生成技的任務(wù)也出現(xiàn)在了蘋果的招聘信息里,。

在蘋果人工智能/機器學(xué)習(xí)領(lǐng)域的其他職位招聘中，一些職位強調(diào)基礎(chǔ)模型的重要性,，并將「類人對話代理」列為可能通過這些模型開發(fā)的應(yīng)用示例,。同時，蘋果還發(fā)布了一些涉及 Siri 信息智能等部門的職位需求,，該部門負責(zé)處理 Siri 和 Spotlight 搜索等產(chǎn)品的功能,。此外，蘋果還在積極尋找能夠在本地設(shè)備上實現(xiàn)模型運算的人才,。

加快研發(fā)底層技術(shù)

人才之外,，技術(shù)的準備也在進行之中。據(jù)報道,，Giannandrea 正在監(jiān)督新人工智能系統(tǒng)底層技術(shù)的開發(fā),，他的團隊正在對 Siri 進行改造，以深入實施這一系統(tǒng),。更智能版本的 Siri 最快將于明年問世,。

軟件方面，F(xiàn)ederighi 正在領(lǐng)導(dǎo)開發(fā)新的人工智能 iOS,，iMessage 和 Siri 在內(nèi)的應(yīng)用體驗將被改善,。據(jù)稱蘋果下達了一項指令，要求在 iOS 中加入在大語言模型上運行的功能,，該模型將利用大量數(shù)據(jù)來提升人工智能能力,，而新功能將改善 Siri 和信息應(yīng)用處理問題以及自動完成句子的能力。

蘋果 iOS 17 系統(tǒng) ｜圖片來源：apple

軟件工程團隊還在考慮將生成式人工智能整合到 Xcode 等開發(fā)工具中，此舉可以幫助應(yīng)用程序開發(fā)人員更快地編寫新的應(yīng)用程序,。這將使它與微軟的 GitHub Copilot 等服務(wù)保持一致,，后者在開發(fā)人員編寫代碼時能夠為他們提供自動完成建議。

Eddy Cue 則在推動為盡可能多的應(yīng)用程序添加人工智能,，包括 Apple Music,、Pages,、Keynote 等,，比如探索音樂自動生成播放列表，今年早些時候,，Spotify 與 OpenAI 合作推出了此類功能,；研究如何利用生成式人工智能來幫助人們在 Pages 等應(yīng)用中寫作，或在 Keynote 中自動創(chuàng)建幻燈片（與微軟已經(jīng)推出的 Word 和 PowerPoint 應(yīng)用程序類似）,。此外,，蘋果也在為其 AppleCare 小組的內(nèi)部客戶服務(wù)應(yīng)用測試生成式人工智能。

大模型上「iPhone」

不過到底要將生成式人工智能部署在設(shè)備端,，還是基于云端設(shè)置,，或者以介于兩者的方式運行，此前似乎未有定論：設(shè)備上運行無疑速度更快,，也有利于保護用戶隱私,，但通過云端部署，蘋果的大語言模型可以實現(xiàn)更加復(fù)雜精細的運算,。這兩種方案各有利弊,，蘋果正在試圖在本地計算和云端計算之間尋找出一個平衡點。

有報道稱蘋果將提供基于云的人工智能和設(shè)備上處理的人工智能的組合,。但多位前蘋果機器學(xué)習(xí)工程則師稱,，出于提高隱私和性能的考慮，蘋果的領(lǐng)導(dǎo)層更傾向于在設(shè)備上運行軟件,，而不是在云服務(wù)器上,。

高級副總裁 Giannandrea 開發(fā)蘋果人工智能的基本原則之一正是尊重隱私。他曾在接受采訪時說：「我理解數(shù)據(jù)中心的模型越大越準確,，但最好是在靠近數(shù)據(jù)的地方運行模型,，而不是把數(shù)據(jù)搬來搬去?！?/p>

不過這可能有很高的實現(xiàn)難度,。有分析稱，以 Ajax GPT 為例,，它已經(jīng)在超過 2000 億個參數(shù)上進行了訓(xùn)練,。參數(shù)反映了機器學(xué)習(xí)模型的規(guī)模和復(fù)雜程度；參數(shù)數(shù)量越多，表示復(fù)雜程度越高,，需要的存儲空間和計算能力也越大,。一個參數(shù)超過 2000 億的 LLM 可能無法合理地放在 iPhone 上。

但最新的消息表明,，蘋果可能已經(jīng)做出了終端決策,。近日，蘋果發(fā)布的研究論文顯示,，其已經(jīng)找到了在 iPhone 上運行大模型的方法,，「構(gòu)建一個與閃存行為相協(xié)調(diào)的推理成本模型，以指導(dǎo)兩個關(guān)鍵領(lǐng)域的優(yōu)化：減少從閃存?zhèn)鬏數(shù)臄?shù)據(jù)量,，以及在更大,、更連續(xù)的塊中讀取數(shù)據(jù)」。

該論文稱,，新技術(shù)使大模型在內(nèi)存有限的設(shè)備上的運行速度提高了 25 倍,，這意味著原本因為資源限制而無法在小型設(shè)備上運行的復(fù)雜?AI??模型，很快就能在 iPhone 和 iPad 等消費類移動設(shè)備上運行起來,。

02 AI 頭號買家：「花小錢辦大事」?

雖然外界感知到的蘋果在生成式 AI 等前沿技術(shù)上的布局速度有所不及其他巨頭,，但蘋果在 AI 領(lǐng)域也有自己的底氣。

研究公司 PitchBook 在跟蹤了蘋果的多次人工智能收購后總結(jié)稱,，蘋果著眼于收購各個領(lǐng)域的頂尖人才團隊,，這些團隊可以將機器學(xué)習(xí)技術(shù)應(yīng)用到特定的消費產(chǎn)品中?？梢钥闯?，蘋果的收購戰(zhàn)略主要集中在人工智能的消費應(yīng)用上，但也包括機器學(xué)習(xí)部署和邊緣設(shè)備的操作技術(shù),，以及對深度學(xué)習(xí)和更多橫向技術(shù)的有限押注,。

據(jù)統(tǒng)計，從 2010 年收購 Siri 開始,，蘋果在 10 年時間里收購多達 30 多起 AI 初創(chuàng)公司,，包括 Shazam、primeSense,、Turi,、Lattice Data、Xnor.ai 等五家公司的收購額都不超 2 億美元,。自 2017 年以來,，蘋果收購了 21 家人工智能初創(chuàng)公司，幾乎是微軟和 Meta 收購數(shù)量的兩倍,，可以稱得上「AI 頭號買家」,。2021 年起，蘋果收購 AI 公司的節(jié)奏看起來有所放緩，但依舊拿下了Curious AI,、 AI Music,、WaveOne 等初創(chuàng) AI 公司。

2010 年至今蘋果在 AI 領(lǐng)域收購的不完全統(tǒng)計｜極客公園

總體而言,，蘋果在 AI 領(lǐng)域的收購策略可以概括為「花小錢辦大事」,。蘋果很少進行大額的并購，它的收購目標通常是那些技術(shù)可以與現(xiàn)有產(chǎn)品和服務(wù)實現(xiàn)緊密結(jié)合,、有助于完善生態(tài)建設(shè)的初創(chuàng)企業(yè),。當(dāng)蘋果收購一家公司時，主要考量的往往是這家公司的技術(shù)如何才能更好地融入到蘋果正在開發(fā)的項目當(dāng)中,。

整體上看，蘋果收購這些企業(yè)的交易金額普遍較低,，且后者的技術(shù)方向主要覆蓋語音識別與會話等方向,，其次是與面部識別、圖像識別相關(guān),，在落地應(yīng)用上,，這些被并購的技術(shù)則為改進 Siri 語音助手、支持 Face ID 人臉識別,、優(yōu)化圖片應(yīng)用,、增強音樂服務(wù)功能、提高天氣預(yù)報精度等多個蘋果現(xiàn)有產(chǎn)品和服務(wù)提供了支持,。

蘋果的許多收購看起來都是為了改進 Siri,，可見 Siri 在蘋果系統(tǒng)中的重要地位。比如收購 Inductiv 是為了改善 Siri 的數(shù)據(jù),，收購 Voysis 是為了提高 Siri 對自然語言的理解,，收購 PullString 則是為了讓 iOS 開發(fā)人員更容易在應(yīng)用中使用 Siri 功能。

還有一些收購則是針對未來產(chǎn)品的,，比如蘋果在 2019 年收購自動駕駛初創(chuàng)公司 Drive.ai,，可能是為了推動其自動駕駛汽車項目的發(fā)展。蘋果并沒有公開所有的收購信息,，因此可能還有其他被蘋果并購的人工智能公司未被人所知,。

03 AI 早已融入蘋果系統(tǒng)?

數(shù)目眾多的并購之外，蘋果自身的 AI 發(fā)展可以追溯到很多年前,。早到從 1987 年推出知識導(dǎo)航儀,，到 1990 年啟動語音識別項目，再到 2011 年推出 Siri 成為首個消費級語音助手，蘋果其實在很早期就展現(xiàn)了對 AI 的探索,，只是一直相對低調(diào),。

蘋果歷來不會率先推出新技術(shù)，尤其是未經(jīng)消費者驗證的技術(shù),。比如在 MP3 播放器被推出不久,，市場前景已經(jīng)有所驗證，但蘋果也沒有立刻進入市場,，而是在確定了 iPod 這種更優(yōu)越的解決方案后才加入的,。

手機領(lǐng)域也是一樣，雖然其他公司在早期推出了智能手機,，但蘋果選擇在確保能夠提供卓越客戶體驗的前提下才在 2007 年開始進入市場,。類似地，盡管平板電腦早在 1989 年就已問世,，但這個產(chǎn)品類別一直未能在市場上取得成功,，直到蘋果推出了 iPad。

蘋果一直以來都以消費者使用體驗為先,，通常會等到技術(shù)成熟才正式商用,，這一謹慎策略規(guī)避了初期技術(shù)的不穩(wěn)定風(fēng)險，也使蘋果能更好地把握市場的機遇,，推出更加成熟和超越的產(chǎn)品,。

所以蘋果對 ChatGPT 類似產(chǎn)品應(yīng)該也是這個路線——在準備好之前，不會貿(mào)然推出,。也就是,，在保持神秘感的同時，蘋果最終應(yīng)該會以自己的方式推出成熟的 AI 產(chǎn)品,。

事實上,，在蘋果的現(xiàn)有產(chǎn)品中，也已經(jīng)有不少機器學(xué)習(xí)/?AI?應(yīng)用：

圖像處理

• 蘋果通過運用機器學(xué)習(xí)技術(shù),，優(yōu)化了 iPhone 攝像頭拍攝的照片,，包括用于減少圖像噪點的深度融合以及 iPhone 15 人像模式工具。

iPhone 15 能檢測到畫面中是否有人,，并自動捕捉豐富的深度信息｜圖片來源：apple

• 可視化查找——機器學(xué)習(xí)支持了 iPhone 檢測照片內(nèi)容的功能,。
• iPhone 15 升級后的相機可以通過機器學(xué)習(xí)來區(qū)分鏡頭中的人和動物。
• 數(shù)字人像：Apple Vision Pro 前置鏡頭掃描人臉信息的環(huán)節(jié)——就是蘋果基于機器學(xué)習(xí)技術(shù),，為用戶生成的「數(shù)字分身」,。

語音處理

• 個人語音合成,、實時語音轉(zhuǎn)錄：iPhone 15 支持個人語音，它允許用戶合成類似自己的語音,，以便在 FaceTime 和電話通話中發(fā)音他們輸入的文字,，還有實時語音郵件，對留言進行實時轉(zhuǎn)錄,。

搜索引擎和建議系統(tǒng)

• Spotlight 搜索：Spotlight 搜索和整個 iOS 操作系統(tǒng)的搜索都由人工智能提供支持,。
• Siri 建議：iPhone 提供建議時，例如發(fā)送生日祝?；?qū)⑧]件中的事件添加到日歷中,，背后使用的正是機器學(xué)習(xí)算法。
• 輸入法：基于設(shè)備端的機器學(xué)習(xí),，輸入法可以根據(jù)用戶每一次的鍵入自動改進模型,，另外基于更為先進的單詞預(yù)測 Transformer 語言模型，輸入法可以更了解用戶的語言習(xí)慣,，大幅提高輸入的準確性等,。
• 自動更正：Apple 的自動更正系統(tǒng)和單詞建議選項由機器學(xué)習(xí)提供支持。

健康監(jiān)測

• 心電圖：Apple Watch 上的心電圖功能可查看心律數(shù)據(jù),，以確定使用者是否可能出現(xiàn)心房顫動,。
• 碰撞檢測和跌倒檢測——通過機器學(xué)習(xí)功能，蘋果設(shè)備可以根據(jù)各種傳感器收集的信息判斷使用者是否發(fā)生碰撞或跌倒,。
• （Apple Watch Series 9 和 Ultra 2——將 AI 集成到雙擊功能中，以更輕松地執(zhí)行任務(wù),，更亮的顯示屏,，更智能的 Siri 和先進的健康監(jiān)測。）

另一個可能的應(yīng)用則是在汽車——蘋果的 Project Titan（泰坦計劃）,，一個自動駕駛汽車項目,。雖然外界將該秘密項目稱為 Apple Car，但蘋果是否真的會推出汽車目前還并不確定,。

據(jù)報道,，Project Titan 里正在開發(fā)的自主系統(tǒng)需要一個大腦，這也是蘋果人工智能的用武之地,，為 Apple Vision Pro 引入的許多技術(shù)在放大后也可能在汽車項目上發(fā)揮巨大作用,。

對蘋果的高級神經(jīng)引擎而言，要讓系統(tǒng)實時協(xié)調(diào),、檢測物體,、理解用戶指令并同時產(chǎn)生反饋，是一項艱巨的任務(wù),。不過,，2021 年的一份報告里顯示,，蘋果已經(jīng)完成了這樣一款芯片，并將開始測試,。

接下來,，蘋果產(chǎn)品在 AI 的應(yīng)用，應(yīng)該會在圖像處理,、搜索推薦,、環(huán)境感知等方面繼續(xù)創(chuàng)新。然而,，其生態(tài)系統(tǒng)存在一個可能的潛在缺陷,，那就是蘋果堅持對數(shù)據(jù)隱私和產(chǎn)品設(shè)計保持追求，這可能會限制它在生成式 AI 等前沿技術(shù)上的布局速度,，正如大眾現(xiàn)在感知中的「慢一步」一樣,。

但這些依舊掩蓋不掉蘋果在?AI?領(lǐng)域具有巨大的發(fā)展?jié)摿Γ@主要基于以下三個因素：

一方面,，蘋果在全球擁有超過 20 億運行 iOS 操作系統(tǒng)的設(shè)備,，這為其未來發(fā)展 AI 應(yīng)用奠定了龐大的用戶基礎(chǔ)。根據(jù)蘋果財務(wù)長 Luca Maestri（盧卡·馬埃斯特里）透露,，截至 2023 年 2 月,，蘋果的活躍設(shè)備裝機量已經(jīng)突破 20 億大關(guān)，并在 6 月季度末達成了「在每個地區(qū)細分市場都創(chuàng)下了歷史新高」的記錄,。

另一方面看,，蘋果的 Siri 語音助手每月處理的請求量達 250 億次，反映了消費者對語音助手等 AI 工具的強烈需求,。如果蘋果未來能推出類似 ChatGPT 的產(chǎn)品,，那么來自其消費者端的 AI 數(shù)據(jù)和互動規(guī)模將會很龐大。

以及不可忽視的是,，蘋果付費訂閱用戶數(shù)量在快速增長,，已突破了 10 億大關(guān)并保持兩位數(shù)增長態(tài)勢。在 2023 年 8 月的第三季度財報中,，蘋果 CEO 庫克指出,，蘋果「在服務(wù)領(lǐng)域的收入創(chuàng)歷史新高」，「付費訂閱量超過 10 億,，并以兩位數(shù)的速度增長」,，這一態(tài)勢為蘋果通過 AI 類應(yīng)用實現(xiàn)收入增長奠定了堅實基礎(chǔ)。依托如此廣闊的用戶群體,，蘋果在消費級 AI 市場的增長空間廣闊,。

另外，有消息稱,，蘋果正在大力投資人工智能服務(wù)器,，并計劃在 2024 年再建造數(shù)百臺,，為其即將到來的人工智能時代做準備。未來,，在成為消費級 AI 應(yīng)用的第一大平臺上,，蘋果依舊很有潛力。

參考資料：

1. Inside Apple's Big Plan to Bring Generative AI to All Its Devices,bloomberg

2. Apple may be quiet on AI, but it's also the biggest buyer of AI companies,quartz

3. Apple Boosts Spending to Develop Conversational AI,the information

4. LLM in a flash: Efficient Large Language Model Inference with Limited Memory