缺席大模型，蘋果到底在等什么

　　2022年底，ChatGPT 的出世，讓“大模型”成為全球科技領域的關鍵詞。整個2023年，所有模型玩家都在以 GPT-4 作為目標進行追趕。原因很簡單，在這場先發制人的游戲里，推理能力被認為是*的衡量標準。

　　全球所有的科技公司里，蘋果無疑是個“另類”。在目前所有的主流智能手機廠商乃至全球科技公司里，蘋果是*一家還沒有正式發布大模型產品的廠商，甚至都很少正面提及。就連馬斯克在去年7月成立的人工智能公司xAI，馬上就要發布*AI大模型Grok 1.5。

　　而在已披露蘋果大模型進展的有限信息里，蘋果給人一種感覺：相比其他科技公司，蘋果并不追求大模型性能的**，而是更看重大模型落地的可能性。

　　我們應該如何理解蘋果在大模型上的“遲鈍”?選擇“務實”路線的蘋果，又會在大模型故事里扮演怎樣的角色?

　　01.雙面“蘋果”

　　去年的大模型風潮中，手機廠商成為一股不可或缺的“力量”。

　　2023年，華為發布了盤古大模型，并率先將大模型接入手機;vivo則推出了主打輕量化的藍心大模型;三星也公布了其自研的生成式人工智能模型“三星高斯”，并在今年推出了旗下*AI手機Galaxy S24系列手機。

　　唯獨蘋果是個例外。作為全球*的科技公司，蘋果在去年對這項過去十年中最重要的科技發展——生成式人工智能，很少正面提及。

　　在一季報的電話會議上，蘋果CEO庫克只是輕描淡寫地表示，蘋果會將AI應用到更多產品上，但要深思熟慮。甚至在6月的開發者大會WWDC上，蘋果對人工智能和大模型更是只字未提，只是簡單提到了“機器學習”這個詞語。

　　在目前所有的主流智能手機廠商乃至全球科技公司里，蘋果是*一家還沒有正式發布大模型產品的廠商。就連馬斯克在去年7月成立的人工智能公司xAI，就要發布*AI大模型Grok 1.5。

　　看上去，蘋果似乎“缺席”了這場大模型的賽跑。但事實可能并非如此。

　　種種跡象顯示，蘋果在AI領域的布局比我們想象得要更深。據彭博社報道，2023 年 7 月，蘋果建立了自己的大型語言模型 Ajax，并推出代號為「Apple GPT」的內部聊天機器人，用于測試 Ajax 的功能。

　　據知情人士分析，Ajax GPT的訓練參數數量超過2000億。參數反映了機器學習模型的規模和復雜程度;參數數量越多，表示復雜程度越高，需要的存儲空間和計算能力也越大。要知道，GPT-3.5的訓練參數規模在1750億，也就是說，如今的Ajax GPT或許在功能上比OpenAI的GPT-3.5更強。

　　從投入規模上看，Ajax GPT所在的生成式AI項目每年將花費蘋果約 10 億美元。另外，根據The Information報道，如今蘋果公司將把訓練*進模型的預算增加到每天數百萬美元，而這只是對開發其中一種模型的投入。

　　與很多人印象不同，蘋果還是最熱衷于投資AI的科技公司。自2010年以來，在FAMGA的公司中，蘋果共收購了20家AI公司，位列*。同期，谷歌和微軟分別收購了14家和10家。

　　更加有趣的事情是，在投入研發大模型的同時，蘋果還花了相當大的精力去探索大模型落地的可能性。

　　02.押注端側大模型

　　今年下半年以來，AI硬件是所有科技公司共同發力的方向。在真正“AI-native 硬件”誕生之前，把 LLM 和現有終端融合更具有落地可能性。手機、PC、車車等硬件廠商都有極大動力去落地大模型，這其中以手機廠商最為激進。

　　但遺憾的是，到目前為止，大模型與現有智能硬件之間的融合并不流暢。

　　就拿手機來說，受限于手機內存的運存處理能力限制，大模型還無法被搬到手機上。聯發科就曾透露，130億參數大模型至少需要13GB內存，再加上6GB App保活、4GB安卓OS，即總的手機內存容量需求將達到23GB。

　　23GB手機內存是個什么概念呢?去年上市最新的iPhone 15的運行內存大小只有6GB，iPhone15 Pro 和 iPhone15 Pro Max 運行內存也只有8GB。這意味著，想要在手機上提升跑大模型，內存容量必須有大幅度提升。

　　所以，目前大多數大模型都是在云端運營，固然參數規模更大、算力更高等優勢，但缺點也很明顯。當用戶在弱網乃至離網環境下，無法使用大模型功能，甚至還有用戶隱私安全泄露的風險。這對極為重視用戶體驗的蘋果來說，是無法接受的。

　　而蘋果就是端側大模型的堅定支持者。多位前蘋果機器學習工程師稱，出于提高隱私和性能的考慮，蘋果的領導層更傾向于在設備上運行大模型，而不是在云服務器上。

　　要想落地落地端側大模型，除了內存容量提升，模型本身的壓縮和優化也是落地大模型的一種方式。前者顧名思義就是壓縮模型的規模，讓模型更注重關鍵場景的精度和效果;后者則是通過技術手段對模型進行優化，通過內存管理減少內存搬運，進而降低功耗。

　　目前，大部分科技公司把更多精力放到訓練參數更少、體量更小的“小模型”。去年12月，微軟正式發布了參數規模僅有27億的“小模型”Phi-2，并宣稱該模型性能夠“吊打”體量在其25倍以上的大模型。

　　但蘋果卻另辟蹊徑，選擇了后者。此前，蘋果發布的論文顯示，它嘗試利用閃存來解決大模型在塞進手機時遇到的內存不足的問題。簡單來說，蘋果就做了兩件事情，優化閃存交互和內存管理。

　　說起來，計算機的各種硬件設備和我們人類的軀體非常相似，計算機的 CPU 好比人類的大腦，其中也有用來存放程序和數據的記憶裝置，相當于我們腦袋中的記憶體。

　　計算機的記憶體簡單分為內存和閃存兩種。內存用于臨時存儲那些需要隨時訪問的數據和指令，它提供高速的讀寫，有較高的存儲密度。而閃存正相反，它讀寫較慢，適用于長期數據的存儲。從特性上看，內存更適合需要頻繁讀寫的大模型。但正如上文所說，內存現階段性能不夠，僅憑它一個撐不起大模型。

　　而蘋果的做法是，允許模型重復使用部分已處理的數據，從而減少頻繁讀取內存的需要，提高大模型運行效率;二是通過對數據進行更有效的分組，令大模型能夠更快地從閃存中讀取數據，從而加速AI 理解和生成語言的能力。

　　通過這一方式，蘋果可以運行比設備DRAM容量大兩倍的模型，并在CPU和GPU上分別比傳統方法提速4-5倍和20-25倍。用研究人員的話說，這為在內存有限的設備上有效推理 LLM 鋪平了道路。

　　作為一個硬件公司，蘋果更注重于技術落地本身沒有什么太大問題。但如果把其視作是一家科技公司，蘋果就多少顯得有些“另類”。

　　03.科技公司里的“實用主義者”

　　幾乎在所有人的邏輯里，大模型是一場先發制人的游戲，推理能力是*的衡量標準。甚至在很多人看來，模型競賽相當殘酷，類似芯片或 SpaceX，因為*的模型能力又強又便宜，后面的玩家會很難存活。

　　但蘋果對這個游戲的理解并非如此。一個更接近真相的解釋是：相比其他科技公司，蘋果并不追求大模型性能的**，而是更看重大模型落地的可能性。

　　這與蘋果長期以來的“實用主義”理念有很大關系。蘋果實用主義的精髓在于，其并不追求*的技術*，而更擅長在技術向產品大規模轉化過程中，通過其獨特的產品能力，實現對同類產品的超越。

　　從過去看，智能手機是由IBM公司的工程師Theodore Paraskevakos發明的，但卻在蘋果手里發揚光大;在初代iPod發布時，MP3播放器已經是一個個非常成熟的品類，可最后蘋果還是贏了。在更擅長賺錢的庫克上任后，蘋果的實用主義得到更充分的踐行。

　　這也體現蘋果在AI領域的布局。相比谷歌的動輒上億美元的大手筆，蘋果雖然并購數量多，但整體金額都不大。它們更愿意收購一些小型公司，借助其團隊和技術為蘋果自身未來的產品增加新功能。比如，iPhone X的FaceID就源自蘋果在芯片和計算機視覺領域的一系列并購行動。

　　沿著這個邏輯，也就不難理解蘋果為何遲遲不公布其大模型產品。因為到目前為止，大模型遠大愿景與尚不清晰的商業化前景之間仍然需要無數的產品去填。

　　盡管目前已經出現ChatGPT、Character.AI 等超級應用，但上述應用的調用入口十分單一，功能也多集中在內容生產方面，仍然有很大提升空間。一個顯著的體現是，這些應用在用戶活躍度上起伏很大。比如在經歷去年年初的瘋狂后，ChatGPT日活在去年下半年出現了明顯的回撤。

　　更重要的是，相比功能相對單一，大模型落地所要付出的成本與商業化回報之間不成正比。目前，AI應用商業化手段還很單一，難以支撐其高昂的運行成本。

　　按照Open AI公布的GPT-4的API費用表，為每輸入1000個字符(約合750個單詞)，價格為0.03美元，每生成1000個字符，價格為0.06美元。也就是說用戶每問一次，成本差不多就是1毛錢。考慮到蘋果全球僅 iPhone 用戶就超過十億，意味著大模型運行的成本將極其高昂。

　　退一步講，如果仍然是這個路子，無論哪家廠商最終“贏了”，他們的產品或者服務都會極大概率以“App”的形式出現在蘋果的App Store里，為全球的蘋果用戶提供服務。

　　蘋果看似務實的做法并非沒有一絲隱患。目前，市場對于AI硬件的發展大致有兩種觀點：

　　一種觀點是基于大模型的自然語言交互能力需要一個新硬件。無論是去年發布的AI Pin，還是不久前在CES上亮相的Rabbit R1，都屬于這一類產品。這類產品的特點是*化利用了AI的文本理解、生成、翻譯能力、特別是圖片、音視頻等多模態能力，幾乎做到無縫銜接，融于無形。

　　另一種觀點是手機就是大模型*的硬件載體，這也是蘋果所相信的方向。所以，我們能看到，蘋果將更多精力投入了新硬件產品的研發——Vision Pro，而非AI硬件。

　　路線差異背后，意味著一旦踏錯，蘋果幾乎就完全要依賴產品能力進行追趕。但近年來，蘋果所引以為傲后發至上的產品能力卻頻頻失效。

　　盡管經歷了漫長的7年研發，Vision Pro最終上市，但距離庫克的最初設想相繼甚遠;而在造車這事上，蘋果也與最初的夢想漸行漸遠。根據此前的報道，蘋果的*汽車放棄了 L5 全自動駕駛路線，方向盤、剎車和油門踏板等傳統汽車該有的硬件都會保留，售價調低至 10 萬美元以下，量產時間再推遲到 2026 年。這意味著，蘋果基本已經退出新能源汽車的競爭。

　　毫無疑問，大模型時代的硬件會重復計算機的老路：就是從算力集中于超算等大型設備上到算力一步步轉移至屬于個人終端。只是“實用主義者”蘋果，最終會在這個故事里扮演怎樣的角色，仍然要打一個大大的問號。