2022年,英偉達(Nvidia)推出H100芯片,它相當(dāng)強大,每塊4萬美元。但H100推出的時間似乎相當(dāng)糟糕,當(dāng)時企業(yè)正在絞盡腦汁削減成本,美國通脹也呈無法遏制之勢。2022年11月,ChatGPT悄然到來,一切變了。
01、ChatGPT成為英偉達的轉(zhuǎn)折點
英偉達CEO黃仁勛說:“去年我們的處境本來很糟糕,突然就逆轉(zhuǎn)了?!?a class="article-link" target="_blank" href="/tag/OpenAI/">OpenAI成了轉(zhuǎn)折點,它創(chuàng)造了瘋狂的需求。ChatGPT到底能帶來多大影響?我們現(xiàn)在還不能明確知曉。不過在生成式AI浪潮之下,許多科技巨頭和AI公司搶購H100,黃仁勛稱它是第一款專為生成式AI設(shè)計的芯片。不久前英偉達公布季度財報展望,預(yù)計截止7月底的3個月里英偉達營收將達到110億美元,比華爾街預(yù)期高出50%,主要是數(shù)據(jù)中心采購增加、AI芯片需求旺盛。財報展望公布后英偉達市值一天之內(nèi)增加1840億美元,總市值接近1萬億美元。很明顯,英偉達成了生成式AI熱潮的第一批贏家。黃仁勛透露,在ChatGPT問世之前幾周英偉達剛剛開始大規(guī)模量產(chǎn)H100芯片。對于未來,黃仁勛充滿信心,稱英偉達會繼續(xù)與臺積電合作,增加H100產(chǎn)能,以滿足云計算供應(yīng)商的需求。
02、H100芯片是地球上最稀缺的資源
CoreWeave是一家創(chuàng)業(yè)公司,它專注于AI云計算基礎(chǔ)設(shè)施開發(fā)。年初時CoreWeave拿到了H100芯片,公司創(chuàng)始人、首席策略官Brannin McBee說:“H100成了這個星球上最稀缺的工程資源。”有些企業(yè)需要訓(xùn)練海量數(shù)據(jù),它們訂購了幾千塊H100芯片,但等待時間居然長達6個月。
一些企業(yè)擔(dān)心H100可能會缺貨。馬斯克創(chuàng)建的AI公司X.ai也訂購了一批英偉達芯片,不久前馬斯克在公開場合表示,現(xiàn)在GPU比“毒-品”還難搞到,他還開玩笑說在舊金山買到“毒-品”一點也不難。馬斯克感嘆:“現(xiàn)在的計算成本已經(jīng)是天文數(shù)字,要想開發(fā)生成式AI系統(tǒng),服務(wù)器硬件投入最少需要2.5億美元?!盚100集成800億個晶體管,相當(dāng)于iPhone處理器的5倍。
2020年時英偉達推出A100芯片,H100的價格是A100的兩倍,但它的性能至少好三倍。Stability AI開發(fā)了Stable Diffusion圖形生成AI服務(wù),公司聯(lián)合創(chuàng)始人Emad Mostaque說:“一直以來AI模型創(chuàng)作者被擴展問題困擾,H100可以解決這一問題。這很重要,因為它可以讓我們更快地訓(xùn)練更大的模型,現(xiàn)狀正在從研究問題轉(zhuǎn)移到工程問題?!?/p>
03、英偉達的軟件創(chuàng)新也不容忽視
英偉達能在AI領(lǐng)域取得突破,硅基芯片固然重要,但最重要的可能還要軟件創(chuàng)新。2006年英偉達開發(fā)了Cuda軟件,有了Cuda之后GPU可以更改用途,變成各種負載的加速器。2021年英偉達高管Ian Buck說:“AI找到了我們?!碑?dāng)時一些研究人員意識到GPU特別適合神經(jīng)網(wǎng)絡(luò)計算。
各種不同的AI框架紛至沓來,為了響應(yīng)變化,英偉達聘請的軟件工程師比硬件工程師還要多。H100是基于Hopper架構(gòu)開發(fā)的,它專為“Transformer”作了優(yōu)化,而Transformer是AI預(yù)訓(xùn)練領(lǐng)域最常使用的編程框架之一。
英偉達與AI研究人員密切合作,所以它能快速發(fā)現(xiàn)Transformer的出現(xiàn),然后及時更新軟件去匹配趨勢。
投資公司Air Street Capital普通合伙人Nathan Benaich說:“相比其它人,很明顯英偉達提前看到了趨勢,它快速實現(xiàn)了GPU可編程化。英偉達發(fā)現(xiàn)了機會,然后大膽下注,始終領(lǐng)先于對手?!盉enaich認為英偉達比競爭對手領(lǐng)先2年,不過他同時也說:“無論是在硬件還是軟件領(lǐng)域,英偉達的領(lǐng)先并非無懈可擊?!盨tability AI公司高管Mostaque持相同看法,他說:“谷歌、英特爾及其它公司的下一代芯片正在追上來,隨著軟件的標(biāo)準(zhǔn)化,Cuba不再是英偉達的護城河。”
04、英偉達是半成熟AI市場的大贏家
一些AI專家認為,華爾街追捧英偉達似乎有些過度樂觀。不過芯片咨詢公司D2D Advisory的創(chuàng)始人Jay Goldberg說,就目前來看,半成熟的AI市場仍然是贏家通吃市場,英偉達正是那個贏家。
無數(shù)人看好英偉達,Gartner分析師Alan Priestley說:“它是技術(shù)領(lǐng)先玩家,支撐著AI這種新事物的發(fā)展?!盩echInsights分析師Dan Hutcheson則說:“英偉達之于AI,如同英特爾之于PC。”
ChatGPT將1萬塊英偉達GPU組合成超級電腦,開發(fā)生成式AI。在深度學(xué)習(xí)GPU市場,英偉達占有95%的市場?,F(xiàn)在幾乎沒有其它公司的芯片能取代英偉達AI芯片,現(xiàn)在它的地位十分穩(wěn)固,但未來很難說。
05、英偉達已經(jīng)被人盯上
TIRIAS Research分析師 Kevin Krewell說:“英偉達已經(jīng)被人盯上,所有人都想打倒它?!庇⑻貭柡?a class="article-link" target="_blank" href="/manufacturer/1000225/">AMD是CPU霸主,它們也在開發(fā)AI GPU。谷歌有自己的TPU,它不只用于搜索,也可以用于深度學(xué)習(xí)。亞馬遜擁有自己的定制AI訓(xùn)練芯片。
除了科技巨頭,還有一批創(chuàng)業(yè)公司也在拼命追趕,比如Cerebras、SambaNova Systems和Habana(已經(jīng)被英特爾收購),它們也想開發(fā)出更好的、可以替代AI GPU的新產(chǎn)品。Graphcore是一家英國AI芯片創(chuàng)業(yè)公司,它將自己開發(fā)的芯片叫IPU(智能處理單元),它還宣稱自己的芯片相比GPU擁有更強的計算力、價格更便宜。Graphcore成立于2016年,已經(jīng)融資7億美元。
一些分析師認為,英偉達最新季報向我們暗示,生成式AI可能會成為下一個重要增長點。Hargreaves Lansdown分析師Derren Nathan說:“我們現(xiàn)在只是看到了冰山一角。生成式AI有可能會成為科技史轉(zhuǎn)折點,就像當(dāng)年的內(nèi)燃機引擎或者互聯(lián)網(wǎng)一樣?!碑?dāng)然,面對熱潮,面對追捧,部分分析師也提醒要保持冷靜。畢竟,誰能保證里面有沒有大泡沫呢?