2022年,英偉達(dá)(Nvidia)推出H100芯片,它相當(dāng)強(qiáng)大,每塊4萬(wàn)美元。但H100推出的時(shí)間似乎相當(dāng)糟糕,當(dāng)時(shí)企業(yè)正在絞盡腦汁削減成本,美國(guó)通脹也呈無(wú)法遏制之勢(shì)。2022年11月,ChatGPT悄然到來(lái),一切變了。
01、ChatGPT成為英偉達(dá)的轉(zhuǎn)折點(diǎn)
英偉達(dá)CEO黃仁勛說(shuō):“去年我們的處境本來(lái)很糟糕,突然就逆轉(zhuǎn)了?!?a class="article-link" target="_blank" href="/tag/OpenAI/">OpenAI成了轉(zhuǎn)折點(diǎn),它創(chuàng)造了瘋狂的需求。ChatGPT到底能帶來(lái)多大影響?我們現(xiàn)在還不能明確知曉。不過(guò)在生成式AI浪潮之下,許多科技巨頭和AI公司搶購(gòu)H100,黃仁勛稱它是第一款專為生成式AI設(shè)計(jì)的芯片。不久前英偉達(dá)公布季度財(cái)報(bào)展望,預(yù)計(jì)截止7月底的3個(gè)月里英偉達(dá)營(yíng)收將達(dá)到110億美元,比華爾街預(yù)期高出50%,主要是數(shù)據(jù)中心采購(gòu)增加、AI芯片需求旺盛。財(cái)報(bào)展望公布后英偉達(dá)市值一天之內(nèi)增加1840億美元,總市值接近1萬(wàn)億美元。很明顯,英偉達(dá)成了生成式AI熱潮的第一批贏家。黃仁勛透露,在ChatGPT問(wèn)世之前幾周英偉達(dá)剛剛開始大規(guī)模量產(chǎn)H100芯片。對(duì)于未來(lái),黃仁勛充滿信心,稱英偉達(dá)會(huì)繼續(xù)與臺(tái)積電合作,增加H100產(chǎn)能,以滿足云計(jì)算供應(yīng)商的需求。
02、H100芯片是地球上最稀缺的資源
CoreWeave是一家創(chuàng)業(yè)公司,它專注于AI云計(jì)算基礎(chǔ)設(shè)施開發(fā)。年初時(shí)CoreWeave拿到了H100芯片,公司創(chuàng)始人、首席策略官Brannin McBee說(shuō):“H100成了這個(gè)星球上最稀缺的工程資源?!庇行┢髽I(yè)需要訓(xùn)練海量數(shù)據(jù),它們訂購(gòu)了幾千塊H100芯片,但等待時(shí)間居然長(zhǎng)達(dá)6個(gè)月。
一些企業(yè)擔(dān)心H100可能會(huì)缺貨。馬斯克創(chuàng)建的AI公司X.ai也訂購(gòu)了一批英偉達(dá)芯片,不久前馬斯克在公開場(chǎng)合表示,現(xiàn)在GPU比“毒-品”還難搞到,他還開玩笑說(shuō)在舊金山買到“毒-品”一點(diǎn)也不難。馬斯克感嘆:“現(xiàn)在的計(jì)算成本已經(jīng)是天文數(shù)字,要想開發(fā)生成式AI系統(tǒng),服務(wù)器硬件投入最少需要2.5億美元。”H100集成800億個(gè)晶體管,相當(dāng)于iPhone處理器的5倍。
2020年時(shí)英偉達(dá)推出A100芯片,H100的價(jià)格是A100的兩倍,但它的性能至少好三倍。Stability AI開發(fā)了Stable Diffusion圖形生成AI服務(wù),公司聯(lián)合創(chuàng)始人Emad Mostaque說(shuō):“一直以來(lái)AI模型創(chuàng)作者被擴(kuò)展問(wèn)題困擾,H100可以解決這一問(wèn)題。這很重要,因?yàn)樗梢宰屛覀兏斓赜?xùn)練更大的模型,現(xiàn)狀正在從研究問(wèn)題轉(zhuǎn)移到工程問(wèn)題?!?/p>
03、英偉達(dá)的軟件創(chuàng)新也不容忽視
英偉達(dá)能在AI領(lǐng)域取得突破,硅基芯片固然重要,但最重要的可能還要軟件創(chuàng)新。2006年英偉達(dá)開發(fā)了Cuda軟件,有了Cuda之后GPU可以更改用途,變成各種負(fù)載的加速器。2021年英偉達(dá)高管Ian Buck說(shuō):“AI找到了我們。”當(dāng)時(shí)一些研究人員意識(shí)到GPU特別適合神經(jīng)網(wǎng)絡(luò)計(jì)算。
各種不同的AI框架紛至沓來(lái),為了響應(yīng)變化,英偉達(dá)聘請(qǐng)的軟件工程師比硬件工程師還要多。H100是基于Hopper架構(gòu)開發(fā)的,它專為“Transformer”作了優(yōu)化,而Transformer是AI預(yù)訓(xùn)練領(lǐng)域最常使用的編程框架之一。
英偉達(dá)與AI研究人員密切合作,所以它能快速發(fā)現(xiàn)Transformer的出現(xiàn),然后及時(shí)更新軟件去匹配趨勢(shì)。
投資公司Air Street Capital普通合伙人Nathan Benaich說(shuō):“相比其它人,很明顯英偉達(dá)提前看到了趨勢(shì),它快速實(shí)現(xiàn)了GPU可編程化。英偉達(dá)發(fā)現(xiàn)了機(jī)會(huì),然后大膽下注,始終領(lǐng)先于對(duì)手?!盉enaich認(rèn)為英偉達(dá)比競(jìng)爭(zhēng)對(duì)手領(lǐng)先2年,不過(guò)他同時(shí)也說(shuō):“無(wú)論是在硬件還是軟件領(lǐng)域,英偉達(dá)的領(lǐng)先并非無(wú)懈可擊?!盨tability AI公司高管Mostaque持相同看法,他說(shuō):“谷歌、英特爾及其它公司的下一代芯片正在追上來(lái),隨著軟件的標(biāo)準(zhǔn)化,Cuba不再是英偉達(dá)的護(hù)城河?!?/p>
04、英偉達(dá)是半成熟AI市場(chǎng)的大贏家
一些AI專家認(rèn)為,華爾街追捧英偉達(dá)似乎有些過(guò)度樂(lè)觀。不過(guò)芯片咨詢公司D2D Advisory的創(chuàng)始人Jay Goldberg說(shuō),就目前來(lái)看,半成熟的AI市場(chǎng)仍然是贏家通吃市場(chǎng),英偉達(dá)正是那個(gè)贏家。
無(wú)數(shù)人看好英偉達(dá),Gartner分析師Alan Priestley說(shuō):“它是技術(shù)領(lǐng)先玩家,支撐著AI這種新事物的發(fā)展?!盩echInsights分析師Dan Hutcheson則說(shuō):“英偉達(dá)之于AI,如同英特爾之于PC?!?/p>
ChatGPT將1萬(wàn)塊英偉達(dá)GPU組合成超級(jí)電腦,開發(fā)生成式AI。在深度學(xué)習(xí)GPU市場(chǎng),英偉達(dá)占有95%的市場(chǎng)?,F(xiàn)在幾乎沒(méi)有其它公司的芯片能取代英偉達(dá)AI芯片,現(xiàn)在它的地位十分穩(wěn)固,但未來(lái)很難說(shuō)。
05、英偉達(dá)已經(jīng)被人盯上
TIRIAS Research分析師 Kevin Krewell說(shuō):“英偉達(dá)已經(jīng)被人盯上,所有人都想打倒它?!庇⑻貭柡?a class="article-link" target="_blank" href="/manufacturer/1000225/">AMD是CPU霸主,它們也在開發(fā)AI GPU。谷歌有自己的TPU,它不只用于搜索,也可以用于深度學(xué)習(xí)。亞馬遜擁有自己的定制AI訓(xùn)練芯片。
除了科技巨頭,還有一批創(chuàng)業(yè)公司也在拼命追趕,比如Cerebras、SambaNova Systems和Habana(已經(jīng)被英特爾收購(gòu)),它們也想開發(fā)出更好的、可以替代AI GPU的新產(chǎn)品。Graphcore是一家英國(guó)AI芯片創(chuàng)業(yè)公司,它將自己開發(fā)的芯片叫IPU(智能處理單元),它還宣稱自己的芯片相比GPU擁有更強(qiáng)的計(jì)算力、價(jià)格更便宜。Graphcore成立于2016年,已經(jīng)融資7億美元。
一些分析師認(rèn)為,英偉達(dá)最新季報(bào)向我們暗示,生成式AI可能會(huì)成為下一個(gè)重要增長(zhǎng)點(diǎn)。Hargreaves Lansdown分析師Derren Nathan說(shuō):“我們現(xiàn)在只是看到了冰山一角。生成式AI有可能會(huì)成為科技史轉(zhuǎn)折點(diǎn),就像當(dāng)年的內(nèi)燃機(jī)引擎或者互聯(lián)網(wǎng)一樣?!碑?dāng)然,面對(duì)熱潮,面對(duì)追捧,部分分析師也提醒要保持冷靜。畢竟,誰(shuí)能保證里面有沒(méi)有大泡沫呢?