【文/觀察者網(wǎng) 呂棟】

“這幾天電話都快被打爆了。”談到最近爆火的ChatGPT，英偉達(dá)中國(guó)區(qū)一位高管日前向媒體說(shuō)道。

春節(jié)過(guò)后，全球AI領(lǐng)域最引人關(guān)注的非聊天機(jī)器人ChatGPT莫屬。

在資本和輿論的吹捧下，擁有交流、創(chuàng)作、翻譯等多種功能的ChatGPT，儼然已成為一個(gè)現(xiàn)象級(jí)產(chǎn)品。不僅背后的OpenAI和微軟借此名聲大噪，國(guó)內(nèi)一眾高調(diào)跟進(jìn)的互聯(lián)網(wǎng)大廠也賺足了眼球。

但實(shí)際上，在網(wǎng)友們褒貶不一、對(duì)ChatGPT持續(xù)展開(kāi)討論的同時(shí)，支撐ChatGPT誕生的算力基礎(chǔ)——AI芯片和服務(wù)器也正在資本市場(chǎng)上掀起巨浪，已下跌一年的英偉達(dá)，股價(jià)在4個(gè)月里實(shí)現(xiàn)翻倍。

英偉達(dá)CEO黃仁勛

在國(guó)內(nèi)，股市上的熱情似乎更勝一籌。國(guó)產(chǎn)GPU廠商景嘉微股價(jià)一個(gè)月漲超60%，即便已經(jīng)公開(kāi)表示沒(méi)有ChatGPT相關(guān)業(yè)務(wù)，依然擋不住股價(jià)的漲勢(shì)，讓高管們不趁機(jī)減持都不好意思。

算力，是人工智能的“三駕馬車”之一，跟著ChatGPT備受追捧無(wú)可厚非。但值得關(guān)注的是，打造ChatGPT到底需要消耗多少算力？資本市場(chǎng)狂歡下，國(guó)內(nèi)廠商又能在多大程度上受益？

在接受觀察者網(wǎng)對(duì)話時(shí)，國(guó)內(nèi)服務(wù)器廠商寧暢副總裁兼CTO趙雷指出，就ChatGPT而言，需要TB級(jí)的運(yùn)算訓(xùn)練庫(kù)，甚至是P-Flops級(jí)的算力。從目前的服務(wù)器處理能力來(lái)看，大概是幾十到幾百臺(tái)規(guī)模的GPU服務(wù)器體量才能夠?qū)崿F(xiàn)，而且需要幾日甚至幾十日的訓(xùn)練。

市場(chǎng)上還有券商報(bào)告稱，ChatGPT帶動(dòng)超算算力需求3年或?qū)⑻嵘^(guò)10倍，未來(lái)3年或?qū)⒗瓌?dòng)千億級(jí)ICT硬件投資需求。隨著ChatGPT持續(xù)爆火，以英偉達(dá)為代表的AI算力產(chǎn)業(yè)鏈真的會(huì)成為最大贏家嗎？

“顯卡寒冬”中帶飛英偉達(dá)，市場(chǎng)過(guò)度樂(lè)觀了？

在ChatGPT爆火出圈之前，黃仁勛最頭疼的事應(yīng)該還是怎么更快度過(guò)本輪“顯卡寒冬”。

剛剛過(guò)去的2022年，全球獨(dú)顯出貨量創(chuàng)下二十年新低，相比2021年“腰斬”。作為全球顯卡市場(chǎng)的頭號(hào)玩家，英偉達(dá)持續(xù)遭受重創(chuàng)，業(yè)績(jī)連續(xù)兩個(gè)季度下滑，股價(jià)一年之內(nèi)暴跌70%。

但ChatGPT現(xiàn)象級(jí)爆火很快扭轉(zhuǎn)了這一頹勢(shì)。去年10月中旬以來(lái)，英偉達(dá)股價(jià)從108美元/股暴漲至228美元/股，反彈111%，市值重登美股半導(dǎo)體板塊第一，大幅甩開(kāi)英特爾等同行。

“我們一直在等待這一刻，”看到英偉達(dá)股價(jià)在市場(chǎng)低迷下逆勢(shì)暴漲，黃仁勛對(duì)ChatGPT的贊美也毫不吝嗇，直言ChatGPT對(duì)于人工智能的意義，不亞于手機(jī)領(lǐng)域“iPhone”的出現(xiàn)。

英偉達(dá)CEO黃仁勛

市場(chǎng)好奇的是，世界上那么多芯片公司，為什么偏偏英偉達(dá)的股價(jià)會(huì)隨著ChatGPT翩翩起舞？

簡(jiǎn)言之，就是ChatGPT的底層基礎(chǔ)是一個(gè)擁有1750億參數(shù)的預(yù)訓(xùn)練大模型——GPT-3.5，它能如此睿智，主要是基于對(duì)天量數(shù)據(jù)的“吃透”，背后離不開(kāi)強(qiáng)大算力的支撐，而英偉達(dá)的GPU能提供它需要的算力。

目前來(lái)看，全球其他正在跟進(jìn)的廠商想要推出ChatGPT這種人工智能大模型，必須有三項(xiàng)關(guān)鍵技術(shù)支撐：訓(xùn)練數(shù)據(jù)、模型算法和算力。

浙商證券研報(bào)指出，訓(xùn)練數(shù)據(jù)市場(chǎng)廣闊，技術(shù)壁壘較低，投入足夠的人力物力及財(cái)力后即可獲得；基礎(chǔ)模型及模型調(diào)優(yōu)對(duì)算力的需求較低，但獲得ChatGPT功能需要在基礎(chǔ)模型上進(jìn)行大規(guī)模預(yù)訓(xùn)練，這就需要大量算力，所以算力是ChatGPT運(yùn)行的關(guān)鍵所在。

說(shuō)起AI算力，就到了GPU的主場(chǎng)。

最初，英偉達(dá)基于CUDA架構(gòu)開(kāi)發(fā)的GPU主要用于游戲，后來(lái)發(fā)現(xiàn)它還可用于AI訓(xùn)練和推理中的大規(guī)模并行計(jì)算任務(wù)，逐漸形成開(kāi)發(fā)者生態(tài)。在AI發(fā)展初期，市面上沒(méi)有專門(mén)的AI加速卡和硬件產(chǎn)品，開(kāi)發(fā)者便將英偉達(dá)GPU用于AI訓(xùn)練和推理，開(kāi)始大規(guī)模采用其產(chǎn)品。

CPU和GPU架構(gòu)的區(qū)別

“英偉達(dá)芯片為大模型訓(xùn)練做了很多優(yōu)化，它才是這次ChatGPT熱潮的最大贏家?！庇袠I(yè)內(nèi)人士直言。

那訓(xùn)練ChatGPT到底需要多少算力？

海通證券援引的OpenAI測(cè)算顯示，自2012年起，全球頭部AI模型訓(xùn)練算力需求每3-4個(gè)月翻一番，每年頭部訓(xùn)練模型所需算力增長(zhǎng)幅度高達(dá)10倍，而ChatGPT訓(xùn)練階段總算力消耗約為3640PF-days（即1 PetaFLOP/s效率跑3640天）。

在接受觀察者網(wǎng)對(duì)話時(shí)，寧暢CTO趙雷提到，目前用戶使用ChatGPT得到的反饋，是訓(xùn)練后的產(chǎn)物，主要涉及推理應(yīng)用，計(jì)算時(shí)間基本上是分鐘級(jí)或者秒級(jí)的。對(duì)于ChatGPT訓(xùn)練來(lái)說(shuō)，一般是周級(jí)或是月級(jí)，至少差一個(gè)數(shù)量級(jí)，也有可能差兩到三個(gè)數(shù)量級(jí)。

浙商證券研報(bào)指出，采購(gòu)一片英偉達(dá)頂級(jí)GPU成本為8萬(wàn)元，GPU服務(wù)器成本通常超過(guò)40萬(wàn)元。對(duì)于ChatGPT而言，支撐其算力基礎(chǔ)設(shè)施至少需要上萬(wàn)顆英偉達(dá)GPU A100（曾經(jīng)風(fēng)靡一時(shí)的AlphaGO也只需要8塊GPU），一次模型訓(xùn)練成本超過(guò)1200萬(wàn)美元。