電子發(fā)燒友網(wǎng)報(bào)道(文/吳子鵬)據(jù)國(guó)信證券統(tǒng)計(jì),ChatGPT今年1月的月活躍用戶超過(guò)1億,用戶過(guò)億只用了2至3個(gè)月,其速度遠(yuǎn)超過(guò)去的推特、海外版抖音等。ChatGPT爆火之后,如何打造中國(guó)版的ChatGPT成為熱門(mén)話題,并且與之相關(guān)的AIGC以及其他AI大模型應(yīng)用也都受到廣泛關(guān)注。
作為國(guó)內(nèi)頭部通用GPU高端芯片及超級(jí)算力系統(tǒng)提供商,天數(shù)智芯認(rèn)為,ChatGPT的推廣進(jìn)一步驗(yàn)證了人工智能給工作、生活帶來(lái)很大幫助,甚至不亞于工業(yè)革命的影響,可以親身體驗(yàn)到其帶來(lái)的效率上的提升。這種應(yīng)用是建立在巨大算力模型訓(xùn)練基礎(chǔ)上帶來(lái)的智能處理,因此也帶動(dòng)了0座的需求。
確實(shí),隨著以ChatGPT為代表的AIGC應(yīng)用大火,背后大模型訓(xùn)練所需要的算力也隨之暴漲。統(tǒng)計(jì)數(shù)據(jù)顯示,ChatGPT的總算力消耗約為3640PF-days(即假如每秒計(jì)算一千萬(wàn)億次,需要計(jì)算3640天),整體部署大約需要7-8個(gè)500P算力的數(shù)據(jù)中心。而根據(jù)微軟官網(wǎng)的消息,微軟Azure為OpenAI建設(shè)了一個(gè)單獨(dú)的超算中心,具有超過(guò)28.5萬(wàn)個(gè)CPU核心、1萬(wàn)個(gè)GPU和400 GB/s的GPU服務(wù)器網(wǎng)絡(luò)傳輸帶寬。
從成本上看,ChatGPT就像一個(gè)吞金獸。數(shù)據(jù)顯示,其運(yùn)行一次的費(fèi)用大概需要430萬(wàn)美元。這主要是因?yàn)镃hatGPT背后的預(yù)訓(xùn)練大模型——GPT大模型的GPT-3.5版本是一個(gè)“龐然大物”。目前,GPT-3.5模型的參數(shù)規(guī)模已經(jīng)達(dá)1750億,原始數(shù)據(jù)規(guī)模達(dá)45TB。
天數(shù)智芯表示,目前大模型參數(shù)已經(jīng)突破千億,并有更高的要求,對(duì)于訓(xùn)練芯片的通用性及兼容性有更高的要求。訓(xùn)練芯片要能支持更多的算法及改進(jìn),而且由于算力需求的規(guī)模越來(lái)越大,甚至單個(gè)算力集群無(wú)法滿足,對(duì)于異構(gòu)算力、多集群協(xié)同等方面有更高的要求,進(jìn)而對(duì)于異構(gòu)算力上的兼容性就會(huì)有更高的要求。同時(shí),由于數(shù)據(jù)量的急劇提升,對(duì)于數(shù)據(jù)的隱私保護(hù)也會(huì)有所要求,對(duì)于隱私計(jì)算在訓(xùn)練芯片上的支持也會(huì)有要求。
從微軟對(duì)ChatGPT的介紹能夠看出,這套系統(tǒng)除了模型預(yù)訓(xùn)練和日常運(yùn)行,F(xiàn)inetune模型調(diào)優(yōu)也是關(guān)鍵一環(huán)。因此,確實(shí)如天數(shù)智芯所言,雖然ChatGPT目前的算力規(guī)模和運(yùn)行費(fèi)用很高,但是這些數(shù)字還會(huì)與日俱增。
隨著ChatGPT在全球范圍內(nèi)大火,目前國(guó)內(nèi)眾多科技巨頭也相繼宣布,將推出自己的類ChatGPT應(yīng)用。比如國(guó)內(nèi)的百度,根據(jù)百度創(chuàng)始人、董事長(zhǎng)兼首席執(zhí)行官李彥宏在一封名為“百度站在AI浪潮之巔”的內(nèi)部信中表示,百度即將在3月份推出新一代的大語(yǔ)言模型“文心一言”。這也是繼“文心一格”(AI作畫(huà))、“文心百中”(產(chǎn)業(yè)搜索)之后,百度推出的又一大重磅的AI大模型應(yīng)用。
在中國(guó)版ChatGPT不斷涌現(xiàn)后,算力芯片作為供給端核心環(huán)節(jié)將率先受益,而其中又以擁有數(shù)量眾多的計(jì)算單元和超長(zhǎng)的流水線的通用GPU需求最為迫切。天數(shù)智芯表示,大規(guī)模的普及應(yīng)用會(huì)對(duì)大模型算法有更高的要求,很多科研及企業(yè)也投入到大模型算法的研究中,對(duì)于算法模型會(huì)有優(yōu)化和改進(jìn),因此對(duì)于算力底座支持的通用性及擴(kuò)展性有很高要求,因此一定程度上會(huì)降低對(duì)于定制化AI芯片的需求,促進(jìn)通用GPU市場(chǎng)的發(fā)展。
天數(shù)智芯自2021年3月推出云端訓(xùn)練通用GPU產(chǎn)品--天垓100,并于2022年12月推出云端推理通用GPU產(chǎn)品--智鎧100,截止目前,天數(shù)智芯訂單規(guī)模就已經(jīng)突破5億元。目前,基于天垓100訓(xùn)練的模型種類超過(guò)了兩百種。天數(shù)智芯表示,公司在訓(xùn)練芯片上堅(jiān)持通用GPU架構(gòu)、主流生態(tài)兼容等發(fā)展路線,對(duì)于通用性、兼容性、安全性等方面都進(jìn)行了支持,可以為ChatGPT的發(fā)展提供有效安全的算力底座。
當(dāng)然,正如中信證券在研報(bào)中指出的,目前在通用GPU方面,國(guó)際廠商在高精度浮點(diǎn)計(jì)算及CUDA生態(tài)方面還手握核心的技術(shù)壁壘,***和方案在軟硬件方面都還有一定的差距。對(duì)此,天數(shù)智芯回應(yīng)稱,堅(jiān)持通用GPU發(fā)展的路線,全面覆蓋訓(xùn)練和推理兩條產(chǎn)品發(fā)展主線。結(jié)合行業(yè)解決方案為各行業(yè)、各產(chǎn)業(yè)發(fā)展提供完整成熟的軟硬件一體化方案。在未來(lái)的產(chǎn)品發(fā)展上,逐步縮小和國(guó)際先進(jìn)產(chǎn)品的差距,為國(guó)內(nèi)人工智能發(fā)展提供強(qiáng)有力的支持。
從中長(zhǎng)期來(lái)看,ChatGPT的火爆以及中國(guó)版ChatGPT的陸續(xù)推出,對(duì)通用GPU有著巨大的需求。同時(shí),國(guó)內(nèi)AIGC市場(chǎng)將和信創(chuàng)市場(chǎng)出現(xiàn)疊加效應(yīng),讓天數(shù)智芯等相關(guān)廠商長(zhǎng)期收益,并借此機(jī)會(huì)提升產(chǎn)品迭代的速度,逐漸達(dá)到國(guó)際領(lǐng)先水平。
-
gpu
+關(guān)注
關(guān)注
28文章
4937瀏覽量
131142 -
ChatGPT
+關(guān)注
關(guān)注
29文章
1589瀏覽量
9036
發(fā)布評(píng)論請(qǐng)先 登錄
云XR(AR/VR)算力底座關(guān)鍵特征與技術(shù)路徑

【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】+NVlink技術(shù)從應(yīng)用到原理
GPU算力租用平臺(tái)有什么好處

智算中心會(huì)取代通用算力中心嗎?

首個(gè)國(guó)產(chǎn)萬(wàn)卡算力集群!賽思時(shí)間同步服務(wù)器助力?“東數(shù)西算”甘肅慶陽(yáng)樞紐節(jié)點(diǎn)打造「中國(guó)算谷」!

GPU算力開(kāi)發(fā)平臺(tái)是什么
【一文看懂】大白話解釋“GPU與GPU算力”

GPU算力租用平臺(tái)是什么
【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】--全書(shū)概覽
名單公布!【書(shū)籍評(píng)測(cè)活動(dòng)NO.43】 算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析
摩爾線程GPU算力底座助力大模型產(chǎn)業(yè)發(fā)展
算力服務(wù)器為什么選擇GPU

IaaS+on+DPU(IoD)+下一代高性能算力底座技術(shù)白皮書(shū)
神州鯤泰亮相北京數(shù)字安全大會(huì),以智能算力構(gòu)筑數(shù)據(jù)安全的堅(jiān)實(shí)底座

評(píng)論