電子發(fā)燒友網(wǎng)報道(文/李彎彎)算力是設(shè)備通過處理數(shù)據(jù),實現(xiàn)特定結(jié)果輸出的計算能力,常用FLOPS作為計量單位。FLOPS是Floating-point Operations Per Second的縮寫,即每秒所能夠進行的浮點運算數(shù)目(每秒浮點運算量)。
算力可以分為通用算力、智能算力和超算算力。早前通用算力占整體算力的比重達到90%以上,近些年隨著人工智能技術(shù)的發(fā)展,智能算力規(guī)模迅速增長。從需求層面看,2022年,中國智能算力規(guī)模為268百億億次/秒(EFLOPS),已經(jīng)超過通用算力規(guī)模。
大模型對智能算力提出更高要求
通用算力、智能算力和超算算力三者的區(qū)別在于,通用算力,由基于CPU芯片的服務(wù)器提供算力,主要用于基礎(chǔ)通用計算。日常提到的云計算、邊緣計算等都屬于基礎(chǔ)算力,它為移動計算、物聯(lián)網(wǎng)等提供計算支持。
智能算力,由基于GPU、FPGA、ASIC等AI芯片的加速計算平臺提供的算力,主要用于人工智能的訓(xùn)練和推理計算,比如語音、圖像和視頻的處理。在技術(shù)架構(gòu)上,人工智能的核心計算能力由訓(xùn)練、推理等專用計算芯片提供,注重單精度、半精度等多樣化計算能力。
超算算力,由超級計算機等高性能計算集群提供算力,主要用于尖端科學(xué)領(lǐng)域的計算,比如行星模擬、藥物分子設(shè)計、基因分析等。在技術(shù)架構(gòu)上,超算的核心計算能力由高性能CPU或協(xié)處理器提供,注重雙精度通用計算能力,追求精確的數(shù)值計算。
2023年以來大模型迅猛發(fā)展,更是讓智算中心成為發(fā)展的重點。當(dāng)然,相比于之前,大模型對智算中心也提出更高要求。首先是隨著大模型規(guī)模的不斷擴大,對計算資源的需求不斷增加,智算中心需要提供更強大的計算能力來支持大模型的訓(xùn)練和推理任務(wù)。
其次是大模型需要大量的存儲空間來存儲參數(shù)、權(quán)重和中間結(jié)果,智算中心需要提供高效的存儲系統(tǒng)。第三是大模型的訓(xùn)練和推理過程中會產(chǎn)生大量的數(shù)據(jù),需要進行頻繁的數(shù)據(jù)傳輸和通信,智算中心需要具備高速的網(wǎng)絡(luò)連接和大規(guī)模的數(shù)據(jù)傳輸能力。
第四則是大模型的訓(xùn)練和推理過程需要大量的計算資源,導(dǎo)致能源消耗的增加,智算中心需要采取節(jié)能措施,如使用高效的硬件設(shè)備和優(yōu)化算法,以降低能源消耗。另外還有,大模型的訓(xùn)練和推理過程需要進行復(fù)雜的模型管理和調(diào)度,包括模型版本控制、并行訓(xùn)練和推理等,智算中心需要提供相應(yīng)的管理和調(diào)度工具來支持這些任務(wù)。
各地和企業(yè)建設(shè)智算中心支持大模型
對于各地方和企業(yè)來說,建設(shè)能夠支持大模型的智算中心已經(jīng)成為當(dāng)下的重點。近日,上海電信聯(lián)合徐匯區(qū)政府共同舉辦“算力惠模都 萬兆連速城”人工智能公共算力服務(wù)產(chǎn)品發(fā)布會,消息稱,2024年上半年,中國電信將在上海規(guī)劃建設(shè)到達15000卡,總算力超4500P。其中,單池新建國產(chǎn)算力達萬卡,是國內(nèi)首個超大規(guī)模國產(chǎn)算力液冷集群。
據(jù)介紹,該集群采用新一代國產(chǎn)AI算力,實現(xiàn)了全棧自主創(chuàng)新和技術(shù)突破,通過高速RDMA(遠程直接數(shù)據(jù)存取)連接各物理機節(jié)點,提供低延時、高吞吐量、無損通信網(wǎng)絡(luò)和強大的并行計算能力,是目前規(guī)模最大的全國產(chǎn)液冷機房,多項技術(shù)指標(biāo)領(lǐng)跑全國。
該集群最高可支持萬億參數(shù)大模型,便于各科研院校、大模型訓(xùn)練公司等機構(gòu)和企業(yè)實現(xiàn)物理資源獨享,無虛擬化損耗,滿足AI計算、深度學(xué)習(xí)、圖形渲染等復(fù)雜訓(xùn)練任務(wù)對算力的要求。
早前廣州海珠區(qū)和中國電信廣州分公司也攜手揭牌了粵港澳大灣區(qū)首個服務(wù)大模型的智算中心。該智算中心搭載華為最新一代高端算力芯片昇騰910B,昇騰910B在大模型訓(xùn)練場景性能和A100持平,可提供全流程工具輔助大模型遷移。
中國電信廣州分公司云技術(shù)總監(jiān)時瑞表示,目前各種個性化推薦算法都需要調(diào)用智算,包括人臉識別、汽車自動駕駛等各種場景。他介紹,中心目前建成算力100P,計劃兩年內(nèi)擴展到300P。海珠區(qū)相關(guān)負(fù)責(zé)人表示,該智算中心定位服務(wù)大模型,主要服務(wù)于廣州市人工智能與數(shù)字經(jīng)濟試驗區(qū)至粵港澳大灣區(qū)大模型研發(fā)運用。
寫在最后
隨著人工智能技術(shù)發(fā)展,智能算力的規(guī)模已經(jīng)超過通用算力。近年來,大模型迅猛發(fā)展,使得智能算力市場需求會越來越大,同時大模型也給智能算力提出更高要求。為了抓住大模型發(fā)展帶來的產(chǎn)業(yè)機會,各地及企業(yè)都在積極建設(shè)智算中心來支持大模型訓(xùn)練部署。
-
算力
+關(guān)注
關(guān)注
1文章
1023瀏覽量
14971 -
大模型
+關(guān)注
關(guān)注
2文章
2595瀏覽量
3210
發(fā)布評論請先 登錄
相關(guān)推薦
DeepSeek對芯片算力的影響
![DeepSeek對芯片<b class='flag-5'>算</b><b class='flag-5'>力</b>的影響](https://file.elecfans.com/web2/M00/43/36/poYBAGJ82TeAPsAHAAA_r6nG8nE277.jpg)
![](https://file1.elecfans.com/web3/M00/06/DA/wKgZO2ePxA2AEaTzAAQet3Edt48898.jpg)
算智算中心的算力如何衡量?
![<b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?](https://file.elecfans.com/web2/M00/4E/DC/poYBAGLCjeiALm_WAAAYmfR7Qec474.png)
科技云報到:要算力更要“算利”,“精裝算力”觸發(fā)大模型產(chǎn)業(yè)新變局?
超算智算融合 南京信易達發(fā)布全新“智能算力融合平臺”
![<b class='flag-5'>超</b><b class='flag-5'>算</b>智<b class='flag-5'>算</b>融合 南京信易達發(fā)布全新“<b class='flag-5'>智能</b><b class='flag-5'>算</b><b class='flag-5'>力</b>融合平臺”](https://file1.elecfans.com//web3/M00/05/3D/wKgZO2d96WyADY5XAACh65mkUrY128.png)
智算中心會取代通用算力中心嗎?
![智<b class='flag-5'>算</b>中心會取代<b class='flag-5'>通用</b><b class='flag-5'>算</b><b class='flag-5'>力</b>中心嗎?](https://file.elecfans.com/web2/M00/4E/DC/poYBAGLCjeiALm_WAAAYmfR7Qec474.png)
算力基礎(chǔ)篇:從零開始了解算力
![<b class='flag-5'>算</b><b class='flag-5'>力</b>基礎(chǔ)篇:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>](https://file1.elecfans.com/web1/M00/F5/1F/wKgZoWc26EKAG7z7AAA0E3Nf2hk998.png)
中國算力大會召開,業(yè)界首個算力高質(zhì)量評估體系發(fā)布
![中國<b class='flag-5'>算</b><b class='flag-5'>力</b>大會召開,業(yè)界首個<b class='flag-5'>算</b><b class='flag-5'>力</b>高質(zhì)量評估體系發(fā)布](https://file1.elecfans.com//web2/M00/08/70/wKgZomb3w0KAbiCRAAEZF6NET6E646.jpg)
淺析三大算力之異同
![淺析三大<b class='flag-5'>算</b><b class='flag-5'>力</b>之異同](https://file.elecfans.com/web2/M00/4E/DC/poYBAGLCjeiALm_WAAAYmfR7Qec474.png)
大模型時代的算力需求
中國算力中心市場持續(xù)增長,智能算力規(guī)模快速崛起
廣東:到2025年,算力規(guī)模38E,智算50%,國產(chǎn)算力70%
![廣東:到2025年,<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>規(guī)模</b>38E,智<b class='flag-5'>算</b>50%,國產(chǎn)<b class='flag-5'>算</b><b class='flag-5'>力</b>70%](https://file.elecfans.com/web2/M00/5A/44/pYYBAGLpEg2AcCg-AAAr4Mmgt_c862.png)
評論