在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

智能算力規(guī)模超通用算力,大模型對智能算力提出高要求

Carol Li ? 來源:電子發(fā)燒友網(wǎng) ? 作者:李彎彎 ? 2024-02-06 00:08 ? 次閱讀

電子發(fā)燒友網(wǎng)報道(文/李彎彎)算力是設(shè)備通過處理數(shù)據(jù),實現(xiàn)特定結(jié)果輸出的計算能力,常用FLOPS作為計量單位。FLOPS是Floating-point Operations Per Second的縮寫,即每秒所能夠進行的浮點運算數(shù)目(每秒浮點運算量)。

算力可以分為通用算力、智能算力和超算算力。早前通用算力占整體算力的比重達到90%以上,近些年隨著人工智能技術(shù)的發(fā)展,智能算力規(guī)模迅速增長。從需求層面看,2022年,中國智能算力規(guī)模為268百億億次/秒(EFLOPS),已經(jīng)超過通用算力規(guī)模。

大模型對智能算力提出更高要求

通用算力、智能算力和超算算力三者的區(qū)別在于,通用算力,由基于CPU芯片的服務(wù)器提供算力,主要用于基礎(chǔ)通用計算。日常提到的云計算、邊緣計算等都屬于基礎(chǔ)算力,它為移動計算、物聯(lián)網(wǎng)等提供計算支持。

智能算力,由基于GPUFPGAASICAI芯片的加速計算平臺提供的算力,主要用于人工智能的訓(xùn)練和推理計算,比如語音、圖像和視頻的處理。在技術(shù)架構(gòu)上,人工智能的核心計算能力由訓(xùn)練、推理等專用計算芯片提供,注重單精度、半精度等多樣化計算能力。

超算算力,由超級計算機等高性能計算集群提供算力,主要用于尖端科學(xué)領(lǐng)域的計算,比如行星模擬、藥物分子設(shè)計、基因分析等。在技術(shù)架構(gòu)上,超算的核心計算能力由高性能CPU或協(xié)處理器提供,注重雙精度通用計算能力,追求精確的數(shù)值計算。

2023年以來大模型迅猛發(fā)展,更是讓智算中心成為發(fā)展的重點。當(dāng)然,相比于之前,大模型對智算中心也提出更高要求。首先是隨著大模型規(guī)模的不斷擴大,對計算資源的需求不斷增加,智算中心需要提供更強大的計算能力來支持大模型的訓(xùn)練和推理任務(wù)。

其次是大模型需要大量的存儲空間來存儲參數(shù)、權(quán)重和中間結(jié)果,智算中心需要提供高效的存儲系統(tǒng)。第三是大模型的訓(xùn)練和推理過程中會產(chǎn)生大量的數(shù)據(jù),需要進行頻繁的數(shù)據(jù)傳輸和通信,智算中心需要具備高速的網(wǎng)絡(luò)連接和大規(guī)模的數(shù)據(jù)傳輸能力。

第四則是大模型的訓(xùn)練和推理過程需要大量的計算資源,導(dǎo)致能源消耗的增加,智算中心需要采取節(jié)能措施,如使用高效的硬件設(shè)備和優(yōu)化算法,以降低能源消耗。另外還有,大模型的訓(xùn)練和推理過程需要進行復(fù)雜的模型管理和調(diào)度,包括模型版本控制、并行訓(xùn)練和推理等,智算中心需要提供相應(yīng)的管理和調(diào)度工具來支持這些任務(wù)。

各地和企業(yè)建設(shè)智算中心支持大模型

對于各地方和企業(yè)來說,建設(shè)能夠支持大模型的智算中心已經(jīng)成為當(dāng)下的重點。近日,上海電信聯(lián)合徐匯區(qū)政府共同舉辦“算力惠模都 萬兆連速城”人工智能公共算力服務(wù)產(chǎn)品發(fā)布會,消息稱,2024年上半年,中國電信將在上海規(guī)劃建設(shè)到達15000卡,總算力超4500P。其中,單池新建國產(chǎn)算力達萬卡,是國內(nèi)首個超大規(guī)模國產(chǎn)算力液冷集群。

據(jù)介紹,該集群采用新一代國產(chǎn)AI算力,實現(xiàn)了全棧自主創(chuàng)新和技術(shù)突破,通過高速RDMA(遠程直接數(shù)據(jù)存取)連接各物理機節(jié)點,提供低延時、高吞吐量、無損通信網(wǎng)絡(luò)和強大的并行計算能力,是目前規(guī)模最大的全國產(chǎn)液冷機房,多項技術(shù)指標(biāo)領(lǐng)跑全國。

該集群最高可支持萬億參數(shù)大模型,便于各科研院校、大模型訓(xùn)練公司等機構(gòu)和企業(yè)實現(xiàn)物理資源獨享,無虛擬化損耗,滿足AI計算、深度學(xué)習(xí)、圖形渲染等復(fù)雜訓(xùn)練任務(wù)對算力的要求。

早前廣州海珠區(qū)和中國電信廣州分公司也攜手揭牌了粵港澳大灣區(qū)首個服務(wù)大模型的智算中心。該智算中心搭載華為最新一代高端算力芯片昇騰910B,昇騰910B在大模型訓(xùn)練場景性能和A100持平,可提供全流程工具輔助大模型遷移。

中國電信廣州分公司云技術(shù)總監(jiān)時瑞表示,目前各種個性化推薦算法都需要調(diào)用智算,包括人臉識別、汽車自動駕駛等各種場景。他介紹,中心目前建成算力100P,計劃兩年內(nèi)擴展到300P。海珠區(qū)相關(guān)負(fù)責(zé)人表示,該智算中心定位服務(wù)大模型,主要服務(wù)于廣州市人工智能與數(shù)字經(jīng)濟試驗區(qū)至粵港澳大灣區(qū)大模型研發(fā)運用。

寫在最后

隨著人工智能技術(shù)發(fā)展,智能算力的規(guī)模已經(jīng)超過通用算力。近年來,大模型迅猛發(fā)展,使得智能算力市場需求會越來越大,同時大模型也給智能算力提出更高要求。為了抓住大模型發(fā)展帶來的產(chǎn)業(yè)機會,各地及企業(yè)都在積極建設(shè)智算中心來支持大模型訓(xùn)練部署。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 算力
    +關(guān)注

    關(guān)注

    1

    文章

    1023

    瀏覽量

    14971
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    2595

    瀏覽量

    3210
收藏 人收藏

    評論

    相關(guān)推薦

    DeepSeek對芯片的影響

    DeepSeek模型,尤其是其基于MOE(混合專家)架構(gòu)的DeepSeek-V3,對芯片要求產(chǎn)生了深遠影響。為了更好地理解這一影響,我們可以從幾個方面進行分析。一.MOE架構(gòu)對
    的頭像 發(fā)表于 02-07 10:02 ?209次閱讀
    DeepSeek對芯片<b class='flag-5'>算</b><b class='flag-5'>力</b>的影響

    中心的如何衡量?

    作為當(dāng)下科技發(fā)展的重要基礎(chǔ)設(shè)施,其的衡量關(guān)乎其能否高效支撐人工智能、大數(shù)據(jù)分析等智能應(yīng)用的運行。以下是對智中心算
    的頭像 發(fā)表于 01-16 14:03 ?549次閱讀
    <b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?

    科技云報到:要更要“利”,“精裝”觸發(fā)大模型產(chǎn)業(yè)新變局?

    科技云報到:要更要“利”,“精裝”觸發(fā)大模型產(chǎn)業(yè)新變局?
    的頭像 發(fā)表于 01-16 10:24 ?125次閱讀

    融合 南京信易達發(fā)布全新“智能融合平臺”

    1月7日,南京信易達發(fā)布了旗下最新平臺“C-MOM智能融合平臺V3.0”,并更新了全新的UI視覺與交互系統(tǒng)。 該平臺集成了HPC
    的頭像 發(fā)表于 01-08 10:56 ?162次閱讀
    <b class='flag-5'>超</b><b class='flag-5'>算</b>智<b class='flag-5'>算</b>融合 南京信易達發(fā)布全新“<b class='flag-5'>智能</b><b class='flag-5'>算</b><b class='flag-5'>力</b>融合平臺”

    中心會取代通用中心嗎?

    隨著人工智能(AI)技術(shù)的飛速發(fā)展,計算需求不斷攀升,數(shù)據(jù)中心行業(yè)正經(jīng)歷著前所未有的變革。傳統(tǒng)的通用中心與新興的智中心之間的競爭日益激
    的頭像 發(fā)表于 01-06 14:45 ?190次閱讀
    智<b class='flag-5'>算</b>中心會取代<b class='flag-5'>通用</b><b class='flag-5'>算</b><b class='flag-5'>力</b>中心嗎?

    基礎(chǔ)篇:從零開始了解

    即計算能力(Computing Power),狹義上指對數(shù)字問題的運算能力,而廣義上指對輸入信息處理后實現(xiàn)結(jié)果輸出的一種能力。雖然處理的內(nèi)容不同,但處理過程的能力都可抽象為。比
    的頭像 發(fā)表于 11-15 14:22 ?1061次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎(chǔ)篇:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    中國大會召開,業(yè)界首個高質(zhì)量評估體系發(fā)布

    首次完整地構(gòu)建了人工智能時代高質(zhì)量的理論體系,并探索性提出業(yè)界首個 "五位一體"的高質(zhì)量
    的頭像 發(fā)表于 09-28 16:50 ?300次閱讀
    中國<b class='flag-5'>算</b><b class='flag-5'>力</b>大會召開,業(yè)界首個<b class='flag-5'>算</b><b class='flag-5'>力</b>高質(zhì)量評估體系發(fā)布

    淺析三大之異同

    隨著一年多前ChatGPT的出現(xiàn)引爆人工智能(AI)浪潮,支撐大模型背后的“”概念突然闖進我們的視野,成為科技圈炙手可熱的新詞,引領(lǐng)著最新潮流。作為數(shù)字經(jīng)濟時代新生產(chǎn)
    的頭像 發(fā)表于 08-30 12:56 ?1234次閱讀
    淺析三大<b class='flag-5'>算</b><b class='flag-5'>力</b>之異同

    模型時代的需求

    現(xiàn)在AI已進入大模型時代,各企業(yè)都爭相部署大模型,但如何保證大模型,以及相關(guān)的穩(wěn)定性和性能,是一個極為重要的問題,帶著這個極為重要的問
    發(fā)表于 08-20 09:04

    中國中心市場持續(xù)增長,智能規(guī)模快速崛起

    7月24日,中國信息通信研究院(簡稱“中國信通院”)權(quán)威發(fā)布了《中國中心服務(wù)商分析報告(2024年)》,該報告深入剖析了中國中心市場的現(xiàn)狀與未來趨勢,揭示了我國在全球
    的頭像 發(fā)表于 07-24 15:25 ?586次閱讀

    力系列基礎(chǔ)篇——與計算機性能:解鎖超能力的神秘力量!

    在《力系列基礎(chǔ)篇——101:從零開始了解》中,相信各位粉絲初步了解到人工智能的“發(fā)動機
    的頭像 發(fā)表于 07-11 08:04 ?104次閱讀
    <b class='flag-5'>算</b>力系列基礎(chǔ)篇——<b class='flag-5'>算</b><b class='flag-5'>力</b>與計算機性能:解鎖超能力的神秘力量!

    力系列基礎(chǔ)篇——101:從零開始了解

    相信大家已經(jīng)感受到,我們正處在一個人工智能時代。如果要問在人工智能時代最重要的是什么?那必須是:
    的頭像 發(fā)表于 04-24 08:05 ?1002次閱讀
    <b class='flag-5'>算</b>力系列基礎(chǔ)篇——<b class='flag-5'>算</b><b class='flag-5'>力</b>101:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    廣東:到2025年,規(guī)模38E,智50%,國產(chǎn)70%

    目標(biāo),提出了6大類22項重點任務(wù)。據(jù)了解,近年來,廣東持續(xù)加快建設(shè),電信運營商已完成粵港澳大灣區(qū)超高速400G全光運力網(wǎng)絡(luò)建設(shè),實現(xiàn)韶關(guān)到廣州、深圳單向時延分
    的頭像 發(fā)表于 04-23 08:25 ?564次閱讀
    廣東:到2025年,<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>規(guī)模</b>38E,智<b class='flag-5'>算</b>50%,國產(chǎn)<b class='flag-5'>算</b><b class='flag-5'>力</b>70%

    上海市實施“浦江”智行動,推動智能基礎(chǔ)設(shè)施高質(zhì)量發(fā)展

    目標(biāo)是使上海市智能總量超越30EFlops,占比達總計算的50%以上。同時,要求
    的頭像 發(fā)表于 03-25 16:33 ?899次閱讀
    主站蜘蛛池模板: 久久狠狠第一麻豆婷婷天天 | 女人扒开腿让男人桶到爽 | 热久久最新视频 | 狠狠五月天小说 | 亚洲haose在线观看 | 性生活一区 | 小屁孩cao大人免费网站 | 美女扒开尿口给男人爽免费视频 | mide-776中文字幕在线 | 1000rt人体1000欧美 | 欧美黑人粗暴另类多交 | 精品乩伦视频 | 午夜特级毛片 | 精品国产1000部91麻豆 | 一级aa 毛片高清免费看 | 特级毛片免费视频播放 | 午夜在线播放 | 韩国三级精品 | 色六月婷婷 | 色多多在线看 | 欧美午夜性 | 黄频免费| 在线观看h网站 | 天天色综合5 | 女人特黄大aaaaaa大片 | 日本在线不卡一区二区 | 深爱激情站| 午夜高清视频在线观看 | 亚洲综合激情六月婷婷在线观看 | 717影院理伦午夜论八戒 | 色男人在线 | 男人的天堂午夜 | 欲色影院 | 在线免费看污视频 | 狠狠干欧美 | 久久亚洲国产精品五月天 | 婷婷综合七月激情啪啪 | 色播亚洲| 99热最新在线观看 | 51国产午夜精品免费视频 | 四虎影院在线视频 |