在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

宏觀算力建設(shè)實現(xiàn)芯片規(guī)模化

Dbwd_Imgtec ? 來源:軟硬件融合 ? 作者:軟硬件融合 ? 2022-07-05 10:20 ? 次閱讀

1、算力由性能、規(guī)模和利用率三部分組成

算力 = (單芯片)性能 x 規(guī)模(即數(shù)量) x 利用率。

8388782c-fbfb-11ec-ba43-dac502259ad0.png

算力是由性能、規(guī)模、利用率三部分共同組成的,相輔相成,缺一不可:

有的算力芯片,可能可以做到性能狂飆,但較少考慮芯片的通用性易用性,然后芯片銷量不高落地規(guī)模小,那就無法做到宏觀算力的真正提升。

有的算力提升方案,重在規(guī)模投入,攤大餅有一定作用,但不是解決未來算力需求數(shù)量級提升的根本。

有的解決方案,通過各種資源池化和跨不同的邊界算力共享,來提升算力利用率,但改變不了目前算力芯片性能瓶頸的本質(zhì)。

性能、規(guī)模、利用率,宏觀微觀,牽一發(fā)而動全身。管中窺豹終有偏,既要考慮多種因素協(xié)同設(shè)計,更要宏觀的統(tǒng)籌算力問題。

2、最核心的,通過超異構(gòu)實現(xiàn)芯片性能的數(shù)量級提升

83980a62-fbfb-11ec-ba43-dac502259ad0.png

一方面,超異構(gòu)可以通過集成更多的加速引擎來實現(xiàn)相比CPUGPU的性能的數(shù)量級提升,但更多的計算是在DSA架構(gòu)引擎完成的,從單位晶體管資源的性能效率視角看,是和DSA在一個量級的。

工藝進步、3D封裝、Chiplet封裝等各種創(chuàng)新,支持?jǐn)?shù)量級提升的設(shè)計規(guī)模。但要想充分利用這些價值,就需要創(chuàng)新的系統(tǒng)架構(gòu)。超異構(gòu)計算,通過分布式系統(tǒng)設(shè)計,可以駕馭數(shù)量級提升的更大的設(shè)計規(guī)模。因此,可以做到相比傳統(tǒng)DSA再繼續(xù)10倍甚至100倍的性能提升。

3、在超異構(gòu)的約束下,實現(xiàn)規(guī)模化落地

3.1 芯片要更好地支持規(guī)模化

從微服務(wù)的視角,云計算是由不同的服務(wù)組成的分層服務(wù)體系:每一層就是一個服務(wù)族,然后不同層次的服務(wù)族組成整個云計算服務(wù)體系,這就是我們所熟悉的云計算三層服務(wù)IaaS、PaaS和SaaS。

83a22a6a-fbfb-11ec-ba43-dac502259ad0.png

更詳細的軟件堆棧如上圖所示,從非云系統(tǒng)所有的“服務(wù)”堆棧都需要用戶自己擁有并維護,經(jīng)過IaaS、CaaS、PaaS、FaaS,再到最后的SaaS,一切都由供應(yīng)商運營維護。從左到右的過程,就是“服務(wù)”堆棧的下層layer不斷地由云運營商接管的過程。

這是一個鮮明的“二八定律”案例:80%的任務(wù)由云運營商負責(zé),20%的任務(wù)由用戶負責(zé);站在用戶的角度,20%自己負責(zé)的任務(wù)價值占到80%,而運營商負責(zé)的部分只占到到20%的價值。

83b329d2-fbfb-11ec-ba43-dac502259ad0.png

因此,基于二八定律,我們可以把整個系統(tǒng)分為三部分:

基礎(chǔ)設(shè)施層。基礎(chǔ)設(shè)施層的任務(wù)都相對確定,適合DSA和ASIC處理引擎處理。

應(yīng)用層可加速部分任務(wù)。基礎(chǔ)設(shè)施層是CSP使用,而應(yīng)用層則是給到用戶應(yīng)用。用戶的應(yīng)用多種多樣,因此應(yīng)用層的加速也需要一定程度的彈性。這樣,GPU和FPGA就相對比較合適。

應(yīng)用層的不可加速部分。主要是一些通用的處理,如控制以及一些細粒度的計算。協(xié)處理器是CPU的一部分。因此,CPU適合各類通用任務(wù)處理,CPU負責(zé)兜底。

83be9db2-fbfb-11ec-ba43-dac502259ad0.png

如上圖所示,整個系統(tǒng)的處理有點像塔防游戲:DSA負責(zé)干粗活累活,大量的計算任務(wù)在DSA中完成;GPU是性能和靈活性折中一些,負責(zé)一些彈性加速的計算任務(wù);CPU啥都能干,但性能較差,因此負責(zé)兜底,也就是其他處理引擎都干不了的,都放在CPU。

這樣,CPU+GPU+DSA+etc.的超異構(gòu)計算架構(gòu)就可以實現(xiàn)“包治百病”的、相對通用的計算架構(gòu)和平臺,就可以實現(xiàn)在云、網(wǎng)、邊、端等大算力場景以及用戶的絕大部分覆蓋。

更多場景和更多用戶的覆蓋,這樣才能真正實現(xiàn)芯片的規(guī)模化落地。芯片的大規(guī)模落地之后,又進一步攤薄一次性研發(fā)成本,進一步降低成本,形成良性循環(huán)。

3.2 宏觀算力建設(shè)實現(xiàn)芯片規(guī)模化

要想持續(xù)不斷地增加算力,不可避免的就是建設(shè)更多的數(shù)據(jù)中心。2022年2月,國家發(fā)改委、中央網(wǎng)信辦、工業(yè)和信息化部、國家能源局聯(lián)合印發(fā)通知,同意在京津冀、長三角、粵港澳大灣區(qū)、成渝、內(nèi)蒙古、貴州、甘肅、寧夏等8地啟動建設(shè)國家算力樞紐節(jié)點,并規(guī)劃了10個國家數(shù)據(jù)中心集群。至此,全國一體化大數(shù)據(jù)中心體系完成總體布局設(shè)計,“東數(shù)西算”工程正式全面啟動。

“東數(shù)西算”通過構(gòu)建數(shù)據(jù)中心、云計算、大數(shù)據(jù)一體化的新型算力網(wǎng)絡(luò)體系,將東部算力需求有序引導(dǎo)到西部,優(yōu)化數(shù)據(jù)中心建設(shè)布局,促進東西部協(xié)同聯(lián)動。“東數(shù)西算”工程有三個總體思路:一是推動全國數(shù)據(jù)中心適度集聚、集約發(fā)展。通過在全國布局8個算力樞紐,引導(dǎo)大型、超大型數(shù)據(jù)中心向樞紐內(nèi)集聚,形成數(shù)據(jù)中心集群。二是促進數(shù)據(jù)中心由東向西梯次布局、統(tǒng)籌發(fā)展。三是實現(xiàn)“東數(shù)西算”循序漸進、快速迭代。

除了大型云數(shù)據(jù)中心建設(shè)之外,也需要更多的邊緣數(shù)據(jù)中心和服務(wù)器、更多的超高算力的智慧終端,以及更智慧的網(wǎng)絡(luò)核心設(shè)備,來共同提升宏觀總算力。

4、在超異構(gòu)的約束下,提升算力利用率

4.1 提升算力利用率的手段

云計算出現(xiàn)之前,部署一套互聯(lián)網(wǎng)系統(tǒng),一般有兩種方式:小規(guī)模的時候,自己購買物理的服務(wù)器,然后租用運營商的機房;超過一定規(guī)模的時候,就需要自己建機房,租用運營商的網(wǎng)絡(luò),自己運維數(shù)據(jù)中心的軟件和硬件。這個時候的算力資源是一個個孤島,整個業(yè)務(wù)的模式也非常之重,成本很高而且彈性不足。如果算力資源配置比較多,就意味著資源浪費和利用率低;如果算力資源配置比較少,就意味著無法支撐業(yè)務(wù)的發(fā)展,丟失關(guān)鍵的商業(yè)機會。

云計算通過互聯(lián)網(wǎng)按需提供IT資源,并且采用按使用量付費的方式。用戶可以根據(jù)需要從云服務(wù)商那里獲得技術(shù)服務(wù),例如計算能力、存儲和數(shù)據(jù)庫,而無需購買、擁有和維護物理數(shù)據(jù)中心及服務(wù)器。云服務(wù)使用多少支付多少,可以幫助用戶降低運維成本,用戶可以根據(jù)業(yè)務(wù)需求的變化快速調(diào)整服務(wù)的使用。

其他如基于分布式云的邊緣計算、跨不同云廠家的MSP、算力網(wǎng)絡(luò)以及云網(wǎng)邊端融合等,都是盡可能的把算力資源整合成一個巨大的資源池,然后可以靈活的根據(jù)各種完全動態(tài)變化的需求來提供合適的算力。

我們分析一下,要想提升算力利用率,肯定不能是算力的孤島:

第一個階段,所有的設(shè)備是孤島,各自要實現(xiàn)各自的所有功能。軟件應(yīng)用也是單機版,算力利用率很低,應(yīng)用的規(guī)模受單個硬件規(guī)格的限制;

第二階段,有了互聯(lián)網(wǎng),不同的設(shè)備可以進行協(xié)作。可以通過C/S架構(gòu)實現(xiàn)跨設(shè)備的軟件應(yīng)用協(xié)作。這樣,應(yīng)用的規(guī)模就突破了單個設(shè)備的約束。

第三階段,所有的算力資源形成一個整體。可以自動的、任意的切分算力資源。軟件也升級成了MicroService架構(gòu)。這樣可以根據(jù)設(shè)備的規(guī)格大小,運行合適大小合適數(shù)量的微服務(wù)。只有資源形成巨大的資源池,然后通過各種運營管理,才能真正提高算力的利用率。

4.2 芯片視角看算力利用率

資源池化是提升算力利用率的根本途徑,但資源要想池化,對硬件有很高的要求:

不同設(shè)備架構(gòu)/接口一致。比如CPU等引擎架構(gòu)一致(比如都是x86架構(gòu)平臺),那么軟件可以運行在任何一個設(shè)備上,硬件也可以支持各種不同的軟件運行。比如NVMe SSD,可以被不同的用戶訪問,也可以同時或分時地支持多種用戶的工作。

支持虛擬化。一方面是資源粒度的問題,另一方面是資源自由和動態(tài)分配的問題,都可以通過虛擬化技術(shù)解決。虛擬化還可以實現(xiàn)不同架構(gòu)/接口的抽象,屏蔽硬件差異。

83e87588-fbfb-11ec-ba43-dac502259ad0.png

通常,算力的平臺都是CPU,而且目前x86架構(gòu)CPU占據(jù)了絕大部分市場份額,并且x86 CPU對虛擬化的支持也非常的好。CPU對資源池化的支持,或者說對算力更高利用率的支持,是相當(dāng)?shù)挠押谩?/p>

但是,隨著性能需求越來越高,不得不通過超異構(gòu)計算來數(shù)量級提升算力的時候,問題出現(xiàn)了。在超異構(gòu)的架構(gòu)下,如何實現(xiàn)更高的靈活性,如何實現(xiàn)更高的擴展性,如何實現(xiàn)各類資源的輕松便捷地池化和共享,則是一個全新的挑戰(zhàn):

處理引擎要支持虛擬化和高可擴展性;

軟件可以跨不同廠家的、不同架構(gòu)處理引擎;

軟件可以跨跨CPU、GPU、DSA等不同類型處理引擎;

軟件可以跨云網(wǎng)邊端。

5、展望,云網(wǎng)邊端大融合

83fdf908-fbfb-11ec-ba43-dac502259ad0.png

在虛擬化的加持下,軟件可以實現(xiàn)完全高可用:軟件可以脫離硬件實體,隨意的尋找合適的平臺運行,自適應(yīng)的在云、網(wǎng)、邊、端運行。

隨著CPU的性能瓶頸,I/O虛擬化技術(shù)完全硬件化的情況下,硬件接口直接暴露給軟件,這就需要云數(shù)據(jù)中心內(nèi)部,以及跨云邊端的硬件平臺一致性。

要想實現(xiàn)跨云網(wǎng)邊端、跨不同廠家的芯片平臺、跨不同類型不同架構(gòu)的處理引擎,就需要芯片、系統(tǒng)、框架和庫、以及上層應(yīng)用的多方協(xié)同,就需要開源開放的超異構(gòu)計算生態(tài)。

萬物互聯(lián),當(dāng)所有的設(shè)備算力資源匯集成一個大的共享資源池,算力資源將取之不盡用之不竭。

原文標(biāo)題:再來聊聊大家都經(jīng)常聊的算力話題

文章出處:【微信公眾號:Imagination Tech】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

審核編輯:彭靜
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19714

    瀏覽量

    232713
  • 芯片
    +關(guān)注

    關(guān)注

    459

    文章

    51893

    瀏覽量

    433253
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11003

    瀏覽量

    215037
  • 算力
    +關(guān)注

    關(guān)注

    1

    文章

    1099

    瀏覽量

    15335

原文標(biāo)題:再來聊聊大家都經(jīng)常聊的算力話題

文章出處:【微信號:Imgtec,微信公眾號:Imagination Tech】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    “四合一”平臺,芯片國產(chǎn)率超九成,兼容8種國產(chǎn)AI芯片

    調(diào)度平臺可支持每天上億次的調(diào)用,能調(diào)度全國1/6的規(guī)模網(wǎng)一體
    的頭像 發(fā)表于 04-13 00:03 ?2099次閱讀

    華為SPN技術(shù)助力網(wǎng)絡(luò)和數(shù)聯(lián)網(wǎng)發(fā)展

    近期,在蘇州舉行的2025中國移動云智大會上,SPN(Slicing Packet Network,切片分組網(wǎng))融合AI能力在多個論壇和展區(qū)亮相,成為網(wǎng)絡(luò)和數(shù)聯(lián)網(wǎng)領(lǐng)域重要解決方案,為行業(yè)數(shù)字
    的頭像 發(fā)表于 04-15 16:38 ?253次閱讀

    芯片的生態(tài)突圍與革命

    據(jù)的爆發(fā)式增長,大芯片已成為科技競爭的核心領(lǐng)域之一。 ? 大芯片的核心應(yīng)用場景豐富多樣。
    的頭像 發(fā)表于 04-13 00:02 ?1181次閱讀

    智能最具潛力的行業(yè)領(lǐng)域

    智能最具潛力的行業(yè)領(lǐng)域 一、金融行業(yè) 智能風(fēng)控與精準(zhǔn)服務(wù)?:大型銀行通過集群(6.27萬臺服務(wù)器)支撐AI模型訓(xùn)練,實現(xiàn)風(fēng)險預(yù)警、智
    的頭像 發(fā)表于 04-11 08:20 ?134次閱讀
    智能<b class='flag-5'>算</b><b class='flag-5'>力</b>最具潛力的行業(yè)領(lǐng)域

    DeepSeek推動AI需求:800G光模塊的關(guān)鍵作用

    類型和功耗選項,是數(shù)據(jù)中心向800G帶寬擴展的理想選擇。 市場前景廣闊: 隨著AI需求的不斷增長,尤其是在超大規(guī)模數(shù)據(jù)中心和AI集群的建設(shè)中,對高帶寬光模塊的需求愈加迫切。
    發(fā)表于 03-25 12:00

    星凡星啟,全面助力集群建設(shè)

    ,同時地面建設(shè)100個地基訓(xùn)推一體節(jié)點,建成后總算預(yù)計將達到80000P。“星算計劃”打造的地面
    的頭像 發(fā)表于 12-10 11:36 ?781次閱讀
    星凡星啟,全面助力<b class='flag-5'>算</b><b class='flag-5'>力</b>集群<b class='flag-5'>建設(shè)</b>

    江波龍自研主控芯片實現(xiàn)規(guī)模化導(dǎo)入

    近日,江波龍在接受機構(gòu)調(diào)研時透露,公司兩款自研主控芯片WM6000和WM5000已經(jīng)成功實現(xiàn)批量出貨,并完成了超千萬顆的規(guī)模化產(chǎn)品導(dǎo)入,市場反饋良好。
    的頭像 發(fā)表于 11-11 16:07 ?791次閱讀

    OCTC發(fā)布&quot;工廠&quot;!力促智中心高效規(guī)劃建設(shè)投運

    創(chuàng)新提出面向未來數(shù)據(jù)中心的"工廠"模式,核心是以規(guī)(劃)、建(設(shè))、運(營)一體的交鑰匙工程,實現(xiàn)中心快速投運、綠色低碳,在當(dāng)前A
    的頭像 發(fā)表于 10-11 09:10 ?741次閱讀
    OCTC發(fā)布&quot;<b class='flag-5'>算</b><b class='flag-5'>力</b>工廠&quot;!力促智<b class='flag-5'>算</b>中心高效規(guī)劃<b class='flag-5'>建設(shè)</b>投運

    IaaS+on+DPU(IoD)+下一代高性能底座技術(shù)白皮書

    規(guī)模生產(chǎn)環(huán)境落地應(yīng)用的條件。某種程度上,IoD 技術(shù)已成為下一代高性能底座的核心技術(shù)與最佳實踐。 白皮書下載:*附件:IaaS+on+DPU(IoD)+下一代高性能
    發(fā)表于 07-24 15:32

    東土科技自主研發(fā)的人工智能交通服務(wù)器實現(xiàn)規(guī)模化應(yīng)用

    在智能交通領(lǐng)域,一場由東土科技引領(lǐng)的技術(shù)革新正悄然改變著城市交通的面貌。近日,東土科技自主研發(fā)的人工智能交通服務(wù)器在北京城市副中心通州區(qū)成功實現(xiàn)了580處交通路口的規(guī)模化應(yīng)用,標(biāo)志著我國智能交通建設(shè)邁出了堅實的一步。
    的頭像 發(fā)表于 07-17 15:42 ?610次閱讀

    曙光攜手“互聯(lián)公共服務(wù)平臺”提高全國匹配效率

    的互聯(lián)互通,助力“互聯(lián)公共服務(wù)平臺”功能完善,實現(xiàn)全國一體體系
    的頭像 發(fā)表于 07-16 15:45 ?895次閱讀

    IBM陳旭東:攜手IBM加速 AI 規(guī)模化應(yīng)用,解鎖企業(yè)新質(zhì)生產(chǎn)

    、總經(jīng)理陳旭東應(yīng)邀參會,并以"加速 AI 規(guī)模化應(yīng)用,解鎖企業(yè)新質(zhì)生產(chǎn)"為題作主旨演講。 他認(rèn)為,在企業(yè)規(guī)模化應(yīng)用AI的路徑中,最關(guān)鍵的是如何把企業(yè)數(shù)據(jù)轉(zhuǎn)化為AI源泉,即用企業(yè)的數(shù)據(jù)去訓(xùn)練大模型,讓其掌握企業(yè)獨特的知識和技能。
    的頭像 發(fā)表于 07-15 16:13 ?449次閱讀
    IBM陳旭東:攜手IBM加速 AI <b class='flag-5'>規(guī)模化</b>應(yīng)用,解鎖企業(yè)新質(zhì)生產(chǎn)<b class='flag-5'>力</b>

    助力全國一體網(wǎng)建設(shè),神州鯤泰以構(gòu)建新質(zhì)生產(chǎn)

    ? 6月21日,由南方財經(jīng)全媒體集團指導(dǎo),21世紀(jì)經(jīng)濟報道主辦的一體建設(shè)研討會在北京召開,來自學(xué)術(shù)界、產(chǎn)業(yè)界的從業(yè)者齊聚一堂,通過對全國一體
    的頭像 發(fā)表于 06-24 16:57 ?749次閱讀
    助力全國一體<b class='flag-5'>化</b><b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)<b class='flag-5'>建設(shè)</b>,神州鯤泰以<b class='flag-5'>算</b><b class='flag-5'>力</b>構(gòu)建新質(zhì)生產(chǎn)<b class='flag-5'>力</b>

    北京:規(guī)劃建設(shè)支撐萬億級參數(shù)大模型訓(xùn)練需求的超大規(guī)模集群

    ABSTRACT摘要2024年4月24日,北京市經(jīng)濟和信息局、北京市通信管理局印發(fā)《北京市基礎(chǔ)設(shè)施建設(shè)實施方案(2024—2027年)》。其中提出,智
    的頭像 發(fā)表于 04-29 08:26 ?445次閱讀
    北京:規(guī)劃<b class='flag-5'>建設(shè)</b>支撐萬億級參數(shù)大模型訓(xùn)練需求的超大<b class='flag-5'>規(guī)模</b>智<b class='flag-5'>算</b>集群
    主站蜘蛛池模板: 亚洲人成电影院 | 欧美日韩国产在线一区 | 久久99热精品这里久久精品 | 天天碰夜夜操 | 狠狠操狠狠操 | 69ww免费视频播放器 | 免费一级e一片在线播放 | 欧美一级特黄aaaaaa在线看首页 | 精品女视频在线观看免费 | 天堂8中文在线最新版在线 天堂8资源8在线 | 中国同志chinese小彬tv | 亚洲第一永久在线观看 | 色丁香在线观看 | 人人射人人澡 | 欧美xxxxx喷潮| 人人干操| 亚洲啊v在线 | 欧美黄色片在线观看 | 久久综合爱 | 日本三级人妇 | 韩日精品| 操亚洲| 日韩精品在线一区二区 | 欧美色一级 | 国产亚洲精品仙踪林在线播放 | 五月天精品在线 | 激情五月开心婷婷 | 婷婷六月色 | 性在线视频 | 在线视频毛片 | 色天使久久综合给合久久97色 | 特黄一级视频 | 婷婷开心六月久久综合丁香 | 亚洲综合一区二区三区 | 国产高清在线观看 | 激情文学综合 | 91大神大战丝袜美女在线观看 | 国产高清免费在线观看 | 欧美午夜性刺激在线观看免费 | 国产20岁美女一级毛片 | 性色a v 一区 |