在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

AI芯片成為耗電大戶,負載功耗接近一個小國家?

手機技術資訊 ? 來源:半導體行業觀察 ? 2023-11-25 17:10 ? 次閱讀

如今,對人工智能的需求巨大。法國施耐德電氣公司估計,2023年人工智能工作負載的功耗總計約為4.3吉瓦(GW),略低于塞浦路斯國家2021年的功耗( 4.7吉瓦)。該公司預計,人工智能工作負載的功耗將以26%至36%的復合年增長率(CAGR)增長,這意味著到2028年,人工智能工作負載的功耗將從13.5吉瓦增至20吉瓦,這比冰島2021年消費的電力消耗還要多。

巨大的電力需求

據施耐德電氣稱,到 2023 年,所有數據中心的總功耗預計將達到 54 GW,其中人工智能工作負載將占到 4.3 GW。在這些人工智能工作負載中,訓練和推理之間的分配特點是 20% 的功耗用于訓練目的,80% 分配給推理任務。這意味著人工智能工作負載將占今年數據中心總功耗的約8%。

展望 2028 年,施耐德預計數據中心的總能耗將增至 90 吉瓦,其中人工智能工作負載的能耗將達到 13.5 吉瓦至 20 吉瓦。這表明,到 2028 年,人工智能可能消耗數據中心總用電量的 15% 至 20% 左右,這表明數據中心人工智能工作負載的功耗比例在五年內顯著增加。根據施耐德電氣的估計,訓練和推理之間的分布預計將略有變化,訓練消耗 15% 的電力,推理則占 85%。

AI GPU 變得更加“饑餓”

人工智能數據中心功耗不斷上升的主要原因是人工智能工作負載的加劇、人工智能GPU和人工智能處理器的進步以及其他數據中心硬件的要求不斷增加。例如,Nvidia 2020 年的 A100 功耗高達 400W,而 2022 年的 H100 功耗高達 700W。除了 GPU 之外,AI 服務器還運行耗電的 CPU 和網卡。

AI 工作負載,尤其是與訓練相關的工作負載,需要大量計算資源,包括配備 AI GPU、專用 ASIC 或 CPU 的專用服務器。人工智能集群的規模受人工智能模型的復雜性和規模的影響,是功耗的主要決定因素。更大的人工智能模型需要更多數量的 GPU,從而增加總體能源需求。例如,擁有 22,000 個 H100 GPU 的集群使用大約 700 個機架。基于 H100 的機架在安裝八臺 HPE Cray XD670 GPU 加速服務器時,機架總密度為 80 kW。施耐德電氣指出,因此,整個集群需要大約 31 兆瓦的電力,這還不包括冷卻等額外基礎設施需求所需的能源。

這些集群和 GPU 在整個訓練過程中通常幾乎滿負荷運行,確保平均能耗幾乎與峰值功耗相同。該文件指出,大量AI集群的機架密度在30kW到100kW之間,具體取決于GPU的數量和型號。

網絡延遲在人工智能數據中心的功耗中也起著至關重要的作用。復雜的網絡基礎設施對于支持分布式訓練過程中強大的 GPU 所需的高速數據通信至關重要。對高速網絡電纜和基礎設施(例如能夠支持高達 800 Gb/s 速度的電纜和基礎設施)的需求進一步增加了總體能耗。

鑒于人工智能工作負載需要高耗電的 ASIC、GPU、CPU、網卡和 SSD,冷卻構成了重大挑戰。鑒于高機架密度和計算過程中產生的巨大熱量,有效的冷卻解決方案對于保持最佳性能并防止硬件故障或失效至關重要。與此同時,空氣和液體冷卻方法在功耗方面也“昂貴”,這就是為什么它們也對用于人工智能工作負載的數據中心的功耗造成很大影響。

一些建議

施耐德電氣預計AI硬件的功耗不會很快降低,公司充分預計AI機架的功耗將達到100kW或更高。因此,施耐德電氣對專門處理人工智能工作負載的數據中心提出了一些建議。

施耐德電氣特別建議從傳統的120/208V過渡到240/415V配電,以更好地適應人工智能工作負載的高功率密度。對于冷卻,建議從空氣冷卻轉向液體冷卻,以提高處理器的可靠性和能源效率,盡管沉浸式冷卻可能會產生更好的效果。使用的貨架應更寬敞,其規格例如寬度至少為 750 毫米,靜態承重能力大于 1,800 公斤。







審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • asic
    +關注

    關注

    34

    文章

    1242

    瀏覽量

    121825
  • SSD
    SSD
    +關注

    關注

    21

    文章

    2938

    瀏覽量

    119002
  • 人工智能
    +關注

    關注

    1804

    文章

    48511

    瀏覽量

    245371
  • GPU芯片
    +關注

    關注

    1

    文章

    304

    瀏覽量

    6105
  • AI芯片
    +關注

    關注

    17

    文章

    1961

    瀏覽量

    35643

原文標題:AI芯片成為耗電大戶,負載功耗接近一個小國家

文章出處:【微信號:Mobile-Info,微信公眾號:手機技術資訊】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    AI玩具芯片如何尋找性能、功耗與成本之間的平衡點

    之間找到適合的方案?本文結合實際案例,總結芯片選型的核心原則與開發經驗。 ? AI 玩具芯片選擇的三大核心原則 ? 對于AI玩具而言,芯片
    的頭像 發表于 04-29 08:24 ?920次閱讀

    功耗電壓檢測芯片TPS3803浪涌防護方案

    本文主要是針對低功耗電壓檢測芯片TPS3803的浪涌防護方案,采用湖南靜芯研發的TDS浪涌保護器件對芯片進行浪涌防護,保護設備免受電氣系統中的浪涌電壓或浪涌電流的損害,確保設備的安全性。
    的頭像 發表于 04-27 16:45 ?105次閱讀
    低<b class='flag-5'>功耗電</b>壓檢測<b class='flag-5'>芯片</b>TPS3803浪涌防護方案

    Nordic nRF54 系列芯片:開啟 AI 與物聯網新時代?

    。通過支持 TensorFlow Lite Micro 等多種 AI 和 ML 框架,nRF54H20 讓低功耗設備實現實時數據處理和分析成為現實。無論是智能可穿戴設備對人體健康數據的實時監測與分析
    發表于 04-01 00:18

    **【技術干貨】Nordic nRF54系列芯片:傳感器數據采集與AI機器學習的完美結合**

    應用案例有哪些? 答:nRF54系列已被應用于知名鼠標、鍵盤、VR設備、醫療產品等領域,性能與可靠性得到驗證! 總結: nRF54系列芯片憑借其低功耗、高性能、豐富的開發工具和廣泛的應用場景,成為
    發表于 04-01 00:00

    2.5D封裝為何成為AI芯片的“寵兒”?

    ?多年來,封裝技術并未受到大眾的廣泛關注。但是現在,尤其是在AI芯片的發展過程中,封裝技術發揮著至關重要的作用。2.5D封裝以其高帶寬、低功耗和高集成度的優勢,成為
    的頭像 發表于 03-27 18:12 ?192次閱讀
    2.5D封裝為何<b class='flag-5'>成為</b><b class='flag-5'>AI</b><b class='flag-5'>芯片</b>的“寵兒”?

    AN23-用于信號調理的微功耗電

    電子發燒友網站提供《AN23-用于信號調理的微功耗電路.pdf》資料免費下載
    發表于 01-12 11:21 ?0次下載
    AN23-用于信號調理的微<b class='flag-5'>功耗電</b>路

    ASIC芯片成為AI的下件大事嗎

    當谷歌宣布其第二代專用集成電路來加速公司的機器學習處理時,筆者的電話開始響不停,問這對半導體行業的潛在影響。世界上最大的數據中心“Super?7”的其它成員是否都急于為AI制造自己的芯片?這對
    的頭像 發表于 01-02 09:33 ?492次閱讀
    ASIC<b class='flag-5'>芯片</b>會<b class='flag-5'>成為</b><b class='flag-5'>AI</b>的下<b class='flag-5'>一</b>件大事嗎

    AI算力芯片供電電源測試利器:費思低壓大電流系列電子負載

    AI算力芯片作為驅動復雜計算任務的核心引擎,其性能與穩定性成為了決定應用成敗的關鍵因素。而在這背后,供電電源的穩定性和高效性則是保障AI算力芯片
    的頭像 發表于 10-25 11:26 ?1173次閱讀
    <b class='flag-5'>AI</b>算力<b class='flag-5'>芯片</b>供電電源測試利器:費思低壓大電流系列電子<b class='flag-5'>負載</b>

    探索低功耗電動云臺驅動板方案的應用奧秘

    在當今科技飛速發展的時代,低功耗電動云臺驅動板方案正逐漸成為眾多領域中的關鍵技術。這技術不僅在提高設備性能、降低能耗方面發揮著重要作用,還為各種應用場景帶來了更多的可能性。接下來,讓我們
    的頭像 發表于 09-24 17:48 ?391次閱讀
    探索低<b class='flag-5'>功耗電</b>動云臺驅動板方案的應用奧秘

    款4644芯片功耗設計思路解析

    ASP4644芯片4通道輸出的DCDC轉換器,它內置功率MOSFET和電感,適用于4-15V的寬輸入電壓范圍,每通道可輸出0.6~5V電壓,最大可驅動5A的負載。對于更大的
    發表于 08-16 14:44

    THP210單端轉差分輸出異常的原因?

    THP210的測試電路如上。輸入的信號是DC 1V信號,測THP210的pin4腳是接近+15V,pin5腳是接近-15V。即差分輸出接近電源軌。上電后芯片
    發表于 07-30 06:15

    功耗BLE Mesh耗電量很大的原因?

    開發板電流90mA,成功連接后LED燈熄滅電流為80mA。但是這個電流距離低功耗相差的太遠,比如使用power_save保活的wifi上電后電流也才20mA,為何這個低功耗BLE Mesh耗電量這么大,想請教
    發表于 06-18 08:12

    日本EdgeCortix推出省電AI芯片耗電量大幅降低

    日本半導體芯片設計領域的創新者EdgeCortix最近宣布,他們已經成功研發出款專為生成式AI運算處理設計的新型半導體芯片。這款芯片不僅采
    的頭像 發表于 06-17 15:09 ?960次閱讀

    芯片功耗提升,散熱面臨挑戰!

    所有個人電腦出貨量的60%,AI有望提振消費者需求。2023年10月,高通正式發布驍龍8Gen3處理器,該處理器將會成為2024年安卓旗艦的標配處理器,包含基于
    的頭像 發表于 06-05 08:10 ?1600次閱讀
    <b class='flag-5'>芯片</b><b class='flag-5'>功耗</b>提升,散熱面臨挑戰!

    AI芯片哪里買?

    AI芯片
    芯廣場
    發布于 :2024年05月31日 16:58:19
    主站蜘蛛池模板: 免费一级特黄 欧美大片 | 亚洲国产综合久久精品 | 亚洲另类电击调教在线观看 | 美女三级黄 | 在线网站黄色 | 成熟女性毛茸茸xx免费视频 | 精品国产一二三区 | 日本三级成人中文字幕乱码 | 国产深夜福利在线观看网站 | 国产高清小视频 | 好硬好湿好爽再深一点h视频 | 人人爽人人干 | 婷婷色站| 久久黄色精品视频 | 2019天天射干 | 五月激情综合 | 国内精品一区二区在线观看 | 日韩免费在线视频 | 亚洲视频入口 | 老师办公室高h文小说 | 黄黄网址 | 四虎影在线永久免费观看 | 国产―笫一页―浮力影院xyz | 边做边爱在线观看视频免费 | 最近免费hd | 日韩插插 | 欧美人与动另类在线 | www.婷婷色 | 明日花绮罗snis-862在线播放 | 亚洲精品第一 | 综合婷婷 | 日韩欧美中文字幕在线视频 | 色老头免费视频 | 日本视频网站在线www色 | 男女交性视频免费播放 | 不卡中文字幕在线 | 四虎亚洲国产成人久久精品 | 国产精品国产三级在线高清观看 | 西西人体大胆高清啪啪欧洲 | 综合色婷婷 | 日本口工禁漫画无遮挡全彩 |