在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

算力呈指數級增長,服務器有哪些進展?

花茶晶晶 ? 來源:電子發燒友網 ? 作者:黃晶晶 ? 2023-05-17 09:07 ? 次閱讀

電子發燒友網報道(文/黃晶晶)人工智能的基座包括數據、算力和算法。其中算力更是數據和算法的支撐。各類模型基于數據量、算法的訓練和推理推動了算力需求。

根據OpenAI的測算數據,AI訓練運行所使用的算力每3-4個月增長一倍。AI訓練運行所使用的算力已增長超30萬倍。IDC數據顯示,2022年我國智能算力規模達到268百億億次/秒(EFLOPS),超過通用算力規模;預計未來5年我國智能算力規模的年復合增長率將達52.3%。

構筑算力必然離不開服務器的建設。作為全球頂級的人工智能/高性能計算服務器制造商和解決方案提供商,Supermicro公司日前向電子發燒友網表示,新業務合約有很大一部分來自人工智能/高性能計算領域,而且許多與ChatGPT有關。

Supermicro高管表示,人工智能界并不知道未來還會遇到多少計算密集型問題。以GPT-3為例,它需要323 Zetta FLOPS的算力和1750億個參數來訓練模型,更需要龐大的算力來執行推理工作。更加智能的GPT-4將會有更多的參數,有可能達到一萬億甚至更多。

為了運轉這樣的大模型和大規模參數,如何有效運用服務器顯得十分重要,這關乎服務器的性價比選擇。Supermicro公司高管說到,當大量的GPU服務器集群起來時,人工智能/高性能計算應用的每一微秒都很重要。Supermicro設計開發了各種不同架構的GPU服務器,提升了CPU和GPU之間或從GPU到GPU的數據傳輸速度。通過合理選擇系統SKU,解決方案的設計可以將每個CPU/GPU核心利用到極致。從邊緣到云,從訓練到推理,當前市面上所需的人工智能/高性能計算應用,Supermicro都可以提供全方位的GPU服務器,能讓客戶充分利用計算資源上花費的每一分錢。

更大的服務器存儲空間


隨著CPU、GPU和內存技術的發展,現代計算集群處理數據的速度和數量不斷增加,因此有必要增強存儲性能,以便將數據饋送給應用時不會形成減緩整個系統的速度的瓶頸。

最近,Supermicro推出了超高性能、高密度PB級All-Flash NVMe服務器新機型。更新產品系列中初步推出的產品將在1U 16槽機架式安裝系統中支持高達1/2 PB的儲存空間,隨后的產品則將在2U 32槽機架式安裝系統中為IntelAMD PCIe Gen5平臺提供1 PB儲存空間。

Supermicro高管表示,Supermicro的Petascale All-Flash服務器提供業界領先的存儲性能和容量,可以減少滿足熱存儲和溫存儲要求所需的機架式系統數量,并通過諸多功能特點降低總體擁有成本。

具體來說,容量擴展,更廣泛的PCB有助于實現更靈活的NAND芯片布局;性能擴展,可擴展連接器設計,多鏈路寬度(x4、x8、x16),支持不同電源配置;熱效率,散熱和制冷管理改進;面向未來,通用連接器適用于各種尺寸規格,可以為未來幾代PCIe提供更加強大的信號完整性;解決方案范圍,各種功率配置(20W-70W),適用于更高容量/性能的固態硬盤。

“安裝了速度更快的固態硬盤之后,系統的平衡就變得更加重要。Supermicro擁有全新的NUMA平衡對稱架構,可以提供到驅動器的最短信號路徑、到存儲器的帶寬平衡和靈活的網絡選項,從而降低時延。最重要的是,對稱設計還有助于確保整個系統的氣流暢通無阻,因此可以使用更加強大的處理器。”Supermicro高管說道。

桌面型GPU兼顧AI與液冷散熱

CPU/GUP/xPU也構成了系統設計的熱量挑戰,各種處理器消耗的功率不斷攀升,另一方面,科研/醫療設施/金融/石油和天然氣企業需要人工智能/高性能計算來提高其專業競爭力。在這些企業中,有很多需要在員工工作的地點設置工作站或本地服務器。

基于這樣的需求,Supermicro推出功能強大、安靜且節能的NVIDIA加速人工智能(AI)開發平臺系列當中的首款裝置。全新的AI開發平臺SYS-751GE-TNRT-NV1是一款應用優化的系統,在開發及運行AI軟件時表現尤其出色。此外,這個性能強大的系統可以支持小團隊里的用戶同步運行訓練、推理和分析等工作負載。

獨立的液冷功能可滿足四個NVIDIA? A100 Tensor Core GPU和兩個第4代Intel Xeon可擴展處理器的散熱需求,在發揮完整性能的同時提高整體系統效率,并實現了在辦公環境下的安靜(約30dB)運行。

對于散熱的考量,Supermicro高管認為搭載NVIDIA A800等強大的協加速器、且聲壓級介于30~45分貝的工作站,必須采用液冷解決方案才能滿足這一需求。冷板式液冷在市場上經過了十多年的考驗,目前其成熟度和可靠性已經達到了數據中心大規模部署的水平。

創新技術驅動成長

早前,Supermicro就提出了觀察到的七大創新技術,他們包括高性能350W CPU和700W GPU、處理速度更快的DDR5內存、第五代PCI-E 5.0技術、Compute Express Link(CXL,開放式互聯標準)、400G高速網絡、新型固態硬盤和液冷技術。

簡言之就是更高的功耗和更快的數據傳輸速度。這就需要優化功率效率、解決熱量挑戰、加強第五代PCIe、DDR5、高速網絡、無阻塞系統架構設計和部署等。

Supermicro高管指出,這些創新技術背后的一個共同點是熱量調度。更快的處理器頻率、更多的計算核心、更高速的網絡都會產生更多的熱量,這些熱量必須輸送到數據中心之外。他表示,正如我們預計的技術趨勢和產品路線圖所示,當前和新一代人工智能/高性能計算服務器采用的熱量解決方案必須比目前的空氣冷卻更加高效。

展望已經到來的AI爆發的時代,ChatGPT的需求日益增長,不僅推高了服務器的銷量,而且還推動新技術通過大規模部署而被普遍接納的機會。GPT提供的服務包括語言翻譯、聊天機器人、內容生成、語言分析、語音輔助等等。

要實現人工智能系統的所有關鍵技術,就需要足夠快速的服務器,并通過復雜的架構、用于維護工作的液冷管布置等將其聯網。這些專業技術知識意味著解決方案將不再作為一個個的服務器提供。完整的解決方案部署更像是一個具有機架級就緒水平的即插即用解決方案。

Supermicro將ChatGPT視為服務器市場增長的關鍵驅動力,未來我們會看到GPT服務的更多創新型用例。Supermicro已準備好面對這個趨勢,始終保持在AI服務器技術前沿,并提供創新的解決方案,使得客戶能夠加速他們的AI應用規劃,同時優化總體擁有成本并通過綠色計算最大限度地減少對環境的影響。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 服務器
    +關注

    關注

    12

    文章

    9604

    瀏覽量

    87031
  • AI
    AI
    +關注

    關注

    87

    文章

    33629

    瀏覽量

    274370
  • Supermicro
    +關注

    關注

    0

    文章

    32

    瀏覽量

    9472
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    AI原生架構升級:RAKsmart服務器在超大規模模型訓練中的突破

    近年來,隨著千億參數模型的崛起,AI訓練對的需求呈現指數增長。傳統
    的頭像 發表于 04-24 09:27 ?125次閱讀

    RAKsmart服務器如何重構企業AI轉型的成本邏輯

    傳統服務器架構的“堆硬件”模式,讓許多企業在GPU采購、跨國部署和混合負載管理上陷入“高投入、低效能”的惡性循環。RAKsmart通過技術創新與架構重構,正在為企業提供一種全新的成本邏輯。
    的頭像 發表于 04-22 09:58 ?102次閱讀

    智能服務器應用領域

    智能服務器應用領域 一、?金融行業? 智能風控與投顧?:通過集群支撐AI模型訓練,實現風險預警、智能投顧等場景規模化應用,例如工商銀
    的頭像 發表于 04-21 09:09 ?132次閱讀
    智能<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務器</b>應用領域

    RAKsmart服務器如何重塑AI高并發格局

    在AI大模型參數量突破萬億、實時推理需求激增的當下,傳統服務器架構的并發處理能力已逼近物理極限。RAKsmart通過“硬件重構+軟件定義”的雙引擎創新,推出新一代AI服務器解決方案。下面,AI部落小編為您解析RAKsmart
    的頭像 發表于 04-03 10:37 ?174次閱讀

    Firefly 服務器系列:覆蓋多個領域的高解決方案

    ?服務器覆蓋60~1570TOPS強勁,支持Transformer架構下大語言模型的私有化部署,如Gemma-2B、ChatGLM3
    的頭像 發表于 02-19 16:34 ?438次閱讀
    Firefly <b class='flag-5'>服務器</b>系列:覆蓋多個領域的高<b class='flag-5'>算</b><b class='flag-5'>力</b>解決方案

    華為云征文 云計算新紀元:Flexus 云服務器 X 實例引領柔性時代,部署 Zabbix 運維監控

    Flexus 云服務器 X 實例引領柔性時代 引言 隨著云計算技術的飛速發展,企業對于的需求日益多樣化與精細化。傳統的粗顆粒度彈性
    的頭像 發表于 01-02 11:57 ?246次閱讀
    華為云征文 云計算新紀元:Flexus 云<b class='flag-5'>服務器</b> X 實例引領柔性<b class='flag-5'>算</b><b class='flag-5'>力</b>時代,部署 Zabbix 運維監控

    基礎篇:從零開始了解

    即計算能力(Computing Power),狹義上指對數字問題的運算能力,而廣義上指對輸入信息處理后實現結果輸出的一種能力。雖然處理的內容不同,但處理過程的能力都可抽象為。比
    的頭像 發表于 11-15 14:22 ?1701次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎篇:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    中科曙光入選2024服務產業圖譜及服務產品名錄

    近日,中國信通院公布首個《服務產業圖譜(2024年)》及《服務產品名錄(2024年)》。
    的頭像 發表于 08-06 14:23 ?1118次閱讀

    服務器為什么選擇GPU

    隨著人工智能技術的快速普及,需求日益增長。智中心的服務器作為支撐大規模數據處理和計算的核心設備,其性能優化顯得尤為關鍵。而GPU
    的頭像 發表于 07-25 08:28 ?1132次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務器</b>為什么選擇GPU

    商湯大裝置服務獲國家認證

    商湯大裝置服務獲國家認證! 近日,經過中國電子技術標準化研究院專家審核,商湯科技通過
    的頭像 發表于 06-22 10:59 ?997次閱讀

    AI高服務器散熱,需要用到哪些導熱界面材料?

    在數字經濟、AI大模型等發展的帶動下,全球服務器的市場需求急劇提升,利用其強大的計算能力,能夠處理復雜的算法和海量數據。與此同時,生成式人工智能的大需求也拉高了服務器領域的功耗水平
    的頭像 發表于 05-30 10:44 ?1241次閱讀
    AI高<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務器</b>散熱,需要用到哪些導熱界面材料?

    引領柔性新風潮,加速企業數智轉型首選服務器就是它

    在當今云計算時代,企業對于云服務器的需求已經不僅僅停留在簡單的彈性上,更多的是希望能夠根據自身業務需求,獲得精準、靈活的計算資源,以實現成本最優和業務最佳性能。 然而,傳統的云服務器
    的頭像 發表于 05-22 19:35 ?450次閱讀
    引領柔性<b class='flag-5'>算</b><b class='flag-5'>力</b>新風潮,加速企業數智轉型首選<b class='flag-5'>服務器</b>就是它

    智能存在缺口,AI服務器市場規模持續提升

    商的資本支出將大幅增加。全球前四大云服務商資本支出調升,預計將從2023年的1400億美元提升至2024年的超過2000億美元。 ? AI 服務器市場規模持續增長 ? 近些年,人工智能技術在各個領域廣泛應用,包括智能制造、智慧醫
    的頭像 發表于 05-22 00:14 ?3383次閱讀

    弘信電子簽訂服務器產品銷售合同

    弘信電子的子公司甘肅燧弘人工智能科技有限公司與慶陽市京合云計算科技有限公司簽訂了服務器產品銷售合同 。
    的頭像 發表于 05-13 11:10 ?764次閱讀
    主站蜘蛛池模板: h视频免费网站 | 四虎电影院| 亚洲爱v| 久久精品国产亚洲婷婷 | 曰本又色又爽又黄三级视频 | h视频免费在线 | 在线播放你懂得 | 亚洲成人观看 | 色噜噜狠狠色综合中文字幕 | 国产自产视频在线观看香蕉 | 91av在线视频观看 | 国产色网站 | 日本高清视频不卡 | 2017av在线| 欧美日韩亚洲一区 | 九色在线观看视频 | 日韩一级特黄毛片在线看 | 欧美性狂猛bbbbbbxxxx | 欧美午夜场 | 天天干妹子 | 亚洲一区二区三区深夜天堂 | 网www天堂资源在线 网红和老师啪啪对白清晰 网络色综合久久 | 欧美一区二区精品 | 美女视频很黄很暴黄是免费的 | 免费国产高清精品一区在线 | 午夜三级视频 | 色综合久久五月 | 亚洲第一色在线 | 天天爱天天做天天爽天天躁 | 亚洲五月综合缴情婷婷 | 羞羞答答91麻豆网站入口 | 欧美爽爽爽爽爽爽视频 | 黄色视屏免费在线观看 | 又长又大又粗又硬3p免费视 | 丁香五月情 | 欧美色啪 | 国产簧片| 亚洲国产精品国产自在在线 | 国产亚洲欧美一区 | 一区二区三区视频观看 | 五月天色网址 |