在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

為AI計算釋放空間

安晟培半導體 ? 來源:未知 ? 2024-11-21 09:19 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

無論是移動應用程序或數字商務等可見應用程序,還是航空公司定價算法或每次刷卡時激活的欺詐檢測系統等幕后流程,AI 都已成為我們日常生活中不可或缺的一部分。尤其是生成式 AI,預計未來十年將以兩位數的速度持續增長,到 2032 年市場規模可能達到1 萬億美元以上。

AI 技術的發展推動了對更強大的處理器的需求,尤其是 GPU,是構建 AI 基礎設施的重要組成部分。NVIDIA 在行業和市場占據著主導地位,AMD 也越來越受歡迎,但企業必須面對GPU 持續增加的功耗,部分型號甚至已經超過1kW,這一趨勢也導致全球數據中心功耗大幅增加。預計在 2022 年至 2026 年間還將翻一番,容量已然成為公共事業提供商和企業面臨的主要挑戰。

目前,大約80% 的數據中心運營商面臨功率限制,許多運營商對每機架功率限制在 10-20 kW的范圍內。雖然傳統方法證明,提高處理器性能和效率可以提高總功耗,但很多數據中心運營商已經達到功率上限,這也對企業的持續創新和增長造成了阻礙。此外,擴展機架空間或適應特殊的冷卻方法通常成本高昂或受到空間和法規的限制;老化的服務器基礎設施(許多服務器使用時間超過 5 年)也不斷增加維護成本和安全風險。

對此,最實用的解決方案是升級現有的基礎設施。及時的服務器更新能夠大幅整合機架空間,從而降低運營成本,回收電力預算,并支持部署能夠處理 AI 工作負載的現代服務器。在評估服務器更新時,運營商需要用新的方式來思考,只要新一代處理器的每瓦性能(即效率)提高,處理器功耗的增加就可以被接受,這意味著新服務器比舊服務器 “里程更長”。盡管最大機架功率預算有限并開始接近極限,通過專注于每機架的性能,企業可以優化現有的電力和空間,使他們能夠從數據中心的局限性轉為更加專注于業務的增長和創新。

Ampere 的云原生處理器旨在提供橫向擴展性能和領先的效率。AmpereOne 自研核是替代老舊服務器的最佳 CPU 選擇。在AmpereOne 效率白皮書中,詳細闡述了 AmpereOne 的效率優勢,相較 AMD EPYC 9004 系列處理器,如何使云原生和 AI 工作負載的每機架性能提高 67%。

以下是 7 個開源工作負載,從 Web 服務器和負載均衡器到數據庫,再到緩存和內存中數據存儲。它們在許多現代 Web 服務中頗受歡迎,因為它們通過緩存處理 web 流量管理、數據存儲和性能優化。

91c9f60c-a7a4-11ef-93f3-92fbcf53809c.png

在AI 計算時代,通過將 AI 推理工作負載添加到上述通用工作負載中,可以增強各個行業的產品和服務。下表展示了 AmpereOne 在機架級別的性能和效率,適用于推理工作負載,如推薦引擎(DLRM)、圖像處理(ResNet-50)以及以語言為中心的工作負載(Whisper和Llama3)。這些工作負載支持現代設施,例如聊天機器人、在電子商務網站上查看推薦的產品、在流媒體平臺上呈現“您可能喜歡的節目”,或者為直播電視流提供實時隱藏字幕。

91d59e44-a7a4-11ef-93f3-92fbcf53809c.png

對于前面提到的每機架可用功率有限的企業和服務提供商來說,實現每機架的最大性能尤為重要。即使是中等規模的企業,由 AI 驅動的 web 服務也可以從 AmpereOne 中受益。與 AMD EPYC Genoa 8 個機架的輸出相比,AmpereOne 可以在不犧牲性能水平的情況下,將機架空間減少 38%,將功率預算降低 37%,并將購置成本降低 49%。以下代理 web 服務包括作為前端 Web 服務器的 NGINX、作為鍵值存儲的 Redis、作為內存數據庫的 Memcached、作為關系數據庫的 MySQL,以及分別作為推薦引擎和聊天機器人的 AI 組件 DLRM 和 Llama3。

91e45d12-a7a4-11ef-93f3-92fbcf53809c.png

AmpereOne 可以通過更新老化的服務器來重新利用預算、空間和功率。我們展示了如何節約資本支出,如何通過降低功耗和管理開銷而實現運營支出的節省,在三年內為企業節省大量 TCO。相較 AMD EPYC Bergamo,運營商可以節省 33% 的成本;與 AMD EPYC Genoa 相比,可節省高達 41% 的成本,這都歸功于AmpereOne。

91f8aeca-a7a4-11ef-93f3-92fbcf53809c.png

無論公司規模大小,“AI 海嘯” 將繼續降低企業大規模實施 AI 的準入門檻。即使沒有資源去雇傭專門的 AI 團隊,企業也可以通過服務提供商來開啟 AI 之旅,并迅速投入生產。因此,整合傳統基礎設施為 AI 擴展釋放空間尤其重要。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    19837

    瀏覽量

    234014
  • AI
    AI
    +關注

    關注

    88

    文章

    34657

    瀏覽量

    276560
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    DDN攜手NVIDIA釋放非結構化數據的AI價值

    DDN 通過與 NVIDIA AI 數據平臺的合作,推出聯合解決方案,簡化了企業對非結構化數據的存儲、訪問和激活方式,助力客戶釋放生成式 AI 的巨大商業潛能。DDN 全球合作伙伴負責人
    的頭像 發表于 06-10 10:31 ?278次閱讀

    Deepseek海思SD3403邊緣計算AI產品系統

    海思SD3403邊緣計算AI框架,提供了一套開放式AI訓練產品工具包,解決客戶低成本AI系統,針對差異化AI 應用場景,自己采集樣本數據,進
    發表于 04-28 11:05

    首創開源架構,天璣AI開發套件讓端側AI模型接入得心應手

    套件2.0,打造了一整套圍繞AI開發效率與落地路徑展開的“系統性解法”,開發者提供了AI應用開發工具全家桶。同時,全新升級的旗艦5G智能體AI芯片天璣9400+也
    發表于 04-13 19:52

    Banana Pi 發布 BPI-AI2N & BPI-AI2N Carrier,助力 AI 計算與嵌入式開發

    RZ/V2N——近期在嵌入式世界2025上新發布, AI 計算、嵌入式系統及工自動化提供強大支持。這款全新的計算平臺旨在滿足開發者和企業用戶對高性能、低功耗和靈活擴展的需求。 [](
    發表于 03-19 17:54

    AI賦能邊緣網關:開啟智能時代的新藍海

    。這一變革不僅帶來了技術架構的革新,更為產業發展開辟了新的增長空間。 傳統邊緣網關受限于計算能力和算法支持,往往只能完成數據采集和簡單處理,大量原始數據需要回傳云端處理,導致響應延遲和帶寬壓力。AI技術
    發表于 02-15 11:41

    AI云端計算資源的多維度優勢

    AI云端計算資源,作為AI技術與云計算深度融合的產物,在成本效益、性能優化、數據安全、靈活擴展以及創新加速等多個維度都具有顯著優勢。下面,AI
    的頭像 發表于 01-07 11:11 ?416次閱讀

    使用 AMD Versal AI 引擎釋放 DSP 計算的潛力

    “Versal AI 引擎可以在降低功耗預算的情況下提高 DSP 計算密度,”高級產品營銷經理 Udayan Sinha 表示。這種效率使 Versal AI 引擎能夠在嚴格的功耗預算內處理最苛刻
    的頭像 發表于 11-29 14:07 ?1184次閱讀

    AI云端計算資源有哪些類型

    AI云端計算資源涵蓋了從基礎設施到軟件服務的多個層面,AI模型的訓練、推理和部署提供了強大的支持。下面,AI部落小編為您詳細介紹
    的頭像 發表于 11-15 09:39 ?513次閱讀

    AI高性能計算平臺是什么

    AI高性能計算平臺不僅是AI技術發展的基石,更是推動AI應用落地、加速產業升級的重要工具。以下,是對AI高性能
    的頭像 發表于 11-11 09:56 ?647次閱讀

    華為提出“四新”戰略,加速釋放網絡+AI商業價值

    在第十屆全球超寬帶高峰論壇(UBBF 2024)上,華為運營商業務總裁陳浩發表了題為“網絡+AI釋放更多商業價值”的演講。陳浩表示:“為了深入挖掘AI的潛力,助力運營商拓展市場邊界、催生創新業務
    的頭像 發表于 11-04 16:01 ?753次閱讀

    AI for Science:人工智能驅動科學創新》第二章AI for Science的技術支撐學習心得

    計算的結合 我深刻體會到高性能計算(HPC)在AI for Science中的重要性。傳統的科學計算往往面臨計算量大、
    發表于 10-14 09:16

    華邦電子邊緣設備打造生成式AI性能

    在以大模型基礎的云端 AI 廣泛賦能各行各業后,邊緣設備對于 AI釋放出巨大需求,AI 也在從云端向邊緣端加速落地,層出不窮的應用場景
    的頭像 發表于 08-19 16:14 ?923次閱讀

    INAIR發布新款AR空間計算機INAIR 2

    科技前沿再添新軍,INAIR近期震撼發布了其最新款AR空間計算機——INAIR 2。這款集AR眼鏡與空間計算主機INAIR Pod于一體的創新產品,旨在為現代職場人士打造前所未有的便攜
    的頭像 發表于 08-12 16:09 ?1028次閱讀

    電機抱閘釋放時間控制

    最近碰到一個問題,在電機的抱閘釋放時接觸器兩端會拉弧,測量反電動勢277v,反接蓄流二級管后,發現反電動勢基本上被釋放,但是出現了制動器釋放時間較長約為350ms,會溜車。 測量抱閘
    發表于 08-05 13:44
    主站蜘蛛池模板: 欧美日韩国产一区二区三区不卡 | 久久天天躁狠狠躁夜夜呲 | 黄色网址免费在线 | 免费视频不卡一区二区三区 | 欧美不卡在线视频 | 伊人久久大杳蕉综合大象 | 日日日干干干 | 另类毛片 | 欧美人成一本免费观看视频 | 国产小视频在线观看www | 97影院理论在线观看 | 国产精品三级在线观看 | 伊人最新网址 | 午夜社区 | 天天操视频 夜夜 | 天天在线精品视频在线观看 | 九九涩| 成人午夜网址 | 正在播放羽月希与黑人bd在线 | 高清一级毛片一本到免费观看 | 天堂成人在线观看 | 美女被免费网站在线视频九色 | 天天射天天色天天干 | 久久精品国产精品亚洲红杏 | 欧洲精品不卡1卡2卡三卡 | 国产欧美亚洲精品第二区首页 | 天堂bt种子资源地址在线 | 免费高清成人啪啪网站 | 97av免费视频 | 视频一区视频二区在线观看 | 亚洲美女视频一区二区三区 | 精品卡1卡2卡三卡免费视频 | 成人女人a毛片在线看 | 欧美一二 | 午夜大片男女免费观看爽爽爽尤物 | 手机看片日韩1024 | 艹逼视频免费看 | 免费 在线观看 视频 | 日本特黄特色大片免费播放视频 | 69精品在线 | 久久久噜噜噜久久中文字幕色伊伊 |