91在线观看视频-91在线观看视频-91在线观看免费视频-91在线观看免费-欧美第二页-欧美第1页

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

ChatGPT引領AI技術變革,帶動服務器需求增量

安防監控存儲聯盟 ? 來源:安防監控存儲聯盟 ? 2023-02-23 10:50 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

OpenAI GPT 技術的聊天機器人,其擁有 3000 億單詞的語料基礎,預訓練出擁有 1750 億個參數的模型,海量的參數與強大的智能交互能力離不開背后算力和服務器的支撐。據我們測算,若未來 ChatGPT 達到 10 億日活,每人平均 10000字左右問題,則需新增服務器投入 46.30 萬臺。服務器的需求起量為上游的存儲/PCB/模擬市場帶來新增量。我們預計,單臺服務器帶來的 PCB 價值量約為 4000元,而 AI 服務器放量亦將帶來 DDR5 和 HBM 存儲用量的快速提升。

01

ChatGPT:引領內容生成式 AI 行業變革

此前微軟宣布將在未來向 OpenAI 投資 100 億美元,并將 ChatGPT 的技術整合到最新版本的必應搜索引擎和 Edge 瀏覽器中。微軟這一舉動拉開了大型科技公司 AI 競賽的序幕,谷歌亦宣布推出 Bard 對抗 ChatGPT,國內百度、騰訊等科技巨頭亦在加緊推出自己的生成式 AI

從 2018 年 OpenAI 開發出 GPT-1 開始,GPT 模型的智能化程度不斷提升,ChatGPT 是從 GPT3.5 系列中的模型進行微調而誕生的,此前 OpenAI 還設計了GPT-1、GPT-2 和 GPT-3 模型。相比于前幾代 GPT 模型,ChatGPT 具有類似人類的情境感知和回饋能力,在語言識別、判斷和交互層面實現了較好的效果。除此之外,OpenAI 旗下還有可生成圖片內容的 AI 應用 Dall-E,高智能化的內容生成式 AI 有望在未來一段時間內改變人類科技發展的格局,讓智能化廣泛進入人們的日常生活。

3d3c4614-b320-11ed-bfe3-dac502259ad0.png

ChatGPT 為人類開拓出了訓練大語言模型的新道路。ChatGPT 在擁有 3000億單詞的語料基礎上預訓練出擁有 1750 億個參數的模型(GPT-2 僅有 15 億參數),預訓練數據量從 5GB 增加到 45TB。ChatGPT 證明了在高算力的支持下,千億級參數規模的模型訓練+人類反饋,可以使 AI 融合世界的知識和規則,極大提升模型表現。

3d75e068-b320-11ed-bfe3-dac502259ad0.png

02

ChatGPT 拉動算力需求快速增長

ChatGPT 參數量、數據量高度擴張,算力需求劇增。從 2018 年起,OpenAI就開始發布生成式預訓練語言模型 GPT(Generative Pre-trained Transformer),可用于生成文章、代碼、機器翻譯、問答等各類內容,每一代 GPT 模型的參數量都快速增長:2019 年 2 月發布的 GPT-2 參數量為 15 億,而 2020 年 5 月的 GPT-3,參數量達到了 1750 億。

3d9f4354-b320-11ed-bfe3-dac502259ad0.png

ChatGPT 海量的參數與強大的智能交互能力,離不開算力的支撐。根據Similarweb 的數據,23 年 1 月份 ChatGPT 日活約 1300 萬人,累計用戶已超 1億人,創下了互聯網最快破億應用的記錄。若 ChatGPT 日活達至 1 億人,每人平均 1000 字左右的問題,那么需要多大的算力資源支持?

我們建立計算假設如下:

1) 假設均采用英偉達 DGX A100 服務器:該服務器單機搭載 8 片 A100GPU,AI 算力性能約為 5 PetaFLOP/s,單機最大功率約為 6.5kw;

2) ChatGPT 日活達至 1 億人,每人平均 1000 字左右問題;

3) 自回歸語言模型以 token 作為單位進行數據處理和計算,在英文環境下,一般 750 個單詞等于 1000 個 token。最常見的 Transformer 類語言模型在推理過程中每個 token 的計算成本(以 FLOPs 為指標)約為 2N,其中 N 為模型參數數量(20 年發布的 GPT-3 擁有 1750 億參數,22 年谷歌發布的 PaLM 擁有 5400 億參數,假定 ChatGPT 為 3000 億參數);

4) 模型的 FLOPs 利用率為 20%;

5) 假定訪問峰值是一天均值的 5 倍;

若 ChatGPT 日活達至 1 億人,每人平均 1000 字左右的問題,初始服務器投入需 4630 臺。粗略估計 ChatGPT 1000 字左右的問題需要的算力資源為2*3000 億*1000*1.333/20%=4PetaFLOP,而 ChatGPT 日活約 1 億人,若每人平均 1000 字左右的問題,假設 24 小時平均分配任務,則所需算力為 1 億*4PetaFLOP/(24*3600s)=4630PetaFLOP/ s。考慮訪問流量存在峰值,假定訪問峰值是一天均值的 5 倍,而單臺英偉達 DGXA100 系列服務器算力為 5 PetaFLOP/s,則需要對應服務器數量為 4630PetaFLOP/s*5/ PetaFLOP/s=4630 臺。

而若未來 ChatGPT 日活達至 10 億人,每人平均 10000 字左右問題,則有望帶動約 46.30 萬臺。

3e0f7502-b320-11ed-bfe3-dac502259ad0.png

且考慮谷歌每日搜索量已達 35 億次,長期來看 ChatGPT 日活有廣闊的提升空間,算力需求將持續釋放。此外,若考慮 ChatGPT 嵌入終端應用后,其對算力資源的消耗量或將成數倍級增長,所需服務器數量需求更是成數倍級提升。

文字交互僅是大模型用量的起點,未來圖像、視頻等多種形態帶動算力需求大幅提升。ChatGPT 目前仍主要停留在文字交互層面,但圖像、視頻等領域也可使用 Transformer 大模型,所需算力規模遠大于文字交互。例如 OpenAI 的繪畫 AI模型 DALL-E2,其可直接根據文字生成逼真的圖像,也可以對現有圖像上根據文字指令創建新作品。

3e3761fc-b320-11ed-bfe3-dac502259ad0.png

03

上游存儲/PCB/模擬受益 ChatGPT 需求新增量

ChatGPT 拉動服務器需求快速增長的同時,將直接拉動算力芯片需求增長,我們于下文中詳細對算力芯片需求進行了介紹。此外,服務器需求的增長,也將帶動上游存儲/PCB/模擬的需求快速增長。

1)ChatGPT 新時代,服務器需求帶動 DDR5 和 HBM 用量快速提升。隨著ChatGPT 等應用開啟 AI 新時代,全球數據生成、儲存、處理量有望呈等比級數增長,而 DDR5 內存和高帶寬存儲器(HBM)可支持更高速率的帶寬。對于計算-內存而言,DDR5 標準的最高速率是 DDR4 的兩倍,而 HBM 基于 TSV 和芯片堆疊技術的堆疊 DRAM 架構,可實現高于 256GBps 的突破性帶寬。深度學習人工智能的快速發展對數據運算的要求越來越高,隨著數據指數式增長,內存墻對于計算速度的影響越來越凸顯,而 DDR5 和 HBM 技術可以幫助數據中心突破“內存墻”瓶頸。我們看好在 ChatGPT 的帶動下,服務器 DDR5 和 HBM 的滲透率有望加速提升

3e6a3050-b320-11ed-bfe3-dac502259ad0.png

2) ChatGPT 帶動 PCB 需求新增量。服務器內部涉及 PCB 的主要部件包括主板、電源背板、網卡、Riser 卡、硬盤背板等,PCB 在 AI 服務器應用中對板厚、層數、工藝等有著更高的要求,具有高層數、高密度及高傳輸速率的特點。

PCB 層數越多,設計越靈活,能夠對電路起到更好地抗阻作用,更易于實現芯片之間地高速傳輸,單位價值量也越高。PCIe3.0 接口信號傳輸速率為 8GT/s,對應的服務器 PCB 板為 8-10 層;PCIe4.0 接口的傳輸速率為 16GT/s,使用的服務器 PCB 層數為 12-14 層,目前滲透率在快速提高,如英偉達 DGXA100 系列服務器就采用了 PCIe4.0 接口;服務器平臺下一步將升級到 PCIe 5.0,傳輸速率為32GT/s,PCB 的層數可達 18 層。隨著 ChatGPT 對算力要求的提升,預計服務器PCB 將呈量價齊升的態勢,保守估計每臺服務器的 PCB 價值量可達 4000 元。

3e9d4ea4-b320-11ed-bfe3-dac502259ad0.png

3)ChatGPT 拉動服務器建設的同時,亦帶來大量電源管理芯片需求。從市電輸入服務器開始,到電流輸入 CPU元器件止,大體上需要經過三次電流的改變。第一次是經過服務器的電源模塊,將市電從交流電轉換成 48V 的直流電(ACDC)。接下來,該直流電會被輸送至 DC/DC 變換器,進一步被轉換成 12V,提供給中間母線結構(IBA)。最后該 12V 母線電壓將被分配至板上多個負載點(PoL)變換器中,為芯片或子電路提供電源。不過由于主板上 CPU 等內核器件與風扇等

其他器件對功率的要求各不相同,因此需要分開處理。對于 CPU 等內核器件,往往需要使用多相電源供電,而對于部分功率較小且比較穩定的其他器件,不需要使

用多相電源,只需要使用 Buck 進行降壓就可以對其進行供電。具體而言,主板上的電源管理 IC 主要包括 eFuse/熱插拔、多相電源、LDO 與降壓 Buck 等四類。

3f82a490-b320-11ed-bfe3-dac502259ad0.png

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 服務器
    +關注

    關注

    13

    文章

    9795

    瀏覽量

    87963
  • ai技術
    +關注

    關注

    1

    文章

    1308

    瀏覽量

    25155
  • OpenAI
    +關注

    關注

    9

    文章

    1208

    瀏覽量

    8914
  • ChatGPT
    +關注

    關注

    29

    文章

    1589

    瀏覽量

    9098

原文標題:ChatGPT 引領 AI 技術變革,帶動服務器需求增量

文章出處:【微信號:S3ITIA-,微信公眾號:安防監控存儲聯盟】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    GPU猛獸襲來!HBM4、AI服務器徹底引爆!

    電子發燒友網報道(文/黃晶晶)日前,多家服務器廠商表示因AI服務器需求高漲拉高業績增長。隨著AI服務器
    的頭像 發表于 06-02 06:54 ?5850次閱讀

    CES Asia 2025蓄勢待發,聚焦低空經濟與AI引領未來產業新變革

    Asia 2025 的舉辦,將為全球科技產業的發展注入新的動力。通過深入探討低空經濟與人工智能的技術突破、應用落地、政策監管與投資機遇,有望推動這兩大領域實現跨越式發展,引領未來產業的新變革。讓我們共同期待這場科技盛會的到來,
    發表于 07-09 10:29

    AI服務器電源技術研討會部分演講嘉賓確認

    AI服務器電源是2025-2026年AI硬件確定的增量,英偉達超級芯片GB200功率到2700W,是傳統服務器電源的5-7倍,但其面臨的挑戰
    的頭像 發表于 06-24 10:07 ?178次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>服務器</b>電源<b class='flag-5'>技術</b>研討會部分演講嘉賓確認

    AI 服務器電源如何迭代升級?

    AI 算力需求增長的今天,AI 服務器電源正陷入 “性能瓶頸與國產替代并行、場景適配與技術創新交織” 的雙重挑戰。 由Big-Bit商務網
    的頭像 發表于 06-23 14:51 ?151次閱讀

    總功率超198kW,AI服務器電源對元器件提出了哪些要求?

    芯片GB200功率到2700W,是傳統服務器電源的5-7倍,但其面臨的挑戰同樣不小。 超高功率需求與空間限制。 AI服務器(如搭載英偉達Blackwell B100/B200或H100
    的頭像 發表于 06-17 10:36 ?346次閱讀
    總功率超198kW,<b class='flag-5'>AI</b><b class='flag-5'>服務器</b>電源對元器件提出了哪些要求?

    泰克科技解析AI服務器電源架構的技術演進

    2025年,AI熱潮持續升溫。大模型的參數規模越發驚人,訓練周期從月級壓縮至周級,ChatGPT、DeepSeek、Sora、Grok等一眾生成式AI應用輪番登場,讓“AI
    的頭像 發表于 06-07 09:06 ?864次閱讀
    泰克科技解析<b class='flag-5'>AI</b><b class='flag-5'>服務器</b>電源架構的<b class='flag-5'>技術</b>演進

    直播回顧 技術解答 | 思瑞浦AI服務器應用方案

    ,我們篩選了具有代表性的技術問題并做解答。快來和我們一起回顧吧!Q:思瑞浦的模擬產品和技術方案如何滿足AI服務器的高算力、高可靠性需求?思瑞
    的頭像 發表于 04-03 11:03 ?431次閱讀
    直播回顧  <b class='flag-5'>技術</b>解答 | 思瑞浦<b class='flag-5'>AI</b><b class='flag-5'>服務器</b>應用方案

    村田預測AI服務器MLCC需求翻倍

    近日,全球積層陶瓷電容(MLCC)行業的領軍企業——日本村田制作所社長中島規巨,在最新一季的財報會議上透露了關于MLCC市場需求的積極預測。他指出,隨著人工智能(AI技術的蓬勃發展,被動元件產業正迎來新的增長機遇。預計在未來一
    的頭像 發表于 02-08 15:51 ?617次閱讀

    新一代GaN器件,滿足AI服務器電源需求

    電子發燒友網站提供《新一代GaN器件,滿足AI服務器電源需求.pdf》資料免費下載
    發表于 01-24 13:56 ?0次下載
    新一代GaN器件,滿足<b class='flag-5'>AI</b><b class='flag-5'>服務器</b>電源<b class='flag-5'>需求</b>

    ChatGPT短暫“罷工”,云服務器還能用嗎?

    日,備受歡迎的AI聊天機器人ChatGPT突然遭遇了一次短暫的服務中斷,這讓不少用戶心生疑慮:云服務器,這個支撐起無數互聯網應用的強大后盾,究竟還靠譜嗎?
    的頭像 發表于 12-12 11:45 ?408次閱讀

    超微電腦AI服務器出貨數據彰顯強勁需求

    超微電腦(Super Micro Computer)周一公布的出貨數據,揭示了客戶對AI服務器的巨大需求。據超微透露,公司近期為多個大型AI工廠及云
    的頭像 發表于 10-08 14:54 ?695次閱讀

    什么是AI服務器AI服務器的優勢是什么?

    AI服務器是一種專門為人工智能應用設計的服務器,它采用異構形式的硬件架構,通常搭載GPU、FPGA、ASIC等加速芯片,利用CPU與加速芯片的組合來滿足高吞吐量互聯的需求,為自然語言處
    的頭像 發表于 09-21 11:43 ?2028次閱讀

    AI服務器:開啟智能計算新時代

    一、AI服務器的定義與特點 AI服務器的定義 AI服務器是一種基于云計算
    的頭像 發表于 08-09 16:08 ?1646次閱讀

    探索新潮流 — AI服務器引領數據中心的發展

    電子發燒友網站提供《探索新潮流 — AI服務器引領數據中心的發展.pdf》資料免費下載
    發表于 07-26 13:35 ?368次下載

    AI服務器的特點和關鍵技術

    AI服務器,即人工智能服務器,是一種專門設計用于運行和加速人工智能(AI)算法與模型的硬件設備。隨著人工智能技術的快速發展和普及,
    的頭像 發表于 07-17 16:34 ?3053次閱讀
    主站蜘蛛池模板: 91x视频| 欧美性猛交xxxx黑人喷水 | 色偷偷91综合久久噜噜 | 一本二卡三卡四卡乱码二百 | 1024免费永久福利视频 | 韩国十八禁毛片无遮挡 | 免费观看成人欧美1314www | 天堂最新资源在线 | 午夜在线观看视频 | 色网站综合 | 午夜色图| 国产高清色播视频免费看 | 国产一区二区三区美女在线观看 | 天天射天天色天天干 | 欧美日韩在线一本卡 | 天天操天天艹 | 色老头影视 | 色多多视频成人影院 | 一级@片| 777色狠狠一区二区三区香蕉 | 香蕉久久久久久狠狠色 | 五月丁香啪啪 | 欧美黄色片网站 | 二区视频在线 | 伊人不卡久久大香线蕉综合影院 | 99热手机在线观看 | 久久影视免费体验区午夜啪啪 | 一级做a爰片久久毛片人呢 一级做a爰片久久毛片图片 | 一级特黄aaa大片在 一级特黄aaa大片在线观看视频 | 久久综合九九亚洲一区 | 日本三浦理惠子中文字幕 | jdav视频在线观看 | 国产美女亚洲精品久久久久久 | 天堂网www在线资源链接 | 午夜福免费福利在线观看 | 特级毛片aaaa免费观看 | 手机看片日韩在线 | 极品丰满翘臀后进啪啪 | 日韩午夜精品 | 天天看天天干 | 无遮挡很爽很污很黄很色的网站 |