在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

生成式AI帶火的不止GPU,網(wǎng)絡(luò)芯片迎來下一輪大戰(zhàn)

E4Life ? 來源:電子發(fā)燒友網(wǎng) ? 作者:周凱揚 ? 2023-06-30 01:08 ? 次閱讀

電子發(fā)燒友網(wǎng)報道(文/周凱揚)在生成式AI的熱度之下,橫向擴展AI訓(xùn)練與推理性能成了每個云服務(wù)廠商、數(shù)據(jù)中心以及互聯(lián)網(wǎng)廠商追求的目標,這點從前段時間的GPU搶購潮就能看出來,龐大的GPU基數(shù)在當下幾乎可以和強大的AI算力畫上等號。

然而,真正將這些GPU連接起來的,還是靠以太網(wǎng)交換機、路由這類網(wǎng)絡(luò)芯片。隨著數(shù)據(jù)中心解耦趨勢愈發(fā)明顯,相繼認識到這一點的網(wǎng)絡(luò)芯片廠商都開始新一輪的軍備競賽,諸如博通、美滿和思科等廠商都已經(jīng)加快了新品推出的節(jié)奏。

博通Tomahawk

作為在數(shù)據(jù)中心網(wǎng)絡(luò)芯片耕耘了12年以上的博通,從640G的Trident系列到25.6T的Tomahawk4系列,已經(jīng)完成了多次設(shè)計迭代,顯著提高了網(wǎng)絡(luò)芯片的帶寬。今年三月,博通終于發(fā)布了Tomahawk 5系列網(wǎng)絡(luò)芯片,也是市面上首個量產(chǎn)51.2Tbps交換帶寬的芯片。

新的Tomahawk 5系列無疑是在暴漲的AI需求下誕生的,我們從其設(shè)計中也能看出。由于做到了更高的端口密度,Tomahawk 5可以實現(xiàn)256高性能AI/ML加速器之間的單跳連接,且每個都能做到200Gbps的網(wǎng)絡(luò)帶寬。這對于數(shù)據(jù)中心的AI訓(xùn)練和推理的負載來說,無疑提高了吞吐效率,尤其是日益流行且愈發(fā)復(fù)雜的生成式AI模型。

wKgZomSdWGCACur4AAFkjhy-LfI022.jpg
Trident和Tomahawk芯片路線圖 / 博通


在物理設(shè)計上,Tomahawk 5采用了如今已經(jīng)趨近成熟的共封裝光學(xué)(CPO)方案,相較過去的光模塊在前端面板插拔的方案,CPO選擇將網(wǎng)絡(luò)交換芯片和光模塊封裝在一起。這一封裝方案結(jié)合5nm的芯片工藝,將功耗進一步降低了30%。

另外值得一提的是,博通的第三條網(wǎng)絡(luò)芯片產(chǎn)品線,Jericho,也在近期迎來了新品Jericho3-AI。相比以高帶寬為重心的Tomahawk產(chǎn)品線,和主打更多功能性的Trident產(chǎn)品線,Jericho往往以較低帶寬、深度緩存和高可編程性著稱。

而Jericho3-AI雖然確實是28.8T的以太網(wǎng)交換機芯片,卻針對AI訓(xùn)練負載做了特殊的優(yōu)化,更高的端口密度使得Jericho3-AI可以在單個集群中連接32000個GPU,并做到800Gbps的連接帶寬表現(xiàn)。博通甚至將其與英偉達自己的InfiniBand方案對比,Jericho3-AI在完成時間上有著10%左右的優(yōu)勢。這也是Jericho系列獨有的優(yōu)勢,實現(xiàn)標準以太網(wǎng)芯片無法實現(xiàn)卻在AI或HPC應(yīng)用上被看重的靈活功能。

思科Silicon One

其實早在2019年思科首次推出Silicon One網(wǎng)絡(luò)芯片時,博通CEO霍克·譚就表示:“思科在該市場的參與,恰巧驗證了我們推進的這一行業(yè)趨勢,也就是數(shù)據(jù)中心的解耦。我們很高興自己再次押對了,也歡迎更多的競爭。”要知道,之前的思科可是博通的優(yōu)質(zhì)客戶之一,如今身份的轉(zhuǎn)變已經(jīng)對網(wǎng)絡(luò)芯片的市場格局產(chǎn)生了不小的影響。

wKgaomSdWGqAN4RAAAF6las7nPg625.jpg
Silicon One芯片路線圖 / 思科


在第一代自研芯片Silicon One發(fā)布三年半之后,思科在近日終于推出了該產(chǎn)品線的第四代產(chǎn)品,以太網(wǎng)交換機芯片G200和G202。其中G200專注于統(tǒng)一架構(gòu)和基于以太網(wǎng)的AI/ML應(yīng)用部署,這個采用 5nm工藝打造的芯片,基于512個112Gbps SerDes打造,同樣可以做到51.2Tbps的交換帶寬。

而G202則是針對想要繼續(xù)使用50G SerDes的客戶打造的,同樣基于5nm的工藝,G202采用了512x56Gbps SerDes的配置,其特性與G200完全一致,只不過交換性能只有G200的一半。

根據(jù)思科的說法,由于單設(shè)備512個100GE以太網(wǎng)端口的超高端口密度,客戶可以在一個雙層網(wǎng)絡(luò)上構(gòu)建由32000個400G GPU組成的AI/ML集群。借助G200打造這樣一個龐大的網(wǎng)絡(luò),卻依然可以省去50%的光學(xué)組件、40%左右的交換機,極大減少這類集群的碳足跡,每年最高可以省下900萬kWh的耗能。據(jù)了解,G200已經(jīng)送樣給六大云服務(wù)商中的五家進行測試了。

美滿Teralynx

在收購由幾位前博通高管打造的芯片初創(chuàng)公司Innovium后,美滿也開始了他們的網(wǎng)絡(luò)芯片逆襲。同樣是在今年3月,美滿也推出了自己的51.2Tbps交換機芯片,Teralynx 10。相比其他兩家,美滿為Teralynx 10選擇的定位是超低延遲的可編程交換機芯片,這也是此前Innovium的設(shè)計目標。

不過直至目前為止,美滿并沒有將Teralynx并入自己的Prestera產(chǎn)品線內(nèi),看來Prestera應(yīng)該還是主打企業(yè)與邊緣數(shù)據(jù)中心市場,而面向云端數(shù)據(jù)中心的Teralynx系列繼續(xù)沿用原來的產(chǎn)品線名稱。

除了用到業(yè)界頂級的112G SerDes IP和先進的工藝實現(xiàn)低功耗的系統(tǒng)設(shè)計以外,美滿電子宣稱Teralynx 10可以提供1.7倍的延遲優(yōu)勢,這對于生成式AI這種看重完成時間和網(wǎng)絡(luò)傳輸時間的應(yīng)用來說至關(guān)重要。

wKgaomSdWHOATyvjAACvKFyVHqE636.png
企業(yè)與數(shù)據(jù)中心的交換芯片方案 / 美滿


還有一點與其他兩家不同的是,Teralynx 10可以驅(qū)動128個400Gbps端口、64個800Gbps端口和32個1.6Tbps端口,1.6Tbps的端口驅(qū)動能力可以說是放眼未來了,這也意味著Teralynx 10可以直接在1RU大小的機柜中實現(xiàn)51.2Tbps的性能。

為此,美滿也推出了Nova這一業(yè)界首個做到1.6Tbps的PAM4電光平臺,Nova基于美滿的200Gbps/lambda光DSP打造,足以為1.6Tbps的可插拔光模塊提供支持。由于DSP的帶寬翻倍,基于Nova的光模塊不僅減少了所需激光和相關(guān)光學(xué)組件的數(shù)量,相較其他的方案來說穩(wěn)定性也同樣加倍。雖然800Gbps的光模塊仍在普及中,但要想在下一代數(shù)據(jù)中心交換網(wǎng)絡(luò)中搶占先機,1.6Tbps的光模塊也該盡快提上日程了。

寫在最后

之所以這些廠商都能這么快推出下一代高性能網(wǎng)絡(luò)芯片,其實還是靠EDA/IP和封裝技術(shù)打好了第一波基礎(chǔ),廠商們先一步推出了完善的以太網(wǎng)IP和共封裝光學(xué)方案。不過這也意味著過去數(shù)據(jù)中心交換硬件很可能迎來新一波的換代,從目前來看應(yīng)該是只有大型云服務(wù)廠商有這個資本進行大規(guī)模替換。

但除了這些網(wǎng)絡(luò)芯片公司之間的斗爭之外,他們也需要提防英偉達這樣既有GPU業(yè)務(wù)又有網(wǎng)絡(luò)芯片業(yè)務(wù)的廠商。以上提到的這三家在推出的新品上都有劍指英偉達InfiniBand的意思,畢竟后者從一開始就是為了HPC和AI打造的通信標準,而它們則是剛從Web Scaling轉(zhuǎn)向AI Scaling,從外部網(wǎng)絡(luò)交換轉(zhuǎn)為內(nèi)部網(wǎng)絡(luò)交換,仍需要不斷提升產(chǎn)品性能才能在這個競爭激烈的市場上存活下去。

不過這也可以看出AI帶來的熱度,因為無論是從軟件還是從硬件上,產(chǎn)品的迭代速度都有了成倍提升。800GbE時代的到來,也導(dǎo)致所有想在服務(wù)器市場創(chuàng)造增長的廠商紛紛趨之若鶩,好在這樣的趨勢恰恰是服務(wù)器市場急需的一劑強心劑。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4921

    瀏覽量

    130812
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    34588

    瀏覽量

    276175
  • 生成式AI
    +關(guān)注

    關(guān)注

    0

    文章

    528

    瀏覽量

    722
收藏 人收藏

    評論

    相關(guān)推薦
    熱點推薦

    谷歌新生成AI媒體模型登陸Vertex AI平臺

    我們在 Vertex AI 上推出新生成 AI 媒體模型: Imagen 4、Veo 3 和 Lyria 2。
    的頭像 發(fā)表于 06-18 09:56 ?150次閱讀

    適用于數(shù)據(jù)中心和AI時代的800G網(wǎng)絡(luò)

    數(shù)據(jù)中心依賴數(shù)千甚至上萬個GPU集群進行高性能計算,對帶寬、延遲和數(shù)據(jù)交換效率提出極高要求。 AI云:以生成AI為核心的云平臺,為多
    發(fā)表于 03-25 17:35

    聚云科技榮獲亞馬遜云科技生成AI能力認證

    助力企業(yè)加速生成AI應(yīng)用落地 北京2025年2月14日?/美通社/ -- 云管理服務(wù)提供商聚云科技獲得亞馬遜云科技生成
    的頭像 發(fā)表于 02-14 16:07 ?346次閱讀

    聚云科技榮獲亞馬遜云科技生成AI能力認證 助力企業(yè)加速生成AI應(yīng)用落地

    北京 ——2025 年 2 月 14 日 云管理服務(wù)提供商聚云科技獲得亞馬遜云科技生成AI能力認證,利用亞馬遜云科技全托管的生成
    發(fā)表于 02-14 13:41 ?137次閱讀

    生成AI推理技術(shù)、市場與未來

    (reasoning)能力,這轉(zhuǎn)變將極大推動上層應(yīng)用的發(fā)展。 紅杉資本近期指出,在可預(yù)見的未來,邏輯推理和推理時計算將是個重要主題,并開啟生成
    的頭像 發(fā)表于 01-20 11:16 ?785次閱讀
    <b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>推理技術(shù)、市場與未來

    生成AI工具好用嗎

    當下,生成AI工具正以其強大的內(nèi)容生成能力,為用戶帶來了前所未有的便捷與創(chuàng)新。那么,生成
    的頭像 發(fā)表于 01-17 09:54 ?410次閱讀

    GPU服務(wù)器AI網(wǎng)絡(luò)架構(gòu)設(shè)計

    眾所周知,在大型模型訓(xùn)練中,通常采用每臺服務(wù)器配備多個GPU的集群架構(gòu)。在上篇文章《高性能GPU服務(wù)器AI網(wǎng)絡(luò)架構(gòu)(上篇)》中,我們對
    的頭像 發(fā)表于 11-05 16:20 ?1120次閱讀
    <b class='flag-5'>GPU</b>服務(wù)器<b class='flag-5'>AI</b><b class='flag-5'>網(wǎng)絡(luò)</b>架構(gòu)設(shè)計

    雷諾下一代車載語音助手Reno將引入生成AI技術(shù)

    11月1日,賽思軟件技術(shù)公司與雷諾公司宣布深化合作,旨在將生成AI技術(shù)和類人交互功能融入雷諾下一代多模態(tài)虛擬車載助手Reno中。
    的頭像 發(fā)表于 11-01 16:39 ?1656次閱讀

    榮耀迎來一輪投資,中國電信、中金資本等加入

    據(jù)最新報道,榮耀在其股權(quán)改革進程中迎來了新一輪投資者的加入,包括中國電信、中金資本旗下基金、基石資本旗下基金、特發(fā)基金,以及新成立的代理商投資平臺金石星耀等。   榮耀方面表示,此次融資堅持公開透明的原則,旨在進步推動股
    的頭像 發(fā)表于 10-31 13:44 ?1061次閱讀

    生成AI工具作用

    生成AI工具是指那些能夠自動生成文本、圖像、音頻、視頻等多種類型數(shù)據(jù)的人工智能技術(shù)。在此,petacloud.ai小編為您整理
    的頭像 發(fā)表于 10-28 11:19 ?671次閱讀

    OpenAI新一輪融資66億美元,鞏固AI領(lǐng)先地位

    近日,美國人工智能領(lǐng)域的佼佼者OpenAI宣布,在最新一輪融資中成功籌集了高達66億美元的資金。此次融資后,OpenAI的估值飆升至1570億美元,再次彰顯了其在全球AI領(lǐng)域的強勁實力。
    的頭像 發(fā)表于 10-08 14:44 ?545次閱讀

    三行代碼完成生成AI部署

    OpenVINO2024.2版本跟之前版本最大的不同是OpenVINO2024.2分為兩個安裝包分別是基礎(chǔ)包與生成AI支持包,新發(fā)布的GenAI開發(fā)包支持C++與Python語言接口調(diào)用,支持多種
    的頭像 發(fā)表于 08-30 16:49 ?712次閱讀
    三行代碼完成<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>部署

    OpenAI自研芯片計劃調(diào)整,傳交臺積電生產(chǎn)

    近日,全球領(lǐng)先的生成AI應(yīng)用大廠OpenAI在自研芯片領(lǐng)域迎來了重大戰(zhàn)略調(diào)整。為降低對外部
    的頭像 發(fā)表于 07-23 16:52 ?938次閱讀

    生成AI的基本原理和應(yīng)用領(lǐng)域

    生成人工智能(Generative Artificial Intelligence,簡稱Generative AI)是種利用機器學(xué)習(xí)算法和深度學(xué)習(xí)技術(shù),通過模擬人類的創(chuàng)造性思維過程
    的頭像 發(fā)表于 07-04 11:50 ?3228次閱讀

    生成AI與神經(jīng)網(wǎng)絡(luò)模型的區(qū)別和聯(lián)系

    生成AI與神經(jīng)網(wǎng)絡(luò)模型是現(xiàn)代人工智能領(lǐng)域的兩個核心概念,它們在推動技術(shù)進步和應(yīng)用拓展方面發(fā)揮著至關(guān)重要的作用。本文將詳細探討生成
    的頭像 發(fā)表于 07-02 15:03 ?1604次閱讀
    主站蜘蛛池模板: 国产小视频免费在线观看 | 色黄网站 | 精品少妇一区二区三区视频 | 午夜免费福利影院 | 欧美成人精品福利网站 | 日韩免费一级片 | 夜夜春宵翁熄性放纵古代 | 国产美女视频黄a视频免费全过程 | 亚洲黄色在线网站 | 欧美精品video| 久操视频免费观看 | 大杳蕉伊人狼人久久一本线 | 欧美性受视频 | 四虎影院永久在线观看 | 黄色一级毛片看一级毛片 | 欧美色视频日本片免费高清 | 久久两性视频 | 欧美性天天影院 | 操到喷水| 日韩欧美不卡片 | 高清一级 | 影音先锋色偷偷米奇四色 | 天天做天天爱天天干 | 91九色porny蝌蚪 | 成年1314在线观看 | 三级黄网站 | 免费看美女毛片 | 日本免费一级视频 | 久久国产高清字幕中文 | 国产精品一久久香蕉产线看 | 成人在线一区二区三区 | 2018天天夜夜 | 亚洲一级免费视频 | 片免费观看在线看 | 天天看黄| 一级毛片一片毛 | 午夜88 | 伊人婷婷色香五月综合缴激情 | 黄色国产在线视频 | 特黄视频 | 免费人成网址在线观看国内 |