在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

搭建萬卡GPU集群,小米AI大模型即將全力啟動

Simon觀察 ? 來源:電子發燒友網 ? 作者:黃山明 ? 2024-12-29 00:02 ? 次閱讀
電子發燒友網報道(文/黃山明)近日,有媒體報道,小米正在著手搭建自家的GPU萬卡集群,將對AI大模型加大投入。該計劃已進行數月,據悉小米大模型團隊在成立之初便已擁有6500張GPU資源,小米創始人兼董事長雷軍在該團隊扮演重要的領導角色。

高性能計算是大模型發展的基礎,而GPU在其中扮演重要作用。隨著AI在如今社會中發揮著越來越重要的作用,應用領域不斷擴展,需要的計算資源也越來越多,因此對于GPU的需求也在不斷上升。

小米搭建萬卡GPU集群,加大AI大模型投入

如今我們生活中已經有不少領域開始充斥著AI的身影,包括AI配音、AI影像、AI圖片、AI導航,以及不少人正在使用的免費AI大模型等。但相比ChatGPT、豆包、Kimi、通義千問等知名度不小的大模型,小米的MiLM顯得相對低調。

這是一款在今年5月份才正式通過大模型備案的小米大預言模型,小米宣布將把相關模型逐步應用于小米汽車、手機智能家居等產品中,后續“將面向更多用戶開放體驗”。

而到了近期,市場更是傳出小米準備搭建GPU萬卡集群,決心加大對AI的投入。但搭建GPU的萬卡集群并不容易,一方面在于昂貴的成本。訓練AI大模型通常需要使用高性能的GPU芯片,如英偉達的A100、H100等。

這些高端芯片的單價本身就非常高,A100芯片價格約9萬元一張,H100閹割后的HGX H20渠道價格約11萬一張,而萬卡集群需要至少一萬張以上的GPU卡,僅芯片采購成本就可能達到數十億元。

并且除了GPU芯片本身,構建萬卡集群還需要大量的配套硬件設備,如服務器、存儲設備、網絡設備等。這些設備的采購和安裝成本也相當恐怖,進一步增加了總體投入。

而之所以需要GPU萬卡集群,是因為AI大模型通常包含數十億乃至數萬億的參數,例如GPT-3就有1750億個參數,訓練和推理過程中需要進行海量的矩陣運算和復雜的數學計算。如此大規模的計算任務,單張GPU的計算能力遠遠無法滿足,需要借助GPU萬卡集群并行計算來加速。

當然,這些技術的出現,其實并非突然,而是早有布局。小米早在2016年便開始組建第一只視覺AI團隊,逐步建立了視覺、語音、聲學、知識圖譜、NLP、機器學習、多模態等AI技術能力。

到2017年,小米正式發布了智能語音助手“小愛同學”。盡管當時的AI技術和現在相比可能顯得較為基礎,但小愛同學已經運用了語音識別、NLP、機器學習等核心技術來實現人機交互。

去年4月份,小米成立AI實驗室大模型團隊,初始團隊便擁有6500張GPU資源。并認為欒劍擔任該團隊的負責人,欒劍此前曾任東芝(中國)研究院研究員、微軟(中國)工程院高級語音科學家、微軟小冰首席語音科學家及語音團隊負責人等職位。

并且在近期,有消息稱DeepSeek開源大模型DeepSeek-V2的關鍵開發者之一羅福莉將加入小米,有望進一步加強小米AI大模型團隊實力。

端側擁抱AI已成共識,小米具備重大優勢

國內目前已經有多家企業開展了萬卡集群的建設,例如華為昇騰、科大訊飛、中國電信、中國移動等,其中中國電信在上海、北京兩個萬卡集群已經投產,而中國移動位于呼和浩特、哈爾濱兩大萬卡級別的智算中心也已經先后投產運行。

更別說百度等公司已經在探討構建十萬卡集群,有業內人士認為,市場中很快便會有更多的十萬卡集群出現。

另一方面,海外則更加激進。例如由馬斯克旗下xAI公司打造的xAI Colossus 超級AI集群,擁有10萬個英偉達H100 GPU。其第一階段建設已完成并全面上線,未來計劃增加5萬張H100 GPU和5萬張下一代H200 GPU,屆時GPU總數將翻倍。

OpenAI正在設計能夠將1000萬塊GPU連在一起的計算模型,Meta CEO扎克伯格曾在年初宣布,計劃購買35萬塊英偉達H100 GPU,將Meta的算力擴展到相當于60萬塊英偉達H100 GPU的水平。

與此同時,越來越多的企業開始更為注重AI,包括理想汽車創始人李想此前公開表示,理想汽車不僅是一家汽車制造企業,更是一家AI企業。

加上如今的AI手機、AI手表、AIPC甚至智能汽車等,這些端側產品均在積極擁抱AI,AI的加入也為這些產品帶來了更多的差異化與個性化,甚至有望成為未來產品體驗差異的分水嶺。

而相比其他企業,小米擁有一項重大的優勢,其AI大模型可以與自身的“人車家”戰略完美契合,甚至可以說AI大模型的加入,讓小米“人車家”全生態完成了最后一項閉環。

從手機到智能家居,再到新能源汽車,小米均有涉獵,并且大多已經成為行業中的主要參與者,例如小米為全球第三大手機廠商,米家更是全球最大的智能家居平臺,其中小愛音箱以超過40%的市場份額穩居中國智能音箱榜首。

小米汽車更是后來居上,不僅屢屢出圈,自今年3月份發布以來,有望在今年內實現超過13萬輛的交付成績,為小米集團貢獻近百億元的營收。同時小米汽車更是小米集團獨資控股,保證了小米汽車能夠貫徹未來小米集團的發展方向。

另一方面,雷軍不僅是小米的創始人,如今依然是金山軟件的董事長,意味著未來小米AI大模型有望在WPS等辦公軟件中布局。

從硬件端的互聯網入口,到辦公軟件、游戲等領域,都已經為小米的MiLM大模型預留足夠的發展空間,這是許多AI大模型企業沒有的巨大優勢。不僅保障了未來小米AI大模型的迭代升級,同時也解決了其數據歸屬問題,進一步加速AI大模型的升級。

總結

從小米過往布局新賽道的步伐來看,通常是確定了某個賽道已經得到市場驗證,并相對成熟再決定進入。進入賽道后,再利用小米集團的自身優勢,迅速做大做強。如今小米采用萬卡集群,加大投入到AI大模型領域,意味著不久后便有望看到該模型的普及。也期待未來市場中小米AI大模型的表現。
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • gpu
    gpu
    +關注

    關注

    28

    文章

    4916

    瀏覽量

    130744
  • 小米
    +關注

    關注

    70

    文章

    14451

    瀏覽量

    146639
  • AI大模型
    +關注

    關注

    0

    文章

    368

    瀏覽量

    518
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    智算加速是什么東西?它真能在AI戰場上干掉GPU和TPU!

    隨著AI技術火得一塌糊涂,大家都在談"大模型"、"AI加速"、"智能計算",可真到了落地環節,算力才是硬通貨。你有沒有發現,現在越來越多的AI企業不光用
    的頭像 發表于 06-05 13:39 ?293次閱讀
    智算加速<b class='flag-5'>卡</b>是什么東西?它真能在<b class='flag-5'>AI</b>戰場上干掉<b class='flag-5'>GPU</b>和TPU!

    算力破局:科通技術以&quot;AI模型+AI芯片&quot;重構智算底座

    “科通技術”)推出的“DeepSeek+AI芯片”全場景方案,在云AI領域取得重大突破。除了GPU的算力總量,云AI的一大挑戰來源于GPU
    的頭像 發表于 03-17 11:14 ?399次閱讀

    百度智能云發布昆侖芯三代集群及DeepSeek-R1/V3上線

    01百度智能云點亮昆侖芯三代集群 近日,百度智能云成功點亮昆侖芯三代集群,這也是國內首個
    的頭像 發表于 02-11 10:58 ?603次閱讀

    百度成功點亮國內首個昆侖芯三代集群

    近日,百度智能云宣布了一項重大技術突破:成功點亮了國內首個自研的昆侖芯三代集群。這一里程碑式的成就標志著百度在AI芯片領域取得了顯著進展。
    的頭像 發表于 02-06 17:52 ?1027次閱讀

    昆侖芯P800集群成功點亮,將進一步點亮3集群

    的。而24年9月升級的百度百舸AI異構計算平臺4.0,圍繞落地大模型全旅程的算力需求,在集群創建、開發實驗、模型訓練、模型推理四大方面,能為
    發表于 02-05 17:58 ?460次閱讀
    昆侖芯P800<b class='flag-5'>萬</b><b class='flag-5'>卡</b><b class='flag-5'>集群</b>成功點亮,將進一步點亮3<b class='flag-5'>萬</b><b class='flag-5'>卡</b><b class='flag-5'>集群</b>

    百度智能云點亮昆侖芯三代集群

    的人工智能算力需求。 昆侖芯三代作為百度自研的AI芯片,其性能卓越,能夠滿足復雜的人工智能任務需求。此次集群的成功點亮,不僅展示了百度在AI
    的頭像 發表于 02-05 14:58 ?554次閱讀

    雷軍千萬年薪挖角95后AI天才少女 DeepSeek開源大模型DeepSeek-V2關鍵開發者之一羅福莉

    就讀于北京師范大學計算機專業,碩士畢業于北京大學計算語言學專業。畢業后羅福莉先進入阿里達摩院做人工智能研究,從事預訓練語言模型相關的工作,后來加入DeepSeek研發MoE大模型DeepSeek-V2。 近期小米正積極發力
    的頭像 發表于 12-30 10:58 ?1350次閱讀

    小米加速布局AI模型,搭建GPU集群

    近日,有消息稱小米正在緊鑼密鼓地搭建自己的GPU集群,旨在加大對
    的頭像 發表于 12-28 14:25 ?491次閱讀

    GPU是如何訓練AI模型

    AI模型的訓練過程中,大量的計算工作集中在矩陣乘法、向量加法和激活函數等運算上。這些運算正是GPU所擅長的。接下來,AI部落小編帶您了解GPU
    的頭像 發表于 12-19 17:54 ?660次閱讀

    MetaGPU集群穩定性剖析與最佳實踐

    一、背景 本文中我們將具體介紹 Meta 對其 AI 集群穩定性的剖析和刻畫,以及在其中遇到的各種挑戰,并在其中補充了一些真實場景中遇到的 Case,便于理解。 對應的論文為
    的頭像 發表于 12-17 09:51 ?1972次閱讀
    Meta<b class='flag-5'>萬</b><b class='flag-5'>卡</b><b class='flag-5'>GPU</b><b class='flag-5'>集群</b>穩定性剖析與最佳實踐

    GPU服務器AI網絡架構設計

    眾所周知,在大型模型訓練中,通常采用每臺服務器配備多個GPU集群架構。在上一篇文章《高性能GPU服務器AI網絡架構(上篇)》中,我們對
    的頭像 發表于 11-05 16:20 ?1099次閱讀
    <b class='flag-5'>GPU</b>服務器<b class='flag-5'>AI</b>網絡架構設計

    NVIDIA Colossus超級計算機集群突破10顆Hopper GPU

    NVIDIA近日宣布,其位于田納西州孟菲斯市的xAI Colossus超級計算機集群規模已壯大至10顆NVIDIA Hopper GPU。這一里程碑式的成就,再次彰顯了NVIDIA在AI
    的頭像 發表于 10-30 10:29 ?584次閱讀

    為什么ai模型訓練要用gpu

    GPU憑借其強大的并行處理能力和高效的內存系統,已成為AI模型訓練不可或缺的重要工具。
    的頭像 發表于 10-24 09:39 ?887次閱讀

    【「大模型時代的基礎架構」閱讀體驗】+ 未知領域的感受

    ”,好奇于這種大模型算力中心到底是如何建設的,用什么設備、什么架構建設的?對這些問題真是一無所知,甚至都沒有想過,帶著這份好奇開始閱讀。 先瀏覽目錄,共分十三章,目錄中出現最多的就是GPU,比如機器學習
    發表于 10-08 10:40

    從千集群卡到集群,燧原科技打造更好的AI算力底座

    :WAIC 2024)上,不僅有國內各大模型廠商同場競技,也有豐富的算力基礎設施展示,其中包括專注人工智能領域云端算力產品的燧原科技。 ? 燧原科技展臺 從千集群
    的頭像 發表于 07-07 09:45 ?2985次閱讀
    從千<b class='flag-5'>卡</b><b class='flag-5'>集群</b>卡到<b class='flag-5'>萬</b><b class='flag-5'>卡</b><b class='flag-5'>集群</b>,燧原科技打造更好的<b class='flag-5'>AI</b>算力底座
    主站蜘蛛池模板: miya亚洲私人影院在线 | 国产精品日韩欧美亚洲另类 | 国产免费的野战视频 | 99热成人精品热久久669 | 黄色网在线看 | 天堂资源在线bt种子 | 国产美女作爱 | 男人呻吟双腿大开男男h互攻 | www.天天射 | 好色成人网 | 国产成人mv 在线播放 | 免费一级毛片在线播放不收费 | 欧美一级艳片视频免费观看 | 色婷婷99综合久久久精品 | 在线资源你懂的 | 综合欧美一区二区三区 | www.天天射.com | 丁香激情六月 | 日韩欧美亚洲综合一区二区 | 国产亚洲视频在线 | 激情综合色综合久久综合 | 久久久噜噜噜 | 天天操综合网 | 成人免费看黄网站无遮挡 | 色婷婷综合激情 | 九色97| 福利毛片 | 天天操天天操天天操香蕉 | 精品国产乱码一区二区三区 | 日韩系列 | 欧美xxxx色视频在线观看 | 西西人体大胆高清啪啪欧洲 | 简单视频在线播放jdav | 中文字幕一区二区三区不卡 | 欧美成人一区二区三区在线视频 | 视频在线一区 | 大乳妇女bd视频在线观看 | 亚洲日本免费 | 午夜看看 | 国产日韩精品一区二区在线观看 | 欧美午夜片 |