在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

破解AI帶來的數據存儲挑戰,西部數據是如何做的?

焦點訊 ? 來源:焦點訊 ? 作者:焦點訊 ? 2024-02-01 09:39 ? 次閱讀

在數智化時代,“數據”算得上是絕對的“C位”......

作為一種重要的生產要素,數據在規?;ぴ龅耐瑫r,其價值也正在得到釋放:新近印發的《“數據要素×”三年行動計劃(2024—2026年)》提出,到2026年底,數據要素應用廣度和深度大幅拓展,在經濟發展領域數據要素乘數效應得到顯現;以ChatGPT為代表的大模型持續火熱,在帶動算力,尤其是智能算力需求爆發的同時,也帶來了用于大模型訓練與大模型推理的海量大數據的需求。

這也僅僅是數據價值得到釋放的案例之一。而隨著AI大模型的進一步發展和普及,數據的規模將持續擴大,數據的價值還將得到進一步釋放。在人工智能領域,西部數據認為,數據的質量與數量決定了人工智能的整體水平。然而,筆者注意到,大模型訓練、推理所需的算力基礎設施除了提供算力、運力等資源外,還需要提供存力,也就是數據存儲力,這對數據存儲的性能、容量、成本以及能耗提出新的要求。

“木桶效應”里,數據存力不做“短板”

算力、數據、算法是支撐AI大模型落地的三大要素,在大模型爆發初期,企業普遍將注意力放在價格高昂、供不應求的智能算力上,容易被忽略的數據存力同樣起著至關重要的作用。事實上,大模型的訓練與推理需要依托計算芯片、存儲與網絡共同構成的大規模算力集群,這其中,算力、存力、運力都不應該成為“木桶效應”的“短板”。

事實上,算力集群也是存在短板效應的,假如存儲和網絡無法支撐大規模數據存儲、讀寫與傳輸,即使計算芯片的性能再強,也不會有用武之地,同時還會影響大模型訓練的效率。之所以這樣說是有原因的,相關調查顯示,大模型場景對于數據存力有著高吞吐、高IOPS、高帶寬、低延時的極致性能需求。如若存儲性能達不到要求,會使得數據存力成為“短板”。

西部數據進一步指出,目前AI應用場景的存儲架構主要建立在分層存儲、存算分離的基礎上,整套數據存儲架構必須同時滿足容量、性能、成本以及能耗的多樣化要求,搭配多樣化的產品組建數據存儲基礎設施。下面,筆者也將從大模型訓練的數據所擁有的特征來驗證西部數據的這一觀點。

我們需要承認的事實是,大模型訓練所需的數據規模是龐大的:以文檔、圖片、音視頻為代表的非結構化數據,其規模可以達到幾億至幾十億量級;從純文本的TB級到多種數據類型的PB級都需要占據大量的存儲空間。

因此,海量數據需要存儲系統支持高吞吐、大容量,同時支持多種協議數據互通,讓數據能夠快速地在各個環節流轉,避免數據等待產生算力閑置的狀況。

大模型訓練對存儲帶寬也是有要求的,據悉,大模型訓練存儲帶寬的要求比電商業務頂峰時段高出幾百甚至幾千倍,存儲性能的高低可能造成模型訓練周期數倍的差異。此外,大模型落地的成本也是關注的焦點,千億級別參數、動輒以月來計算的訓練周期,意味著極大的存儲成本,降低成本成為關鍵所在。

破解存力短板,西部數據有哪些解決方案?

滿足AI時代數據存儲的需求,存儲解決方案提供商需要從容量、性能、成本、能耗等方面出發,打造多樣化、差異化的解決方案。西部數據以企業部署AIGC應用工作負載為例,對其所需的存儲解決方案進行說明。西部數據認為,未來,以AIGC為代表的先進數字化應用產生的以存為主、低頻使用且價值不太明顯的非結構化數據的價值挖掘也將成為企業中的關鍵性問題。

西部數據預計,高效可靠地進行海量非結構化數據的存儲和分析,將成為企業數據治理的一個重要考量。面對AI大模型的進一步發展和普及,西部數據將繼續憑借在存儲領域的多年積累和核心優勢,提供多樣化的數據存儲解決方案和產品,為AI大模型進一步發展提供數據存儲基礎架構的堅實底座。具體來看,西部數據所提供的低時延、更高IOPS的SSD產品和大容量滿足更低TCO和功耗的HDD產品能夠為相關基礎設施建設提供存儲解決方案支持。

在Flash領域,西部數據打造的企業級SSD擁有三大核心技術優勢,也就是集成完全自主的NAND Flash、先進的SSD控制器和高性能固件于一體,這樣集成能夠讓SSD實現性能和穩定性的極致優化,確保SSD生命周期穩定的I/O一致性。同時,西部數據攜手鎧俠成功地推出第八代218層3D閃存,在性能、密度和成本效益方面實現了重大飛躍。西部數據還提供包括SN840、SN650、SN655在內的針對不同需求的企業級SSD產品,從而滿足豐富多樣的應用需求。

而在HDD領域,西部數據借助創新的OptiNAND技術、能量輔助磁記錄(ePMR)、三階尋軌定位系統(TSA)、氦氣封裝(HelioSeal)以及全新的UltraSMR技術,能夠更好地幫助云服務客戶降低存儲總體擁有成本(TCO),從而持續、快速地擴展業務。同時,由于在面密度技術上的獨特優勢,西部數據能夠更好地幫助客戶獲得更低的每TB容量功耗,幫助數據中心客戶提高PUE(電源使用效率)。

HDD產品上,西部數據可提供容量高達24TB 的Ultrastar DC HC580 CMR HDD、及28TB 的Ultrastar DC HC680 SMR HDD。據了解,UltrastarDC HC680 SMR HDD為超大規模云、云服務提供商和企業級客戶提供了更高的存儲密度,廣泛應用于大容量存儲、在線備份、智慧視頻、在線歸檔、云存儲、合規性存儲、大數據存儲以及其他可能不常訪問數據的應用。

西部數據透露,自2023年8月出樣以來,28TB SMR HDD正在快速進入市場,它將進一步增強西部數據在SMR HDD市場的地位與發展勢頭。在公司2024財年第1季度,西部數據26TB SMR HDD總出貨量將達到其數據中心產品總出貨量的近50%。

攜手合作伙伴,打造AI時代的存儲方案

數據存儲離不開合作伙伴,西部數據一直以來積極與合作伙伴在產品、技術和市場方面持續合作。在產品上,西部數據積極地與重要的軟件開發商、云服務提供商都在做進一步方案系統升級的優化合作,并將最新的技術和產品交付樣品給合作伙伴做聯合測試,持續優化可能存在的問題,最終打造出符合合作伙伴和市場需要的解決方案。

比如,越來越多的客戶將SMR添加到其數據中心發展路線之中,通過優化堆棧以發揮SMR技術的優勢。因此,這些客戶還可以通過采用目前市場上更大容量的HDD產品,以更低的功耗擴展產品組合部署,從而在上市速度方面持續保持優勢。

據悉,西部數據UltrastarDC HC680已由部分超大規模云、云服務提供商和OEM客戶進行驗證,西部數據也希望以較低的每TB功耗,想要獲得更大存儲容量的大型企業級客戶供貨,用以構建更高效的存儲系統和數據中心。

此外,西部數據還在上海浦東打造了西部數據解決方案賦能中心,以此來支持企業級、OEM客戶進行產品與解決方案的測試,進一步支持本土市場。

除了合作伙伴,用戶的反饋也是至關重要的。在西部數據看來,存儲技術的發展離不開每一位應用和創造出數據的用戶。為此,西部數據將持續聆聽市場的聲音和用戶的反饋,不懈地創新、共同地開發滿足未來存儲需求的產品和解決方案。

面向未來,西部數據透露,也將積極地與行業內的頭部云服務商、OEM以及其他合作伙伴保持緊密的合作關系,通過幫助部署西部數據創新的企業級存儲產品,打造符合當前AI技術快速增長、多元AI應用不斷涌現時代下的存儲解決方案,進一步賦能新型計算與綠色算力的發展。

寫在最后

如今的AI賽道可謂異常火熱,這種火熱不僅是端側的大模型數量與規模的持續擴大,也不僅是大模型的訓練與推理帶來的智能算力的需求,同時還是AI持續賦能云、網、邊、端的持續升級。而在這場關于AI賦能的競賽中,我們不可否認的是,AI在帶來新的機遇的同時也帶來挑戰,這包括算力、大模型質量、安全,這也包括數據存儲。

換言之,隨著AI的迅猛發展,數據存儲需求的持續增加正在成為一個不可忽略的事實。據統計,AI服務器所需的DRAM和NAND閃存容量分別是常規服務器的8倍和3倍。這也意味著存儲系統必須具備足夠的容量來存儲海量的訓練數據和模型參數,以支持人工智能應用的高性能運行。

在這個背景下,我們看到以西部數據為代表的存儲解決方案廠商充分整合積累的專業技術能力與各行業的合作經驗,通過技術創新、解決方案的持續打造、與合作伙伴持續深入地合作和賦能,持續提供針對AI應用領域存儲需求的定制化解決方案,為AI時代貢獻著自己的力量。

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4478

    瀏覽量

    86967
  • 數據存儲
    +關注

    關注

    5

    文章

    993

    瀏覽量

    51571
  • 西部數據
    +關注

    關注

    5

    文章

    540

    瀏覽量

    46911
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    西部數據推出大容量存儲方案,賦能NAS用戶、創意專業人士與內容創作者

    了更高的要求。隨著當今數據驅動的需求不斷增長,西部數據公司(NASDAQ: WDC)推出了一系列全新升級的產品,旨在滿足市場對大容量存儲解決方案的迫切需求。 大容量與高性能的HDD賦能創意工作流
    發表于 03-12 16:16 ?193次閱讀

    西部數據投資者日公布戰略藍圖及分拆計劃

    。 候任首席執行官Irving Tan在活動中強調了西部數據在提供世界級可持續大規模存儲解決方案方面的領導地位。他指出,憑借在HDD技術和創新領域的深厚底蘊,西部數據能夠以較低的總體擁有成本(TCO)為客戶提供前沿的
    的頭像 發表于 02-18 10:08 ?336次閱讀

    西部數據分拆計劃即將完成

    部門將繼續沿用“西部數據”這一名號,保持其在硬盤存儲領域的領先地位。而閃存部門則將成為一個全新的獨立實體,以“閃迪公司”的身份亮相。這一舉措旨在通過業務分拆,使兩個部門能夠更加專注于各自領域的發展,提高運營效率
    的頭像 發表于 02-14 13:48 ?351次閱讀

    西部數據本財季將分拆閃存業務

    西部數據現任首席執行官David Goeckeler在公司2025財年第二財季財報電話會議上宣布了一項重大決定:本財季晚些時候,西部數據將完成其閃存業務的分拆。 屆時,西部數據的閃存部門將重新成為
    的頭像 發表于 02-10 15:36 ?351次閱讀

    西部數據本財季將完成閃存業務分拆

    西部數據現任首席執行官David Goeckeler在近日舉行的公司2025財年第二財季財報電話會議上透露了一個重要信息:西部數據將于本財季(該財季將于今年3月28日結束)晚些時候完成其閃存業務的分
    的頭像 發表于 02-07 15:10 ?414次閱讀

    西部數據正式通知減產15%以縮減庫存

    近日,據外媒報道,全球NAND Flash存儲市場中的一大重要參與者——西部數據,已經正式向其客戶發出了減產通知。這一決定旨在縮減當前庫存水平,以應對市場供需關系的變化。 在NAND Flash存儲
    的頭像 發表于 02-06 09:38 ?368次閱讀

    西部數據發布超高速、大容量存儲新品

    近日,西部數據公司震撼發布了一系列全新的閃存存儲解決方案,旨在為即將到來的節假日提供專業人士和廣大消費者的完美數據存儲選擇。無論是作為節日禮物,還是為新項目做準備,
    的頭像 發表于 12-26 14:18 ?553次閱讀

    AI存儲瓶頸破解之道,西部數據用前沿技術持續引領存儲革命

    當前,人工智能已經成為推動企業創新和可持續發展的核心驅動力。隨著生成式AI時代的到來,各種大模型應用層出不窮,人們在關注算力和算法的同時,構建先進的數據存儲系統,滿足海量數據交互、
    的頭像 發表于 11-30 08:27 ?550次閱讀

    鎖定這份存儲好物攻略,西部數據邀您盡享高效生活

    無論你是準備深潛學術海洋的學生黨,熱愛記錄生活的攝影師,或是熱衷于創意表達的內容創作者,渴望在電競世界中尋求激情的玩家,都亟需一款存儲設備來妥善分享與存取自己的寶貴數據。雙十一盛典即將來襲,西部數據
    的頭像 發表于 10-22 11:39 ?775次閱讀

    西部數據發布WD Blue SN5000 NVMe SSD

    西部數據近期宣布,正式推出其WD Blue系列的最新成員——WD Blue? SN5000 NVMe? SSD,專為追求極致性能的內容創作者與專業人士量身打造。這款SSD的推出,標志著西部數據在高端存儲解決方案領域的又一重要里程
    的頭像 發表于 09-02 18:25 ?1209次閱讀

    西部數據擬6.77億美元擴產泰國機械硬盤生產線

    近日,全球領先的數據存儲解決方案提供商西部數據傳來重要投資動向。據市場消息透露,西部數據正計劃斥資約6.77億美元(折合230億泰銖),在泰國擴大其機械硬盤(HDD)的生產能力。這一擴
    的頭像 發表于 08-30 16:32 ?1908次閱讀

    ChinaJoy 2024啟動!西部數據展示豐富游戲存儲解決方案讓發燒友直面各式挑戰

    的高性能存儲解決方案亮相2024中國國際數碼互動娛樂展覽會(ChinaJoy)。 為期4天的展會中,西部數據旗下WD_BLACK和閃迪品牌通過與AMD、盛趣游戲-街頭籃球、世紀天成、網易游戲、AGON愛攻等多家行業伙伴以合作展示的形式,讓前往現場體驗的廣大熱情玩家無懼
    的頭像 發表于 07-30 08:53 ?524次閱讀
    ChinaJoy 2024啟動!<b class='flag-5'>西部數據</b>展示豐富游戲<b class='flag-5'>存儲</b>解決方案讓發燒友直面各式<b class='flag-5'>挑戰</b>

    西部數據推出2TB QLC NAND閃存芯片,重塑數據存儲新紀元

    在當今這個數據爆炸的時代,存儲技術的每一次革新都牽動著整個科技行業的神經。近日,西部數據在投資者活動上揭開了一項令人矚目的技術突破——業界最高密度的2TB QLC NAND閃存芯片,這款名為BiCS8的芯片不僅代表了
    的頭像 發表于 06-15 11:42 ?1412次閱讀

    西部數據發布AI數據周期框架,推動人工智能革新

    在人工智能領域持續革新的今天,西部數據公司憑借其深厚的技術積累,正式發布了全新的人工智能數據周期(AI Data Cycle)框架。這一框架不僅為下一代人工智能的飛速發展提供了強大助力,更為用戶指明了如何構建高效、經濟的
    的頭像 發表于 06-14 17:55 ?1194次閱讀

    年中好價狂歡,跟著西部數據實現存儲無憂之夏

    夏日炎炎,熱情不減,萬千好物齊聚618購物狂歡節。西部數據帶來了豐富的存儲產品,為你的寶貴數據帶來超燃
    的頭像 發表于 05-20 14:04 ?651次閱讀
    年中好價狂歡,跟著<b class='flag-5'>西部數據實現存儲</b>無憂之夏
    主站蜘蛛池模板: 久久啊| 五月天婷婷在线视频国产在线 | 日韩亚洲欧洲在线com91tv | 色色视频免费网 | 一级做a爰片久久毛片免费 一级做a爰片久久毛片免费看 | 亚洲加勒比在线 | 深爱激情五月婷婷 | 国产特黄 | 三级欧美视频 | 欧美午夜精品 | 757一本到午夜宫 | 永久免费看mv网站入口 | 亚洲国产精品综合久久久 | 久久久免费视频观看 | 美女扒开尿囗给男人玩的动图 | 日韩视频 中文字幕 视频一区 | 2021最新国产成人精品视频 | 天堂网男人| 午夜网站在线播放 | 国产一级大片在线观看 | 人与禽交免费网站视频 | 男啪女色黄无遮挡免费观看 | 精品一精品国产一级毛片 | 乱子伦xxx欧美 | 99久久伊人一区二区yy5099 | 一级视频在线免费观看 | 亚洲男同tv| 一级片在线免费看 | 免费大秀视频在线播放 | 午夜精品久久久久久久第一页 | 日本三级强在线观看 | 成人三级影院 | 国产一区二区丁香婷婷 | 日韩免费一级片 | 失禁h啪肉尿出来高h男男 | 亚洲人成网站在线 | 日剧天堂 | 国产做a爰片久久毛片a | 妖精视频一区二区三区 | 狠狠色噜噜狠狠狠狠2021天天 | h录音 国产 在线 |