在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

庫瀚科技協辦中國移動科技周,共建多樣性算力科創發展新未來

科技見聞網 ? 來源: 科技見聞網 ? 作者: 科技見聞網 ? 2023-09-11 09:19 ? 次閱讀

近期,中國移動第四屆科技周暨戰略性新興產業共創發展大會正式啟動。中國移動攜手產學研用各方合作伙伴,以“澎湃創新力 戰新共未來”為主題,匯聚院士學者、產業大咖、業界專家,圍繞云和算力網絡、人工智能、6G、大數據、能力中臺、安全等領域,聚焦科創前沿,共商協同創新新模式,共謀戰新產業發展新未來。

其中,庫瀚科技協辦了以“多樣性算力”為主題的分論壇,該論壇聚焦算力基礎設施領域,與各界合作伙伴開展技術創新分享和實踐經驗交流,促進技術生態繁榮,共同推動數字經濟高速發展。

(圖片來源:中國移動)

庫瀚科技軟件架構師邱重陽在本次論壇中,分享了庫瀚在全RISC-V架構下高性能存儲軟件的實踐與探索

wKgaomT-ayCADBafAAU3OBghQqk736.png


庫瀚分享:挑戰與趨勢

根據IDC預測數據,2025年全球數據量將增長到175ZB,中國將成為全球最大數據圈( 48.6ZB ),存算比趨近1:1,存儲與計算同等重要?;A設施(服務器)市場近萬億,目前主導這個市場的還是X86 CPU通用計算為核心的生態。而X86 CPU的核心技術被境外壟斷,價格昂貴的同時不符合國內信創趨勢。摩爾定律在服務器芯片上逐漸失效,但是高速的存儲、網絡設備還在快速發展,通用CPU很難再同時處理計算、網絡、存儲等需求。

在此背景下,數據中心存算一體架構一直面臨兩個主要挑戰:

第一個挑戰是數據存儲生命周期和服務器更新周期不同,存算一體的服務器架構無法使存算獨立擴容,服務器的更新換代由處理器的升級周期決定,一般是2~3年更換,與數據存儲5~10年的生命周期有較大區別,兩者之間巨大的差異導致系統資源大量浪費,增加數據遷移丟失風險。

另外一個挑戰是,傳統分布式存儲架構使得性能和存儲資源利用率難以兼得,通常情況下,性能型存儲通常采用三副本模式,得盤率僅僅約30%,容量型存儲采用EC模式提升得盤率,但同時增加了CPU、網絡的開銷,導致存儲系統整體性能受損。

數字經濟時代,多樣應用推動生產進步,當下比較熱有ChatGPT、自動駕駛等,這些應用的背后都在消耗巨大的算力。這些不同的應用需要不同的算法,特定的算法匹配特定的算力來處理才能發揮更好的能效比。

業界涌現出越來越多的數據處理單元(DPU)和基礎設施處理單元(IPU)專用芯片,在數據流處理路徑上取代通用處理器,提升算力能效比。面對新的業務需求,結合計算、網絡和存儲的新技術發展趨勢,新型存算分離的Diskless架構將重新定義數據中心基礎設施。Top 廠商積極布局Diskless 架構,通過IPU對接共享的閃存盤框。

我們可以說:傳統存儲是存儲1.0時代,分布式存儲開啟存儲2.0時代,Diskless正在帶領我們走進存儲3.0時代。

wKgZomT-ayGAXRw0AAQriELJUyE203.png


wKgaomT-ayKAGXSyAAQPmSh7W1w461.png


策略與思路

·思路一:存儲服務器使用存儲專用芯片

目前芯片龍頭已經推出的各類智能網卡形態數據處理芯片,主要是滿足云廠商自定義的CPU算力卸載需求。頭部廠商都在專用數據處理芯片的方向,但是目前看到的數據處理芯片側重于計算服務器側網絡、計算虛擬化卸載等問題,存儲服務器更強調IO加速、EC壓縮的優化,低功耗、低成本的需求?;诖鎯S眯酒拇鎯Ψ掌魇侨86架構、提升算力能效比、降低存儲服務器成本的一個有效手段,當然也同時需要對應存儲基礎軟件來與之配套。

·思路二:通過數據分層機制來解決存儲性能和資源的有效利用率難以兼得的矛盾

數據分層存儲已經是一個比較老話題了,但就當前數據中心Diskless架構的趨勢來說,數據分層本身使用了兩層數據分離存儲的策略,這和Diskless數據拉遠池化的理念更加契合。一般來說,數據分層機制,通過副本機制對外提供統一的高性能存儲服務;通過EC策略進行數據存儲使得存儲系統整體得盤率更高。通過兩層架構的技術整合,以提高存儲系統整體的存儲性能和資源的有效利用率。

·思路三:通過軟硬融合的設計提升存儲系統資源的有效利用率

首先,目前SSD訪問接口仍然是基于塊語義的隨機覆蓋寫,這并不契合NAND Flash的特性,NAND Flash是追加寫、擦除后寫,SSD為了適配傳統塊語義的接口,不得不在內部實現轉換層FTL,增加了元數據管理、GC、OP空間預留等資源的開銷。為了解決這個問題,庫瀚提出了open channel技術,以及繼承于它的zoned namespace技術,這些技術突破傳統的標準硬件接口,打通設備與應用層之間的信息屏障。

其次是存儲側的計算卸載,也可以說是近存儲計算。存儲服務器側的數據壓縮、EC等算法,不適合利用通用處理器來計算,將其卸載到專用處理器可以顯著提升能效比。

實踐與探索

庫瀚打造的存儲平臺是從底層SSD 主控芯片、SSD 固件、存儲服務器主控到存儲底層基礎軟件全技術棧打通的一個存儲架構,在IO鏈路上基于全RISC-V架構主控平臺,軟硬融合設計的全閃存存儲平臺。

庫瀚兩顆RISC-V芯片——Aurora SSD主控、eSPU覆蓋從應用到存儲全流程,eSPU主板主控形態支持實現無x86架構的存儲服務器,eSPU智能網卡形態面向數據服務基礎設置場景;Aurora SSD主控支持實現PCIE 5.0/4.0等多型號的高性能企業級固態硬盤。

庫瀚StorEngine 軟固件平臺是一套軟件定義存儲生態的高性能分布式存儲軟件基礎計算模組,也是兩顆RISC-V芯片平臺的存儲基礎軟件,以助力數據中心實現在現有硬件平臺、eSPU/Aurora硬件平臺下發揮業界領先的性能。

StorEngine 既可以運行在x86ARM平臺上,也可以運行在eSPU(RISC-V)平臺上。

庫瀚StorEngine 采用Diskless 存算分離架構,把存儲資源拉遠池化,以替換傳統存儲中的本地盤;通過高密度的SPU盤框 + 存儲計算分開擴容的能力,來降低數據中心整體成本。

庫瀚StorEngine 使用數據分層和統一zone設計,性能層和容量層的分層設計使得系統在提升得盤率的同時,能夠提供高性能存儲服務;統一zone架構,使StorEngine兼容不同介質存儲設備,全局存儲資源以zone為單位進行分配,實現全局FTL,使SSD的磨損均衡可以在全局作用,同樣可以延長SSD的壽命。

wKgZomT-ayOAcKLvAAOvy2o6CfU820.png

wKgaomT-aySAUTdOAAMd1t-bN4g929.png

wKgZomT-aySAfc5hAAPp_7u6Ql0110.png

庫瀚與中移已就存儲系統項目開展了合作與探索。中移ESSD是一套全自研的高性能全閃分布式存儲系統,單卷可達百萬 IOPS以上;庫瀚StorEngine RPC組件KRPC在中移動ESSD高性能場景下的應用,提升了RPC組件效率,降低了硬件資源的開銷。單卷客戶端所需的CPU核心數量從改造前的21個下降為改造后的5個,與此同時單路IO延遲也從600us下降到270us,整個資源的利用率得到了顯著的提高,存儲系統的長尾延遲也有所改善。

wKgZomT-ayaAIYB4AANrOdefdZo532.png



審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 芯片
    +關注

    關注

    459

    文章

    52291

    瀏覽量

    437601
  • RISC-V
    +關注

    關注

    46

    文章

    2512

    瀏覽量

    48394
  • 算力
    +關注

    關注

    2

    文章

    1165

    瀏覽量

    15500
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    后摩智能入選中國移動AI能力聯合艦隊

    堅艦隊。后摩智能將與其他艦隊成員攜手,共同構建從云到端的技術梯隊,為 AI 模型的高效運行和多場景落地提供堅實的力保障,助力中國移動 AI 產業生態的全面
    的頭像 發表于 05-06 17:14 ?446次閱讀

    壁仞科技亮相2025中國移動云智大會

    此前,4月10日至11日,以“由云向智,共繪網新生態”為主題的2025中國移動云智大會在江蘇蘇州舉行。大會期間,中國移動聯合壁仞科技、中興通訊等合作伙伴正式發布“
    的頭像 發表于 04-15 16:57 ?577次閱讀

    華為助力中國移動全面升級“九州”互聯網

    中國移動云智大會期間,以“智啟新,安全筑基“為主題的智基礎設施及安全峰會成功舉辦。會上,中國移動聯合華為等重磅發布了《“九州”
    的頭像 發表于 04-14 16:46 ?502次閱讀

    中星微技術亮相2025中國移動云智大會

    近日,由中國移動云能力中心(以下簡稱“移動云”)承辦的2025中國移動云智大會“智賦能?行業智變”分論壇在蘇州召開。中星微技術股份有限公
    的頭像 發表于 04-14 15:23 ?439次閱讀

    奇異摩爾亮相2025中國移動云智大會

    4月10日至11日,以“由云向智,共繪網新生態”為主題的2025中國移動云智大會在江蘇蘇州舉行。中國移動董事長楊杰指出中國移動將深化
    的頭像 發表于 04-12 13:54 ?629次閱讀
    奇異摩爾亮相2025<b class='flag-5'>中國移動</b>云智<b class='flag-5'>算</b>大會

    摩爾線程亮相2025中國移動云智大會

    4月10日至11日,2025中國移動云智大會在蘇州盛大舉行。本次大會由中國移動通信集團主辦,以“由云向智 共繪網新生態”為主題。中國移動
    的頭像 發表于 04-12 11:27 ?703次閱讀

    中興通訊將亮相2025中國移動云智大會

    中興通訊將亮相2025中國移動云智大會
    的頭像 發表于 04-07 17:59 ?793次閱讀

    澎峰科技助力中國移動 重磅發布智“芯合”原生基礎軟件棧2.0

    11月30日 ,由中國通信學會主辦、中國移動研究院承辦的2024中國信息通信大會“網絡網一
    的頭像 發表于 12-03 15:08 ?670次閱讀
    澎峰科技助力<b class='flag-5'>中國移動</b> 重磅發布智<b class='flag-5'>算</b>“芯合”<b class='flag-5'>算</b><b class='flag-5'>力</b>原生基礎軟件棧2.0

    澎峰科技助力中國移動發布智“芯合”原生基礎軟件棧2.0

    近日 ,由中國通信學會主辦、中國移動研究院承辦的2024中國信息通信大會“網絡網一體創新
    的頭像 發表于 12-03 13:29 ?577次閱讀

    中國移動中心(哈爾濱)成為最大單集群智中心

    9月6日最新資訊,中國移動中心(哈爾濱)正式宣告投入運營,這一里程碑事件不僅標志著中國移動在智能計算領域的又一重大突破,更確立了其在全球運營商中擁有最大規模單集群智中心的領先地位
    的頭像 發表于 09-06 15:33 ?1223次閱讀

    飛騰進一步推動多樣性產業升級

    日前,“共筑新,智啟新未來多樣性產業峰會 2024(以下簡稱 “峰會”)在北京舉行。
    的頭像 發表于 09-02 14:28 ?725次閱讀

    壁仞科技為中國移動呼和浩特智中心提供強大

    ? 隨著人工智能技術的飛速發展,高性能計算中心成為推動AI創新和應用的關鍵基礎設施。近日,中國移動中心(呼和浩特)成功上線運營。國內領先的GPU企業壁仞科技的壁礪系列通用GPU
    的頭像 發表于 07-05 17:16 ?1608次閱讀

    FPGA廠商紫光同創入選多樣性產業及標準推進委員會黃金成員

    日前,“共筑新,智啟新未來多樣性產業峰會2024在北京成功舉辦。本次峰會由
    的頭像 發表于 06-23 16:58 ?1856次閱讀
    FPGA廠商紫光同創入選<b class='flag-5'>多樣性</b><b class='flag-5'>算</b><b class='flag-5'>力</b>產業及標準推進委員會黃金成員

    2024多樣性產業峰會:江波龍解碼AI存儲方案的未來之路

    6月18日,多樣性產業峰會2024在北京圓滿舉行,江波龍企業級存儲事業部市場總監曹潯峰受邀出席本次峰會并發表了《大模型時代AI存儲方案挑戰與創新》主題演講,深入探討了多樣性
    的頭像 發表于 06-21 08:20 ?883次閱讀
    2024<b class='flag-5'>多樣性</b><b class='flag-5'>算</b><b class='flag-5'>力</b>產業峰會:江波龍解碼AI存儲方案的<b class='flag-5'>未來</b>之路

    多樣性產業峰會2024成功舉辦,得瑞領新助力推動產業生態蓬勃發展

    6月18日,“共筑新,智啟新未來多樣性產業峰會2024在北京成功舉辦。得瑞領新受邀參會
    的頭像 發表于 06-20 09:27 ?639次閱讀
    <b class='flag-5'>多樣性</b><b class='flag-5'>算</b><b class='flag-5'>力</b>產業峰會2024成功舉辦,得瑞領新助力推動產業生態蓬勃<b class='flag-5'>發展</b>
    主站蜘蛛池模板: 四虎tv在线观看884aa | caoporn97人人做人人爱最新 | 天天综合五月天 | 欧美大片国产在线永久播放 | 亚洲伊人久久大香线蕉结合 | 欧美成人免费全部观看天天性色 | a级黑粗大硬长爽猛视频毛片 | 色偷偷7777www人 | 色天天天天综合男人的天堂 | 天天摸天天澡天天碰天天弄 | 亚洲卡5卡6卡7国色天香 | 欧美yw193.c㎝在线观看 | 久久伊人草| 欧美一区二区三区免费看 | 欧美经典三级春潮烂漫海棠红 | 最新毛片网 | 国产乱码免费卡1卡二卡3卡四 | 51精品视频免费国产专区 | 日本一二线不卡在线观看 | 99久久精品费精品国产一区二区 | 亚洲卡5卡6卡7国色天香 | 免费观看黄a一级视频日本 免费观看黄色网页 | 伊人久久大香线蕉影院95 | 久久精品国产亚洲婷婷 | 黄网站在线观看视频 | 久久久精品免费 | 爱搞逼综合 | 污污视频在线免费看 | 丁香婷婷在线视频 | 亚洲精品久久片久久 | 看真人一一级毛片 | 亚洲欧美在线一区 | 亚洲国产精品日韩专区avtube | 天堂bt种子资源+在线 | 二级黄绝大片中国免费视频0 | 一区二区三区中文国产亚洲 | 丁香亚洲综合五月天婷婷 | 天堂8在线天堂资源在线 | 免费国产午夜在线观看 | 日韩免费观看的一级毛片 | 台湾毛片|