在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

高效管理海量數據!憶聯 SSD 為分布式塊存儲提供極致性能

UnionMemory憶聯 ? 來源:未知 ? 2023-10-13 15:55 ? 次閱讀

近年來,為滿足大規模的存儲應用需求,分布式存儲成為云環境下存儲底座構建的重要選擇,相較于傳統集中式存儲方案的可靠性、安全性以及數據利用率較低,分布式存儲具有易擴展、高性能、高性價比、支持分級存儲、多副本一致性及存儲系統標準化等優勢。

塊存儲作為分布式存儲的一部分,主要為計算集群虛擬機、容器提供彈性卷服務,而彈性卷 EVS 則是當前云業務平臺最核心的存儲服務,對存儲性能要求極高,基于此,各大云廠商基本采用全閃化形態部署。

Ceph 則是當前業界應用最廣泛的開源分布式存儲軟件,憑借高擴展性、高性能、高可靠等特點,同時支持塊存儲、文件存儲及對象存儲接口,已成熟應用于云計算的 IAAS 平臺。為更好地助力分布式塊存儲系統性能及可靠性的提升,憶聯在 Ceph 平臺下開展實測,本文為此次的測試結論。

一、Ceph 簡介

Ceph 是一個統一的分布式存儲系統,可提供較好性能、可靠性和擴展性,是面向云計算領域重要的底層存儲系統,已在國內運營商、政府、金融、互聯網等多個行業落地應用。

wKgZomUt2-WAEOZiAAMho7IhY24568.png

圖 1:Ceph 技術架構圖

Ceph 主要分為應用接口層、存儲基礎接口層、存儲對象層。接口層主要負責客戶端訪問,分為本地語言綁定接口、塊存儲設備接口和文件系統接口,展現了 Ceph 統一性。

在 Ceph 塊存儲系統中,數據以塊的形式存在卷里,塊為應用程序提供大存儲容量,可靠性和性能都更高,卷可映射到操作系統中,由文件系統層控制。Ceph 塊存儲系統引入的 RBD(Ceph 塊設備)協議為客戶端提供了高可靠、高性能、分布式的塊存儲,同時 RBD 也支持其他的企業級特性,例如完整和增量式快照,精簡的配置,寫時復制( copy-on-write)式克隆,以及全內存式緩存等,從而大大提高了系統的性能。

wKgZomUt2-WAFuTbAAA6dhTKhGc063.png

圖 2:Ceph 塊存儲組件

二、憶聯 Ceph 存儲方案驗證

1.驗證環境

1.1 本次驗證硬件配置

wKgZomUt2-WAU48JAAINxIv62uQ637.png

1.2本次驗證軟件配置

wKgZomUt2-WAAaPRAAE3di4pbGc166.png

1.3本次驗證組網規劃

wKgZomUt2-WAGSE4AAFnitdjqbs692.png

圖 3:Ceph 組網規劃架構圖

2、驗證方法

步驟 1:創建 RBD pool 和 RBD 卷。配置參數 osd_pool_default_size 確定 RBD Pool 池的副本數,2 表示兩幅本,3 表示三副本,根據實際副本數需求,將該配置項添加到 ceph.conf 中即可。另外根據規劃,需要創建 60 個大小為 100GiB 的 RBD 卷進行 IO 測試。

步驟 2:下發 IO 測試前,需對服務器和客戶端的 IO、CPU、網絡進行監控,每 2 秒采集一次數據。

步驟 3:在 6 個客戶端上同時對 60 個 RBD 卷下發 IO,每個客戶端均需綁核,即每個 fio 綁定不同 cpu 核。

步驟 4:完成 IO 測試后,需關閉服務端和客戶端的 IO、CPU、網絡進行監控。

步驟 5:測試完成后,需匯總所有客戶端 fio 的 BW、IOPS、平均時延,匯總對應的監控數據。對于 BW 和 IOPS,累加各 FIO 對應結果即可;對于平均時延,累加之后需求平均值。

3、驗證結果

本次在 Ceph 場景下驗證結果如下:

①、憶聯 UH8 系 SSD 在隨機讀及順序讀下的表現。

wKgZomUt2-WAcn6mAAFEYTOu4Lo192.png

圖 4:Ceph 場景下憶聯 UH8 系 SSD 讀性能

從圖 4 可以看出,在 Ceph 分布式存儲系統下,不論是二副本還是三副本,憶聯 UH8 系 SSD 的讀性能基本持平。在時延方面,二副本與三副本趨勢基本一致,1QD 至 32QD 間較為穩定,在 32QD 后時延明顯增加。

②、憶聯 UH8 系 SSD 在隨機寫及順序寫下的表現。

wKgZomUt2-WAQL2pAAEqCd2OFCU196.png

圖 5:Ceph 場景下憶聯 UH8 系 SSD 寫性能

如圖 5 所示,不論是在隨機寫還是在順序寫業務下,二副本寫性能遠高于三副本性能,主要是由于副本復制帶來的網絡及存儲開銷,造成三副本寫帶寬及寫 IOPS 下降明顯。在總體時延表現上,二副本明顯優于三副本。在時延變化趨勢上,二副本與三副本基本一致,皆在 32QD 后有比較顯著的上升。

③、憶聯 UH8 系 SSD 在混合讀寫場景下的表現。

wKgZomUt2-aAKtOaAAGh4kV_Pzo257.png

圖 6:Ceph 場景下憶聯 UH8 系 SSD 混合讀寫性能

從圖 6 可以看出,在 4K 7:3 混合讀寫業務場景下,從 16QD 起,二副本 IOPS 性能優于三副本。在時延整體表現上,二副本低于三副本,但在時延變化趨勢上,二副本與三副本基本一致,時延從 32QD 起,明顯上升。

小結:從 Ceph 讀、寫、混合讀寫業務場景的實測數據中,可以看到憶聯 SSD 整體表現優秀,可為 Ceph 環境提供極致存儲性能。在時延上,憶聯 SSD 在 32QD 及以下場景中,表現亮眼,可獲得更佳的時延體驗。

④、智能多流降 WA,有效提升 SSD 壽命

為更好解決讀寫機制帶來的寫放大而造成的 SSD 性能損耗及使用壽命縮短,憶聯推出 SSD 的智能多流特性,通過智能冷熱數據分類算法,有效提高 GC(垃圾回收)時的效率,減少寫放大,提升 SSD 性能。

wKgZomUt2-aAVMDQAAC9ZURlGYY805.png

圖 7:Ceph 場景下智能多流特性測試

在 Ceph 方案中,基于標準 JESD 219 業務模型,針對 SSD 分別開啟、關閉智能多流進行寫放大測試,通過圖 7 對比驗證結果可以看到憶聯智能多流(IMS)開啟后,SSD 寫放大降低 20%+,極大提升了 SSD 壽命。

本次驗證證明了憶聯 SSD 在 Ceph 分布式存儲系統中的穩定性能,可有效支撐 Ceph 的存儲需求,為 Ceph 提供始終如一的高性能,成為軟件定義存儲解決方案最優的選擇。同時,憶聯 SSD 獨有的智能多流技術可降低分布式存儲場景下 SSD 寫放大,提升 SSD 壽命,幫助用戶減少總體 TCO。對于 Ceph 分布式存儲系統而言,憶聯 SSD 是一個可真正做到高性能、高可靠、低成本的存儲解決方案。

wKgZomUt2-aAapEdAABbOPPgAIU973.jpg

長按識別關注更多憶聯資訊

了解更多:

下一代ZNS?淺談FDP在企業級SSD應用前景

國慶特輯|憶聯SSD通過極端壓力中子實驗,為數字中國建設提質增速

憶聯UH711a獲紅帽生態系統認證,成功入選紅帽生態名錄


原文標題:高效管理海量數據!憶聯 SSD 為分布式塊存儲提供極致性能

文章出處:【微信公眾號:UnionMemory憶聯】歡迎添加關注!文章轉載請注明出處。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4478

    瀏覽量

    86965
  • SSD
    SSD
    +關注

    關注

    21

    文章

    2938

    瀏覽量

    119002

原文標題:高效管理海量數據!憶聯 SSD 為分布式塊存儲提供極致性能

文章出處:【微信號:UnionMemory憶聯,微信公眾號:UnionMemory憶聯】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    兆芯+圖云創智—可信分布式存儲系統解決方案

    圖云創智分布式存儲系統采用全分布式設計與先進的存儲虛擬化技術相結合,由多個獨立的兆芯 x86 服務器作為存儲節點,聯合道熵
    的頭像 發表于 04-23 10:29 ?80次閱讀
    兆芯+圖云創智—可信<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統解決方案

    PCIe 5.0 SSD支撐大模型全流程訓練

    當前,大模型全流程訓練對數據存儲系統的要求已突破傳統邊界。企業級SSD作為AI算力基礎設施的核心組件,其高可靠性、高性能及智能化管理能力,正
    的頭像 發表于 03-11 10:26 ?277次閱讀
    <b class='flag-5'>憶</b><b class='flag-5'>聯</b>PCIe 5.0 <b class='flag-5'>SSD</b>支撐大模型全流程訓練

    分布式存儲有哪幾種類型?

    分布式存儲有哪幾種類型?分布式存儲系統是一種將數據分散存儲在多臺獨立節點上的技術,根據
    的頭像 發表于 02-20 11:00 ?383次閱讀

    分布式云化數據庫有哪些類型

    分布式云化數據庫有哪些類型?分布式云化數據庫主要類型包括:關系型分布式數據庫、非關系型分布式數據
    的頭像 發表于 01-15 09:43 ?331次閱讀

    HarmonyOS Next 應用元服務開發-分布式數據對象遷移數據權限與基礎數據

    提供了async版本供該場景使用。 當前,wantParams中“sessionId”字段在遷移流程中被系統占用,建議開發者在wantParams中定義其他key值存儲分布式數據對象
    發表于 12-24 09:40

    WDS分布式存儲系統軟件助力電信工程海量數據存儲項目

    WDS分布式存儲系統軟件助力電信工程海量數據存儲項目
    的頭像 發表于 11-11 09:59 ?432次閱讀
    WDS<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統軟件助力電信工程<b class='flag-5'>海量</b><b class='flag-5'>數據</b><b class='flag-5'>存儲</b>項目

    某證券公司智能云投資交易云集群高性能分布式存儲應用

    某證券公司智能云投資交易云集群高性能分布式存儲應用
    的頭像 發表于 09-27 09:57 ?452次閱讀
    某證券公司智能云投資交易云集群高<b class='flag-5'>性能</b><b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>應用

    分布式存儲費用高嗎?大概需要多少錢

    分布式存儲的費用是否高,取決于多個因素,包括存儲容量、性能要求、服務提供商、計費模式等。因此,無法簡單地給出一個“高”或“不高”的答案。通常
    的頭像 發表于 09-24 10:41 ?484次閱讀

    基于分布式存儲系統醫療影像數據存儲解決方案

    基于分布式存儲系統醫療影像數據存儲解決方案
    的頭像 發表于 09-14 09:53 ?578次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統醫療影像<b class='flag-5'>數據</b><b class='flag-5'>存儲</b>解決方案

    醫療PACS影像數據的極速分布式存儲解決方案

    醫療PACS影像數據的極速分布式存儲解決方案
    的頭像 發表于 08-23 10:13 ?582次閱讀
    醫療PACS影像<b class='flag-5'>數據</b>的極速<b class='flag-5'>分布式</b><b class='flag-5'>塊</b><b class='flag-5'>存儲</b>解決方案

    SSD存儲解決方案亮相2024中國國際金融展

    7月19日,為期三天的2024中國國際金融展(簡稱:金融展)在北京國家會議中心開幕。作為國內領先的存儲解決方案提供商,攜其最新一代PCIe Gen5企業級
    的頭像 發表于 07-22 10:52 ?914次閱讀
    <b class='flag-5'>憶</b><b class='flag-5'>聯</b><b class='flag-5'>SSD</b><b class='flag-5'>存儲</b>解決方案亮相2024中國國際金融展

    黑龍江電力高性能WDS分布式存儲系統解決方案

    黑龍江電力高性能WDS分布式存儲系統解決方案
    的頭像 發表于 07-01 09:54 ?567次閱讀
    黑龍江電力高<b class='flag-5'>性能</b>WDS<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統解決方案

    推出企業級SATA SSD UM311b,提供穩定可靠的存儲服務

    在當今數字化快速發展的時代,企業級高可靠業務場景對于數據存儲的需求日益增強。為了滿足這一需求,科技近日正式推出了一款高性能、高可靠、高性
    的頭像 發表于 06-29 11:09 ?1352次閱讀

    推出高性能企業級SATA SSD UM311b

    近日,面向企業級高可靠業務場景,推出高性能、高可靠、高性價比的企業級SATA SSD UM311b,該產品可為互聯網、運營商等行業客戶提供
    的頭像 發表于 06-29 10:22 ?1093次閱讀
    <b class='flag-5'>憶</b><b class='flag-5'>聯</b>推出高<b class='flag-5'>性能</b>企業級SATA <b class='flag-5'>SSD</b> UM311b

    鴻蒙開發接口數據管理:【@ohos.data.distributedData (分布式數據管理)】

    分布式數據管理應用程序提供不同設備間數據庫的分布式協同能力。通過調用
    的頭像 發表于 06-07 09:30 ?1368次閱讀
    鴻蒙開發接口<b class='flag-5'>數據管理</b>:【@ohos.data.distributedData (<b class='flag-5'>分布式</b><b class='flag-5'>數據管理</b>)】
    主站蜘蛛池模板: 国产精品大片天天看片 | a久久久久一级毛片护士免费 | 色偷偷网 | 免费观看黄色网址 | 国产综合在线播放 | 婷婷综合五月中文字幕欧美 | 天天色综合2| 国产男女交性视频播放免费bd | 国产h视频在线观看网站免费 | 一级待一黄aaa大片在线还看 | 男女一级大黄 | 在线视频午夜 | 35qao强力打造免费上线高清 | 男女交性永久免费视频播放 | 久久综合九色欧美综合狠狠 | 欧美色视频日本 | 欧洲一级鲁丝片免费 | 哟交小u女国产精品视频 | 一级国产特黄aa大片 | 手机看片1024手机在线观看 | 日韩精品一级毛片 | 五月天色丁香 | 奇米视频7777 | 天天干天天摸天天操 | 女bbbbxxxx毛片视频 | 天天干天天色天天射 | 在线视频一区二区 | 欧美成人26uuu欧美毛片 | 日本不卡在线视频高清免费 | 四虎国产永久免费久久 | 免费看日本黄色片 | 四虎影院在线免费 | 国产一级毛片外aaaa | 亚洲欧美国产高清va在线播放 | 久久久久久综合 | se94se亚洲欧美在线 | 小泽玛利亚在线观看123 | 在线观看你懂的网址 | 九色婷婷| 国产高清一级在线观看 | 亚洲va久久久噜噜噜久久狠狠 |