在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

大促秒殺更順滑|憶聯攜手南大通用,提供數據密集型存儲新范式

UnionMemory憶聯 ? 來源:未知 ? 2023-12-18 18:20 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

雙十二的結束,意味著2023年的所有大促已落下帷幕。雙十一全網11386億元的銷售額背后是消費的狂歡,更是一場場數據洪峰,單天貓平臺在雙十一期間累計訪問用戶數就已超8億,數據訪問的壓力不言而喻。


面對瞬時流量高并發、海量數據查詢等應用場景,固態硬盤憑借其高吞吐量、低時延等特征逐漸成為大數據時代下數據存儲的重要載體,是當前本地部署的數據倉庫產品重要搭載硬件,可滿足電商大促場景下大規模數據的存儲和查詢需求。


為更好應對含電商在內的數據密集型行業對高性能、高可靠存儲的要求,憶聯特聯合國內大數據倉儲的佼佼者——南大通用(下稱:GBase)共同探索大數據時代下數字化轉型存儲新方案。


一、GBase 8a MPP Cluster簡介

南大通用大規模分布式并行數據庫集群系統(簡稱GBase 8a MPP Cluster),是在GBase 8a系列存儲數據庫基礎上開發的一款Shared Nothing架構的分布式并行數據庫集群,具備高性能、高可用、高擴展等特性,可為各種規模數據管理提供高性價比的通用計算平臺,廣泛用于支撐各類數據倉庫系統、BI系統和決策支持系統。

圖1:GBase 8a MPP Cluster技術架構圖


GBase 8a MPP Cluster采用MPP+Shared Nothing的分布式聯邦架構,節點間通過TCP/IP網絡進行通信,每個節點采用本地磁盤來存儲數據。GBase 8a MPP Cluster系統中的每一個節點都是相對獨立的、自給的,整個系統具有非常強的擴展性,可從幾個節點擴展到上百節點,滿足業務規模增長的要求。


二、憶聯在GBase 8a MPP方案下的驗證


1

驗證環境

本次驗證硬件配置:

本次驗證軟件配置:

本次驗證組網規劃:

圖2:本次GBase 8a MPP組網規劃架構圖


2

驗證方法

步驟1:將6塊SAS UM511a配置Raid5。

步驟2:創建數據庫和表使用TPC-H工具評估數據庫分析處理能力,需要提前創建數據庫和TPC-H內置的8張表;使用TPC-DS工具評估數據庫分析處理能力,提前創建數據庫和TPC-DS內置的25張表。

步驟3:參數調優根據GBase建議進行相關參數調優。

步驟4:數據生成TCH-H通過dbgen工具可以通過設置參數生成所需的測試數據,命令參數為/dbgen -C 10 -S 1 -s 3000 –vf;TPC-DS通過dsdgen工具可以通過設置參數生成所需的測試數據,命令參數為./dsdgen -scale 3000 -dir testdata -force -parallel 10 -child 1。

步驟5:數據加載數據導入時,在GBASE集群本地節點搭建FTP服務器,通過FTP加載數據。當一個表包含多個數據文件時,將單表的多個數據文件集成一個導入語句中,以單表為粒度分別加載測試數據至8張數據庫表中。

步驟6:SQL執行獨立的客戶端,通過業務平面網絡與GBase集群通信,使用gccli工具執行TPC-H 22個SQL用例,

參考命令如下:

/home/GBase/gccli_install/gcluster/server/bin/gccli -h 10.28.100.38 -uroot -Dtpch -vvv < query_1.sql。


3

驗證結果

本次在GBase 8a MPP場景下驗證結果如下:

①、憶聯SAS SSD在Raid邏輯卷帶寬性能測試下的表現:

圖3:憶聯SAS盤在Raid邏輯卷帶寬性能測試下的表現


在本次測試中,將6個SAS SSD配置Raid5,12塊SATA配置Raid50,在Server主機使用FIO測試工具進行128KB順序讀寫帶寬性能壓測。從圖3結果表現可知,SAS SSD讀寫帶寬更優,讀帶寬比SATA有19.6%左右提升,寫帶寬提升34%左右,展現了SAS SSD在Raid邏輯卷帶寬下的絕對優勢,可為高并發的業務場景提供穩定、順暢的數據服務體驗。


②、憶聯SAS SSD在單盤故障降級&重構讀性能下的表現:

圖4:憶聯SAS SSD在單盤故障降級&重構讀性能下的表現


單盤降級讀性能是指RAID組在單盤故障或拔出情況下的RAID組邏輯卷讀業務性能,重構性能是指單盤故障后,RAID同時進行熱備盤數據重構和業務下發時的業務側性能。本次通過將6塊憶聯SAS SSD配置Raid5后,在一塊SSD故障條件下進行測試。


如圖4所示,不管是在單盤降級讀性能還是在重構讀帶寬條件下,SAS盤的表現都優于SATA,單盤降級讀性能優于SATA 22.7%左右,重構讀帶寬性能上比SATA最大有38.4%左右的提升,滿足在各種復雜場景下業務不中斷、數據不丟失的超高可用性要求。


③、憶聯SAS SSD在TPC-DS場景下的表現:

圖5:TPC-DS場景下憶聯SAS SSD的表現


TPC-DS測試是通過FTP協議加載數據到GBase數據庫表。從圖5可見,在相同物理硬件環境下,SAS SSD不管是在數據導入還是在SQL用例執行時間上所用時間都略低于SATA SSD,具備一定時間優勢,通過降低系統延遲,提供更快的數據訪問速度來提升用戶體驗。


④、憶聯SAS SSD在TCP-H場景下的表現

圖6:TPC-H場景下憶聯SAS SSD的表現


TPC-H測試是通過FTP協議加載數據到GBase數據庫表。圖6展現了SAS SSD以及SATA SSD在TPC-H測試下的表現,其中SAS SSD總用時略優于SATA SSD,數據導入時間優于SATA約6%,對SQL用例執行時間上相比 SATA SSD降低了3%左右,可為業務系統提供快速、可靠的決策支持服務。


Union Memory


總結:本次驗證充分體現了憶聯SAS SSD在GBase 8a MPP場景下的性能優勢,可有效支持業務高效開展,具備單盤帶寬更高,盤故障重構、降級性能更優等特點,不僅可以幫助企業節約硬件采購成本,也可幫助互聯網數據中心、運營商解決海量數據下的大數據存儲和計算問題,高效處理海量結構化數據。


憶聯深耕固態硬盤領域多年,已發布多款高性能、高可靠產品,具備應對復雜的業務環境和數據庫挑戰的能力,可滿足行業用戶海量數據處理需求。未來,憶聯將持續聯合GBase共同打造數字化轉型背景下的存儲新方案。



相關閱讀推薦

國慶特輯|憶聯SSD通過極端壓力中子實驗,為數字中國建設提質增速

多方位優化!憶聯分布式數據庫存儲解決方案,助力MySQL實現高性能、低時延

憶聯SR-IOV解決方案:助力云數據中心節能提效,向“綠”而行


長按識別關注更多憶聯資訊


原文標題:大促秒殺更順滑|憶聯攜手南大通用,提供數據密集型存儲新范式

文章出處:【微信公眾號:UnionMemory憶聯】歡迎添加關注!文章轉載請注明出處。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4518

    瀏覽量

    87256
  • SSD
    SSD
    +關注

    關注

    21

    文章

    2958

    瀏覽量

    119327

原文標題:大促秒殺更順滑|憶聯攜手南大通用,提供數據密集型存儲新范式

文章出處:【微信號:UnionMemory憶聯,微信公眾號:UnionMemory憶聯】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    Docker+MySQL 流控方案:打造安全高效存儲底座,釋放 AI 極致性能

    探討基于Docker部署的MySQL數據庫在AI應用中的關鍵作用。通過PCIe5.0企業級SSD(UH812a)實測驗證,展示了Namespace技術與QoS優化策略如何實現存儲
    的頭像 發表于 06-26 13:53 ?46次閱讀
    <b class='flag-5'>憶</b><b class='flag-5'>聯</b> Docker+MySQL 流控方案:打造安全高效<b class='flag-5'>存儲</b>底座,釋放 AI 極致性能

    I/O密集型任務開發指導

    使用異步并發可以解決單次I/O任務阻塞的問題,但是如果遇到I/O密集型任務,同樣會阻塞線程中其它任務的執行,這時需要使用多線程并發能力來進行解決。 I/O密集型任務的性能重點通常不在于CPU的處理
    發表于 06-19 07:19

    CPU密集型任務開發指導

    CPU密集型任務是指需要占用系統資源處理大量計算能力的任務,需要長時間運行,這段時間會阻塞線程其它事件的處理,不適宜放在主線程進行。例如圖像處理、視頻編碼、數據分析等。 基于多線程并發機制處理CPU
    發表于 06-19 06:05

    借助NVIDIA技術實現機器人裝配和接觸密集型操作

    本期 NVIDIA 機器人研究與開發摘要 (R2D2) 將探討 NVIDIA 研究中心針對機器人裝配任務的多種接觸密集型操作工作流,以及它們如何解決傳統固定自動化在魯棒性、適應性和可擴展性等方面的關鍵挑戰。
    的頭像 發表于 06-04 13:51 ?174次閱讀
    借助NVIDIA技術實現機器人裝配和接觸<b class='flag-5'>密集型</b>操作

    攜手新華三 SPEC基準測試再創新高,樹立企業級存儲領域新標桿

    引言:PCIe 5.0時代的存儲革新 隨著大模型訓練、邊緣計算與超大規模數據中心的快速發展,存儲系統面臨性能、效率以及可靠性的多重挑戰。
    的頭像 發表于 05-08 13:52 ?172次閱讀
    <b class='flag-5'>憶</b><b class='flag-5'>聯</b><b class='flag-5'>攜手</b>新華三 SPEC基準測試再創新高,樹立企業級<b class='flag-5'>存儲</b>領域新標桿

    存儲趨勢前瞻:如何以產品創新重塑AI時代存儲價值版圖

    趨勢做了深入闡述。作為長期深耕存儲行業的技術驅動企業,始終緊跟技術前沿,并在產品創新和市場布局上保持領先。 本文將結合峰會風向,分析閃存技術的發展趨勢,以及
    的頭像 發表于 05-08 11:13 ?182次閱讀
    <b class='flag-5'>存儲</b>趨勢前瞻:<b class='flag-5'>憶</b><b class='flag-5'>聯</b>如何以產品創新重塑AI時代<b class='flag-5'>存儲</b>價值版圖

    如何以技術創新推動存儲產業變革

    趨勢做了深入闡述。作為長期深耕存儲行業的技術驅動企業,始終緊跟技術前沿,并在產品創新和市場布局上保持領先。
    的頭像 發表于 04-29 13:54 ?392次閱讀
    <b class='flag-5'>憶</b><b class='flag-5'>聯</b>如何以技術創新推動<b class='flag-5'>存儲</b>產業變革

    金倉數據庫入選《2024年度專利密集型產品名單》

    2月8日, 國家專利密集型產品備案認定試點平臺公布了《2024年度專利密集型產品名單》,由電科金倉自主研發的金倉數據庫管理系統(KingbaseES)憑借扎實的技術積淀與市場驗證,成功入選該名
    的頭像 發表于 02-23 15:42 ?429次閱讀
    金倉<b class='flag-5'>數據</b>庫入選《2024年度專利<b class='flag-5'>密集型</b>產品名單》

    榮獲2024年度閃存控制器金獎

    近日,由百易傳媒(DOIT)主辦的2024中國數據存儲峰會,以“智數據 AI未來”為主題在北京舉行,《2024年度存儲風云榜》也在會議期間同步揭曉,
    的頭像 發表于 11-08 18:11 ?1180次閱讀

    開放協同 新一代PCIe Gen5企業級SSD攜手新華三智算新品持續進化

    2024年10月24日,新華三集團“乘勢﹒進化﹒臻于智境”智算新品發布會在京舉行,總經理寇朋韜受邀出席新品發布儀式,與新華三和行業伙伴攜手開放協同、共話產業創新。發布會上,新華三正式發布全新
    的頭像 發表于 10-25 18:06 ?826次閱讀
    開放協同 <b class='flag-5'>憶</b><b class='flag-5'>聯</b>新一代PCIe Gen5企業級SSD<b class='flag-5'>攜手</b>新華三智算新品持續進化

    人員定位系統對生產密集型企業的重要意義

    發電、供電、石油化工、鋼鐵冶金行業為生產設備密集型企業,生產現場錯綜復雜,稍有不慎便會發生危險;建筑工地現場施工作業中,存在著人員流動性大、現場狀況雜亂、安全隱患難以察覺等問題;工廠安全管理混亂
    的頭像 發表于 09-10 17:30 ?517次閱讀
    人員定位系統對生產<b class='flag-5'>密集型</b>企業的重要意義

    廣和通端側AI解決方案驅動性能密集型場景商用場景商用

    2024世界機器人大會期間,廣和通宣布:基于高通QCS8550平臺的廣和通端側AI解決方案高效使能性能密集型場景。該端側AI解決方案整合強大AI算力、邊緣側AI數據分析及Wi-Fi 7連接方式,可為自主移動機器人、工業無人機、云服務器和AI邊緣計算盒子等物聯網應用
    的頭像 發表于 08-23 16:06 ?580次閱讀

    廣和通端側AI解決方案驅動性能密集型場景商用場景商用

    2024世界機器人大會期間,廣和通宣布:基于高通QCS8550平臺的廣和通端側AI解決方案高效使能性能密集型場景。該端側AI解決方案整合強大AI算力、邊緣側AI數據分析及Wi-Fi 7連接方式,可為自主移動機器人、工業無人機、云服務器和AI邊緣計算盒子等物聯網應用
    的頭像 發表于 08-23 16:05 ?984次閱讀
    廣和通端側AI解決方案驅動性能<b class='flag-5'>密集型</b>場景商用<b class='flag-5'>型</b>場景商用

    SSD存儲解決方案亮相2024中國國際金融展

    7月19日,為期三天的2024中國國際金融展(簡稱:金融展)在北京國家會議中心開幕。作為國內領先的存儲解決方案提供商,攜其最新一代PCIe Gen5企業級SSD及全場景解決方案亮相
    的頭像 發表于 07-22 10:52 ?1053次閱讀
    <b class='flag-5'>憶</b><b class='flag-5'>聯</b>SSD<b class='flag-5'>存儲</b>解決方案亮相2024中國國際金融展

    推出企業級SATA SSD UM311b,提供穩定可靠的存儲服務

    在當今數字化快速發展的時代,企業級高可靠業務場景對于數據存儲的需求日益增強。為了滿足這一需求,科技近日正式推出了一款高性能、高可靠、高性價比的企業級SATA SSD——UM311b
    的頭像 發表于 06-29 11:09 ?1596次閱讀
    主站蜘蛛池模板: 久久99爰这里有精品国产 | 色婷婷六月丁香在线观看 | 日韩特级毛片免费观看视频 | 天天看天天爽 | 国内真实实拍伦视频在线观看 | 日本亚洲天堂网 | 亚洲狠狠网站色噜噜 | 一级毛片在线看在线播放 | h国产视频| 欧美三级黄视频 | 萌白酱香蕉白丝护士服喷浆 | 黄色免费网站视频 | 最新亚洲一区二区三区四区 | 一级毛片免费在线观看网站 | 日韩高清在线日韩大片观看网址 | 4hu四虎永久免在线视 | 激情欧美在线 | 欧美线人一区二区三区 | 欧美成人免费草草影院 | 欧美三级在线免费观看 | 五等分的新娘免费漫画 | 91在线色 | a毛片网站 | 精品久久看 | 色黄网站成年女人色毛片 | 台湾一级毛片永久免费 | 国产一二三区在线 | 一级特黄性生活大片免费观看 | 1300部小u女视频免费 | 九色欧美 | 夜夜骑首页 | 国产精品久久久久久久久kt | 国产男女怕怕怕免费视频 | 94久久国产乱子伦精品免费 | 亚洲68283精品人体 | 久久成人网18网站 | 痴女在线播放免费视频 | 色丁香在线 | 狠狠的日视频 | h网址在线观看 | 最刺激黄a大片免费网站 |