在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

軟硬件協同創新優化打造高性能數據庫,超聚變和英特爾做了什么?

英特爾中國 ? 來源:未知 ? 2023-07-21 18:15 ? 次閱讀

IDC近日發布的《全球數字化轉型支出指南》2023年V1版預測:到2026年,中國數字化轉型支出規模預計超過6,000億美元,五年復合增長率將達到17.9%,增速位于全球前列1。面對海量、實時、在線的數據處理需求,分布式數據庫服務及數倉服務已經成為企業數字化轉型的基礎設施之一。相比傳統架構,分布式數據庫具有更高的并發和更低的時延,可實現敏捷的擴展,幫助企業提升投資回報。但同時,隨著企業用戶的增長,以及業務的持續創新,分布式數據庫必須具備更高的性能水平,以在特定的 SLA 標準下處理數據,幫助企業應對數據爆發式增長帶來的挑戰,充分釋放數據價值。

作為國產化分布式數據庫的重要一員,超聚變數字技術有限公司(以下簡稱:超聚變)推出的 FusionDB 憑借高性能、簡單易 用、穩定高可用、安全可靠等優勢,已經在眾多行業用戶中得到成功應用。目前,基于第四代英特爾 至強 可擴展處理器的FusionDB 數據庫解決方案,進一步釋放了在加速數據處理方面的潛能。同時,英特爾與超聚變緊密合作,基于英特爾 Open Analytic Toolkit 和英特爾 Quick Assist(英特爾 QAT)等技術對 FusionDB 數據庫進行了優化,解決了數據庫在加速優化索引訪問性能、物理備份性能、備份存儲空間占用以及總體擁有成本等方面面臨的瓶頸,打造了高性能數據庫系統,為用戶提供了流式、實時、離線、在線數據聚合等靈活的混合分析能力。

wKgZomToEiiAVungAADWQdBO_o4798.gif

第四代英特爾 至強 可擴展處理器
及內置加速器
提供算力基座

wKgZomToEiiAVungAADWQdBO_o4798.gif

為解決上述性能挑戰,進一步增強 FusionDB 數據庫的性能優勢,超聚變與英特爾從硬件升級、軟件優化等多方面進行了深入合作,打造了極具性能的分布式數據庫解決方案。

在硬件層面,超聚變選擇了搭載第四代英特爾 至強 可擴展處理器的數據庫服務器作為基礎驗證平臺。第四代英特爾 至強 可擴展處理器通過創新架構增加了每個時鐘周期的指令,每個插槽多達 60 個核心,支持 8 通道 DDR5 內存,有效提升了內存帶寬與速度,并通過 PCIe 5.0(80 個通道)實現了更高的 PCIe 帶寬提升。第四代英特爾 至強 可擴展處理器提供了出色性能和安全性,可根據用戶的業務需求進行擴展。

此外,第四代英特爾 至強 可擴展處理器內置了多個加速器,諸如英特爾 In-Memory Analytics Accelerator(英特爾 IAA)、英特爾 高級矩陣擴展(英特爾 AMX)、英特爾Data Streaming Accelerator(英特爾 DSA)、英特爾 QAT 等高級硬件能力,能夠加速AI、數據分析、數據加解密等場景下的處理能力,滿足用戶的多樣化算力需求(圖1)。

wKgZomToEiiAPDyaAAJMW_d9cE4096.png圖1:第四代英特爾 至強 可擴展處理器為數據中心提供多種優勢wKgZomToEiiAVungAADWQdBO_o4798.gif

協同開展軟件優化
輕松突破索引訪問、端到端備份性能瓶頸

wKgZomToEiiAVungAADWQdBO_o4798.gif

  • 英特爾 Open Analytic Toolkit優化布隆索引訪問性能

數據庫 Postgres 內核默認使用 B-Tree 索引,但為了提升 FusionDB的索引性能,超聚變首先使用布隆索引替代 B-Tree 索引,實現了一定的性能提升。為進一步優化布隆索引的訪問性能,超聚變通過英特爾 Open Analytic Toolkit 應用了 AVX512 這一重要特性,以使用處理器的單指令多數據 (SIMD) 指令對索引過程進行矢量化,從而優化性能。英特爾 高級矢量擴展 512(英特爾AVX-512)是一套創新的指令集,提升了指令的吞吐能力,能夠更好地應對龐大的數據量以及數據庫中高維數據所帶來的性能壓力。

在實際優化過程中,超聚變利用英特爾 AVX-512 的矢量化方式,對 FusionDB 數據庫中創建索引和索引查詢的過程進行加速。在創建索引的過程中重點解決了數據哈希矢量化問題,從而實現了并行生成每列數據的布隆位圖。在索引查詢過程中實現了多路并行的布隆位圖比較,并支持變長布隆位圖。超聚變針對 FusionDB 數據庫索引執行時間測試的數據顯示(圖2),在啟用英特爾 AVX-512 之后,索引性能最高提升1.67倍2

wKgZomToEiiAQDEYAAAvwoTEu-I591.png圖2:布隆索引訪問性能比較3
  • 英特爾 QAT幫助提升物理備份性能,大幅節約空間

物理備份是分布式數據庫的一個常用場景,為了提升備份效率,超聚變對于 FusionDB 數據庫備份緩存機制進行了優化,將備份緩存從 8kb 頁面調整為 64kb 頁面,從而降低了緩存的增量,提高了吞吐率,更有效地發揮資源性能,大幅提升了全量備份和增量備份等性能。

為了進一步提升 FusionDB 數據庫備份效率,超聚變利用英特爾QATzip 對于 FusionDB 數據庫 gs_probackup 中原有的緩存機制進行優化,在保證前向兼容的前提下,添加可通過參數配置大小的物理備份緩存,使得 CPU 能力得到充分的發揮,進一步提升了全量備份和增量備份性能(圖3)。英特爾 QAT 是英特爾面向高性能安全性、私鑰保護和壓縮/解壓縮等場景推出的一個硬件加速技術,能夠將相關負載從 CPU卸載到 QAT 中,有效提升應用程序和平臺的性能。第四代英特爾 至強 可擴展處理器集成了英特爾 QAT4.0,能夠更進一步釋放在私鑰保護和壓縮/解壓縮等場景的性能優勢。

wKgZomToEiiAea1gAAA2gp0B6As521.png圖3:備份速率比較4

此外,超聚變還對比了當 NVMe 盤緩存大小均為 256KB,全量備份數據量均為 102 GB,并發數為 4 時的 QAT 與 lz4 壓縮性能比較。測試數據顯示,英特爾 QATzip 均能夠有效提升數據壓縮效率,提升數據備份恢復速度(圖4)。在使用英特爾 QATzip 之后,FusionDB 數據庫可以實現 50%5左右的壓縮率,進一步降低了對于存儲空間的占用,有助于降低存儲成本,提升數據庫系統的投資回報率。

wKgZomToEiiARne2AAAlPo2z7W0058.png圖4:QATzip/ lz4 壓縮算法的性能對比6wKgZomToEiiAVungAADWQdBO_o4798.gif

全面賦能
超聚變FusionDB數據庫優勢顯著

wKgZomToEiiAVungAADWQdBO_o4798.gif

超聚變與英特爾的深度合作,解決了 FusionDB 數據庫面臨的多個瓶頸,在布隆數據索引、端到端文件備份等場景中提升了數據庫的性能表現,助力超聚變FusionDB 數據庫以更優的性能、穩定性、可用性為用戶提供服務。

首先,通過采用第四代英特爾 至強 可擴展處理器并使用英特爾Open Analytic Toolkit 進行軟件優化,FusionDB 數據庫能夠加速索引訪問速度,更有效地應對大規模業務在吞吐、時延方面的挑戰,提升業務服務能力,高效支撐性能敏感型業務。

第二,通過利用英特爾 QAT 加速,FusionDB 數據庫可縮短備份恢復時間,降低業務遷移成本,減少業務備份中斷時間,同時還可通過英特爾 QAT 硬件引擎卸載 CPU 的壓縮任務,降低對系統性能的影響。

第三,在使用英特爾 QAT 加速壓縮之后,FusionDB 數據庫實現了更高的壓縮率,有助于節省存儲空間,降低支出。此外,超聚變提供了基于第四代英特爾 至強 可擴展處理器的 FusionDB 數據庫一體機解決方案,能夠實現更深入的集成與優化,可以幫助客戶降低部署與調優的時間成本。

在各行各業廣泛開展數字化轉型的背景下,英特爾致力于為用戶提供不同場景的解決方案。基于第四代英特爾 至強 可擴展處理器及其內置加速器,用戶可以在 AI、分析、云和微服務、網絡、數據庫、存儲等類型的工作負載中獲得優化的性能。通過與強大的生態系統相結合,第四代英特爾 至強 可擴展處理器能夠幫助用戶構建更加高效、安全的數據中心基礎設施,助力企業數字化轉型。

資料援引:1 更多信息請見https://www.idc.com/getdoc.jsp?containerId=prCHC50855923

2,3 數據援引自超聚變和英特爾于 2023 年 4 月聯合進行測試的結果。測試配置:主節點 — 雙路英特爾 至強 鉑金 8480 處理器,56 核,256 GB 總內存 (8*32 GB),2*SSD (480 GB) + 2*NVMe(1.92 TB);備節點 — 雙路英特爾 至強 鉑金 8480 處理器,56 核,128 GB 總內存 (4*32 GB),2*SSD (480 GB) + 2*NVMe (1.92 TB)。英特爾并不控制或審計第三方數據。請您審查該內容,咨詢其他來源,并確認提及數據是否準確。實際性能受使用情況、配置和其他因素的差異影響。更多信息請見 www.Intel.com/PerformanceIndex

4,5,6 數據援引自超聚變和英特爾于 2023 年 4 月聯合進行測試的結果。測試配置:主節點 — 雙路英特爾 至強 鉑金 8480 處理器,56 核,7.3 TB NVMe;備節點 — 雙路英特爾 至強 鉑金 8480處理器,56 核,1.8 TB NVMe。英特爾并不控制或審計第三方數據。請您審查該內容,咨詢其他來源,并確認提及數據是否準確。實際性能受使用情況、配置和其他因素的差異影響。更多信息請見 www.Intel.com/PerformanceIndex


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英特爾
    +關注

    關注

    61

    文章

    10184

    瀏覽量

    174203
  • cpu
    cpu
    +關注

    關注

    68

    文章

    11057

    瀏覽量

    216346

原文標題:軟硬件協同創新優化打造高性能數據庫,超聚變和英特爾做了什么?

文章出處:【微信號:英特爾中國,微信公眾號:英特爾中國】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    英特爾以系統級代工模式促進生態協同,助力客戶創新

    服務體系,打造一個值得信賴的全棧式系統級代工平臺。這一戰略旨在幫助客戶實現創新目標,同時鞏固英特爾在代工市場的地位。 正如英特爾公司首席執行官陳立武所言:“
    的頭像 發表于 05-09 14:38 ?195次閱讀

    2025英特爾人工智能創新應用大賽正式啟動

    近日,2025英特爾人工智能創新應用大賽(以下簡稱“大賽”)正式啟動。本屆大賽以“‘碼’上出發,‘芯’創未來”為主題,在賽制、規模、獎項和賽事支持上實現多重升級,為開發者和企業提供展示創意和成果的廣闊平臺,鼓勵他們充分利用英特爾
    的頭像 發表于 04-02 15:24 ?482次閱讀

    微星攜英特爾為玩家打造非凡游戲體驗,兩款泰坦家族新品均搭載全新英特爾酷睿Ultra HX處理器

    3月29日,在英特爾酷睿Ultra 200HX新品分享會上,搭載該處理器的高性能筆記本齊聚一堂,英特爾攜手生態合作伙伴致力于以創新技術滿足用戶的多樣需求,并加速AI技術與產業的深度融合
    的頭像 發表于 04-02 09:37 ?475次閱讀

    英特爾軟硬件優化重構算力效率

    如何與能耗協同、通用架構如何與場景多元化匹配、技術迭代如何與生態步伐協同,構成當前企業應用算力過程中亟待解決的問題。 ? 深耕數據中心領域多年,英特爾始終以技術
    的頭像 發表于 03-08 09:20 ?511次閱讀

    英特爾推出具備高性能和能效的以太網解決方案

    摘要:全新以太網產品在企業數據中心、電信、云及邊緣環境中提供出色的性能、能效與更低的總體擁有成本(TCO)。 2025年2月25日,英特爾發布兩大全新以太網產品線——英特爾以太網控制器
    發表于 02-25 11:17 ?211次閱讀
    <b class='flag-5'>英特爾</b>推出具備<b class='flag-5'>高性能</b>和能效的以太網解決方案

    兆芯CPU近期軟硬件適配動態

    近期,兆芯攜手多家軟硬件合作伙伴,基于開先KX-7000、開勝KH-40000等自主CPU和信創操作系統環境,持續推進應用生態建設工作,順利完成醫療自主終端、商用收款機、服務器操作系統、數據庫管理
    的頭像 發表于 01-15 15:33 ?516次閱讀

    英特爾2024產品年鑒:AI與軟硬件的融合發展

    潛力,并攜手廣泛的生態合作伙伴促進應用落地。具體而言,2024年英特爾軟硬件產品及生態方面主要取得了以下進展: 12月 英特爾發布代號為Battlemage的全新 銳炫B系列顯卡 。英特爾
    的頭像 發表于 12-31 17:28 ?402次閱讀
    <b class='flag-5'>英特爾</b>2024產品年鑒:AI與<b class='flag-5'>軟硬件</b>的融合發展

    英特爾帶您解鎖云上智算新引擎

    在近日舉辦的2024火山引擎FORCE原動力大會上,英特爾與火山引擎聯合發布基于英特爾 至強 6 性能核處理器的第四代服務器實例,以打造彈性算力底座的產品化實踐。同時,
    的頭像 發表于 12-23 14:05 ?865次閱讀

    英特爾推出全新英特爾銳炫B系列顯卡

    備受玩家青睞的價格提供卓越的性能與價值1,很好地滿足現代游戲需求,并為AI工作負載提供加速。其配備的英特爾Xe矩陣計算引擎(XMX),為新推出的XeSS 2提供強大支持。XeSS 2的三項核心技術協同工作,共同提
    的頭像 發表于 12-07 10:16 ?1382次閱讀
    <b class='flag-5'>英特爾</b>推出全新<b class='flag-5'>英特爾</b>銳炫B系列顯卡

    PingCAP推出TiDB開源分布式數據庫

    “作為一款PingCAP自主研發、面向全球用戶的開源數據庫,TiDB走在了技術的前沿。得益于第四代英特爾 至強 可擴展處理器卓越的代際性能提升,以及其搭載的多種硬件加速器,我們進一步提
    的頭像 發表于 11-24 11:26 ?911次閱讀
    PingCAP推出TiDB開源分布式<b class='flag-5'>數據庫</b>

    英特爾攜手軟通動力加速軟硬一體化融合創新

    隨著大數據和云計算技術的發展,人工智能成為提升生產效率和優化資源配置的關鍵工具,推動企業加速從業務數字化邁向業務智能化,在此背景下,繼8月28日,軟通動力與英特爾正式簽署MOU戰略協議之后,9月8日
    的頭像 發表于 10-11 15:22 ?706次閱讀

    英特爾與百度共同為AI時代打造高性能基礎設施

    2024年9月25日,北京 ?——?在2024百度云智大會上,英特爾應邀出席并披露基于英特爾?至強?6處理器的新一代云實例即將在百度智能云上推出,分享雙方在云數據中心、大模型軟件服務與生態以及
    的頭像 發表于 09-27 09:48 ?408次閱讀
    <b class='flag-5'>英特爾</b>與百度共同為AI時代<b class='flag-5'>打造</b><b class='flag-5'>高性能</b>基礎設施

    英特爾IT的發展現狀和創新動向

    AI大模型的爆發,客觀上給IT的發展帶來了巨大的機會。作為把IT發展上升為戰略高度的英特爾,自然在推動IT發展中注入了強勁動力。英特爾IT不僅專注于創新、AI和優化,以及
    的頭像 發表于 08-16 15:22 ?899次閱讀

    基于英特爾至強6能效核處理器優化原生分布式數據庫OceanBase

    隨著數字化、在線化、智能化的演進,企業面臨著指數級遞增的海量存儲需求和挑戰,同時,企業需要降本增效,進行更好更智能的數據決策。基于英特爾 至強 6 能效核處理器的分布式數據庫OceanBase在
    的頭像 發表于 07-24 15:16 ?799次閱讀
    基于<b class='flag-5'>英特爾</b>至強6能效核處理器<b class='flag-5'>優化</b>原生分布式<b class='flag-5'>數據庫</b>OceanBase

    英特爾軟硬件構建模塊如何幫助優化RAG應用

    深入研究檢索增強生成 (Retrieval Augmented Generation, RAG),該創新方法定義了企業和機構如何利用大語言模型(LLM)來發揮其數據的價值。本文將探索若干英特爾
    的頭像 發表于 07-24 15:12 ?831次閱讀
    <b class='flag-5'>英特爾</b><b class='flag-5'>軟硬件</b>構建模塊如何幫助<b class='flag-5'>優化</b>RAG應用
    主站蜘蛛池模板: 老子影院午夜精品欧美视频 | 午夜影院一区二区三区 | www在线视频| 日本一二区视频 | 双性强迫开宫灌满h | 欧美人与zoxxxx| 四虎影视免费 | 精品成人毛片一区二区视 | 宅男噜噜噜66 | 亚洲精品一卡2卡3卡三卡四卡 | 天天综合网久久 | 狠狠去| 人人艹人人插 | 天天摸天天干 | 五月深爱婷婷 | 色播图片| 成人欧美一区二区三区视频不卡 | 黄色网址 在线播放 | 日韩在线视频一区 | 婷婷亚洲综合五月天小说在线 | 亚洲精品成人久久久影院 | 天天干夜夜噜 | 热久久久久 | 一级片免费在线播放 | 国产色产综合色产在线观看视频 | 久草资源站在线 | 久久88色综合色鬼 | 天天草夜夜草 | 欧美不卡在线视频 | 五月婷婷综合激情网 | 一级毛片免费在线观看网站 | 放荡女同老师和女同学生 | 717影院理伦午夜论八戒 | 免费国产黄网站在线观看视频 | 天天狠天天透天干天天怕处 | 瑟瑟久久 | 国产视频第一页 | 美女一级a毛片免费观看 | 日韩dv| 欧美黄色tv | 一级毛片 在线播放 |