91在线观看视频-91在线观看视频-91在线观看免费视频-91在线观看免费-欧美第二页-欧美第1页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

華為再出新品:GaussDB(for Influx)數(shù)據(jù)庫的魅力了解一下

zz愛尚科技 ? 來源:zz愛尚科技 ? 作者:zz愛尚科技 ? 2022-10-12 11:29 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

華為再出新品:GaussDB(for Influx)數(shù)據(jù)庫的魅力了解一下

華為自用的GaussDB(for Influx)數(shù)據(jù)庫逐漸深入大眾視野,到底值不值得期待?

``

時(shí)序數(shù)據(jù)庫想必大家都有所耳聞,現(xiàn)在在很多行業(yè)內(nèi)都有所應(yīng)用,它的優(yōu)點(diǎn)就是可以根據(jù)時(shí)間段,每一分每一秒都精準(zhǔn)地記錄和整理數(shù)據(jù)。最大的缺點(diǎn)也就顯而易見,因?yàn)楫a(chǎn)生數(shù)據(jù)的頻率過快,導(dǎo)致數(shù)據(jù)量過大,一天可以產(chǎn)生幾十GB,甚至達(dá)到TB級,久而久之形成了海量的時(shí)序數(shù)據(jù),數(shù)據(jù)的存儲就成了最大的問題。如何在長久地保存這些數(shù)據(jù)的同時(shí)壓縮數(shù)據(jù)?傳統(tǒng)的數(shù)據(jù)庫肯定做不到,那么有沒有企業(yè)能突破這個(gè)瓶頸?

目前而言,華為推出的GaussDB(for Influx)時(shí)序數(shù)據(jù)庫是最能達(dá)到業(yè)內(nèi)標(biāo)準(zhǔn)的。

GaussDB(for Influx)時(shí)序數(shù)據(jù)庫是華為在數(shù)據(jù)存儲領(lǐng)域摸爬滾打多年后,整合華為云多方面能力,大膽推出的技術(shù)創(chuàng)新。這一次也是華為內(nèi)部經(jīng)過多次反復(fù)調(diào)試達(dá)到了預(yù)期的效果后才決定將GaussDB(for Influx)時(shí)序數(shù)據(jù)庫對外開放,幫助上云企業(yè)解決相關(guān)業(yè)務(wù)問題。像華為這種大企業(yè)能認(rèn)可的數(shù)據(jù)庫,肯定有兩把刷子在身上,敢推向市面也肯定有足夠的把握。

從框架上來看,時(shí)序數(shù)據(jù)庫分為三大部分。第一,Shard節(jié)點(diǎn),主要負(fù)責(zé)數(shù)據(jù)的寫入和查詢,在這個(gè)節(jié)點(diǎn)內(nèi),除了分片和時(shí)間線管理外,還能預(yù)處理數(shù)據(jù)——聚合、降解預(yù)數(shù)據(jù)。第二,Config集群,可以儲存和管理元數(shù)據(jù),采用三節(jié)點(diǎn)的復(fù)制模式,保證元數(shù)據(jù)的可靠性。第三,分布式存儲系統(tǒng),能集中并且持久地存儲數(shù)據(jù)和日志,采用三副本方式存放,能用性和可靠性都毋庸置疑。

相比于InfluxDB等開源時(shí)序數(shù)據(jù)庫,GaussDB(for Influx)接口不僅完全兼容InfluxDB,寫入接口兼容OpenTSDB、Prometheus和Graphite,完全屬于上級和下級關(guān)系。GaussDB(for Influx)容錯(cuò)率更高,可以容忍N(yùn)-1節(jié)點(diǎn)故障;存儲與計(jì)算也是相互分離的,在保持高性能寫入的同時(shí)還可以進(jìn)行查詢業(yè)務(wù),也不用擔(dān)心系統(tǒng)故障導(dǎo)致業(yè)務(wù)中斷或者數(shù)據(jù)丟失,GaussDB(for Influx)可以實(shí)時(shí)保存。

擁有分鐘級計(jì)算節(jié)點(diǎn)擴(kuò)容,秒級存儲擴(kuò)容,GaussDB(for Influx)擴(kuò)縮容比其他的數(shù)據(jù)庫更加快速。由于避免了遷移過程中大量數(shù)據(jù)的物理綁定約束,所以可以做到原來以天為單位的數(shù)據(jù)傳輸縮短為分鐘級別。精簡副本也是關(guān)鍵,消除冗雜的副本模式,降低儲存成本,提升用戶體驗(yàn)感。

以上是GaussDB(for Influx)的優(yōu)化內(nèi)容,那么它的核心能力,又有哪些?

``

image.png

首先,支持億級時(shí)間線。在分配上,大量使用內(nèi)存池復(fù)用技術(shù),降低內(nèi)存碎片;在回收上實(shí)現(xiàn)算法根據(jù)內(nèi)存負(fù)載,能動(dòng)態(tài)調(diào)整GC頻率,加快內(nèi)存回收;在緩存上,根據(jù)不同的時(shí)間節(jié)點(diǎn),調(diào)整不同的配置。通過這樣的改進(jìn),可以達(dá)到每天萬億條的數(shù)據(jù)寫入。 其次,極致寫入性能。GaussDB(for Influx)可以支持每天萬億條數(shù)據(jù)寫入,實(shí)現(xiàn)了集群處理,確保日志持久化,數(shù)據(jù)庫多副本復(fù)制卸載到分布式存儲,降低計(jì)算節(jié)點(diǎn)到存儲節(jié)點(diǎn)的網(wǎng)絡(luò)流量。在大規(guī)模寫入場景下,GaussDB(for Influx)的寫入性能線性擴(kuò)展度大于80%。

再就是低成本的數(shù)據(jù)壓縮。為什么同樣的工作量卻只需1/20的存儲成本?原因就是采用不同的壓縮方式,將Gorilla壓縮算法進(jìn)行了優(yōu)化,先把數(shù)值轉(zhuǎn)為整數(shù),再根據(jù)數(shù)據(jù)特點(diǎn),選擇最合適的數(shù)據(jù)壓縮算法。選擇完合適的壓縮方式就是壓縮過程,采用了壓縮效率更好的ZSTD壓縮算法,并根據(jù)待壓縮數(shù)據(jù)的Length使用不同Level的編碼方法。最終采用差量壓縮方法,進(jìn)一步降低時(shí)序數(shù)據(jù)存儲成本。而壓縮數(shù)據(jù)也只是節(jié)約成本的方式之一,GaussDB(for Influx)還特意提供了時(shí)序數(shù)據(jù)的分級存儲,可以自定義冷熱數(shù)據(jù)。選擇合適的儲存模式就能達(dá)到節(jié)約存儲成本的目的。

最后是高性能多維聚合查詢。多維聚合是時(shí)序數(shù)據(jù)庫中較為常見、且會定期重復(fù)執(zhí)行的一種查詢。而基于滑動(dòng)窗口的聚合查詢,大部分從聚合結(jié)果緩存中直接命中,僅需要聚合增量數(shù)據(jù)部分即可,加快查詢數(shù)據(jù)中的無關(guān)信息過濾。

GaussDB(for Influx)的應(yīng)用場景非常廣泛,在能源、制造、IOT、互聯(lián)網(wǎng)等行業(yè)的監(jiān)控統(tǒng)計(jì)及分析業(yè)務(wù)場景中都可以應(yīng)用上,甚至可以說是必不可少的。當(dāng)然GaussDB(for Influx)數(shù)據(jù)庫還將不斷提升數(shù)據(jù)的存儲模式,帶來更好的用戶體驗(yàn)。

審核編輯 黃昊宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 華為
    +關(guān)注

    關(guān)注

    216

    文章

    35216

    瀏覽量

    255995
  • 數(shù)據(jù)庫
    +關(guān)注

    關(guān)注

    7

    文章

    3929

    瀏覽量

    66297
  • 人工智能
    +關(guān)注

    關(guān)注

    1807

    文章

    49035

    瀏覽量

    249750
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    三款主流國產(chǎn)數(shù)據(jù)庫的技術(shù)特點(diǎn)

    隨著數(shù)字經(jīng)濟(jì)的快速發(fā)展和數(shù)據(jù)安全要求的提升,國產(chǎn)數(shù)據(jù)庫正迎來前所未有的發(fā)展機(jī)遇。在信創(chuàng)浪潮推動(dòng),達(dá)夢數(shù)據(jù)庫、TiDB、華為高斯
    的頭像 發(fā)表于 07-14 11:08 ?152次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—MongoDB數(shù)據(jù)庫文件丟失的數(shù)據(jù)恢復(fù)案例

    MongoDB數(shù)據(jù)庫數(shù)據(jù)恢復(fù)環(huán)境: 臺操作系統(tǒng)為Windows Server的虛擬機(jī)上部署MongoDB數(shù)據(jù)庫。 MongoDB數(shù)據(jù)庫
    的頭像 發(fā)表于 07-01 11:13 ?161次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—MongoDB<b class='flag-5'>數(shù)據(jù)庫</b>文件丟失的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SQL Server數(shù)據(jù)庫被加密如何恢復(fù)數(shù)據(jù)

    SQL Server數(shù)據(jù)庫故障: SQL Server數(shù)據(jù)庫被加密,無法使用。 數(shù)據(jù)庫MDF、LDF、log日志文件名字被篡改。
    的頭像 發(fā)表于 06-25 13:54 ?148次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—SQL Server<b class='flag-5'>數(shù)據(jù)庫</b>被加密如何恢復(fù)<b class='flag-5'>數(shù)據(jù)</b>?

    oracle數(shù)據(jù)恢復(fù)—oracle數(shù)據(jù)庫誤執(zhí)行錯(cuò)誤truncate命令如何恢復(fù)數(shù)據(jù)

    oracle數(shù)據(jù)庫誤執(zhí)行truncate命令導(dǎo)致數(shù)據(jù)丟失是種常見情況。通常情況,oracle數(shù)據(jù)庫誤操作刪除
    的頭像 發(fā)表于 06-05 16:01 ?335次閱讀
    oracle<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—oracle<b class='flag-5'>數(shù)據(jù)庫</b>誤執(zhí)行錯(cuò)誤truncate命令如何恢復(fù)<b class='flag-5'>數(shù)據(jù)</b>?

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)——MongoDB數(shù)據(jù)庫文件拷貝后服務(wù)無法啟動(dòng)的數(shù)據(jù)恢復(fù)

    MongoDB數(shù)據(jù)庫數(shù)據(jù)恢復(fù)環(huán)境: 臺Windows Server操作系統(tǒng)虛擬機(jī)上部署MongoDB數(shù)據(jù)庫。 MongoDB數(shù)據(jù)庫
    的頭像 發(fā)表于 04-09 11:34 ?315次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)——MongoDB<b class='flag-5'>數(shù)據(jù)庫</b>文件拷貝后服務(wù)無法啟動(dòng)的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)

    MySQL數(shù)據(jù)庫的安裝

    MySQL數(shù)據(jù)庫的安裝 【】各種數(shù)據(jù)庫的端口 MySQL :3306 Redis :6379 MongoDB :27017 Django :8000 flask :5000 【二】MySQL 介紹
    的頭像 發(fā)表于 01-14 11:25 ?570次閱讀
    MySQL<b class='flag-5'>數(shù)據(jù)庫</b>的安裝

    數(shù)據(jù)庫是哪種數(shù)據(jù)庫類型?

    數(shù)據(jù)庫種部署在虛擬計(jì)算環(huán)境中的數(shù)據(jù)庫,它融合了云計(jì)算的彈性和可擴(kuò)展性,為用戶提供高效、靈活的數(shù)據(jù)庫服務(wù)。云數(shù)據(jù)庫主要分為兩大類:關(guān)系型
    的頭像 發(fā)表于 01-07 10:22 ?517次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—Mysql數(shù)據(jù)庫表記錄丟失的數(shù)據(jù)恢復(fù)流程

    Mysql數(shù)據(jù)庫故障: Mysql數(shù)據(jù)庫表記錄丟失。 Mysql數(shù)據(jù)庫故障表現(xiàn): 1、Mysql數(shù)據(jù)庫表中無任何數(shù)據(jù)或只有部分
    的頭像 發(fā)表于 12-16 11:05 ?625次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—Mysql<b class='flag-5'>數(shù)據(jù)庫</b>表記錄丟失的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)流程

    數(shù)據(jù)庫事件觸發(fā)的設(shè)置和應(yīng)用

    數(shù)據(jù)庫無論對于生產(chǎn)管理還是很多的實(shí)際應(yīng)用都非常重要。小編這次聊一下數(shù)據(jù)庫事件觸發(fā)的應(yīng)用。示例使用了postgresql和Python。
    的頭像 發(fā)表于 12-13 15:14 ?649次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—MYSQL數(shù)據(jù)庫ibdata1文件損壞的數(shù)據(jù)恢復(fù)案例

    mysql數(shù)據(jù)庫故障: mysql數(shù)據(jù)庫文件ibdata1、MYI、MYD損壞。 故障表現(xiàn):1、數(shù)據(jù)庫無法進(jìn)行查詢等操作;2、使用mysqlcheck和myisamchk無法修復(fù)數(shù)據(jù)庫
    的頭像 發(fā)表于 12-09 11:05 ?638次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—通過拼接數(shù)據(jù)庫碎片恢復(fù)SQLserver數(shù)據(jù)庫

    個(gè)運(yùn)行在存儲上的SQLServer數(shù)據(jù)庫,有1000多個(gè)文件,大小幾十TB。數(shù)據(jù)庫每10天生成個(gè)NDF文件,每個(gè)NDF幾百GB大小。數(shù)據(jù)庫
    的頭像 發(fā)表于 10-31 13:21 ?708次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—通過拼接<b class='flag-5'>數(shù)據(jù)庫</b>碎片恢復(fù)SQLserver<b class='flag-5'>數(shù)據(jù)庫</b>

    科技云報(bào)到:大模型時(shí)代,向量數(shù)據(jù)庫的野望

    科技云報(bào)到:大模型時(shí)代,向量數(shù)據(jù)庫的野望
    的頭像 發(fā)表于 10-14 17:18 ?540次閱讀

    Oracle數(shù)據(jù)恢復(fù)—異常斷電后Oracle數(shù)據(jù)庫報(bào)錯(cuò)的數(shù)據(jù)恢復(fù)案例

    Oracle數(shù)據(jù)庫故障: 機(jī)房異常斷電后,Oracle數(shù)據(jù)庫報(bào)錯(cuò):“system01.dbf需要更多的恢復(fù)來保持致性,數(shù)據(jù)庫無法打開
    的頭像 發(fā)表于 09-30 13:31 ?746次閱讀
    Oracle<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—異常斷電后Oracle<b class='flag-5'>數(shù)據(jù)庫</b>啟<b class='flag-5'>庫</b>報(bào)錯(cuò)的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SQL Server數(shù)據(jù)庫出現(xiàn)823錯(cuò)誤的數(shù)據(jù)恢復(fù)案例

    SQL Server數(shù)據(jù)庫故障: SQL Server附加數(shù)據(jù)庫出現(xiàn)錯(cuò)誤823,附加數(shù)據(jù)庫失敗。數(shù)據(jù)庫沒有備份,無法通過備份恢復(fù)數(shù)據(jù)庫
    的頭像 發(fā)表于 09-20 11:46 ?710次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—SQL Server<b class='flag-5'>數(shù)據(jù)庫</b>出現(xiàn)823錯(cuò)誤的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    Oracle數(shù)據(jù)恢復(fù)—Oracle數(shù)據(jù)庫delete刪除的數(shù)據(jù)恢復(fù)方法

    刪除Oracle數(shù)據(jù)庫數(shù)據(jù)般有以下2種方式:delete、drop或truncate。下面針對這2種刪除oracle數(shù)據(jù)庫數(shù)據(jù)的方式探討
    的頭像 發(fā)表于 09-11 11:45 ?722次閱讀
    主站蜘蛛池模板: 片黄免费 | 狠狠干天天干 | 日色视频 | 夜夜操狠狠操 | 六月丁香婷婷综合 | 精品三级内地国产在线观看 | 久操视频在线观看免费 | 亚洲在成人网在线看 | 日本黄网站高清色大全 | 成人久久久久久 | 精品三级国产精品经典三 | 天堂视频网 | 亚洲婷婷国产精品电影人久久 | 国产三级日产三级日本三级 | 亚洲电影天堂网 | 在线成人欧美 | 性欧美hd | 精品国产自在在线在线观看 | 色网站在线看 | 97人操| 欧美 亚洲 国产 精品有声 | jdav视频在线观看 | 黄色小毛片 | 91精品福利久久久 | 天天干视频网站 | 久久澡人人澡狠狠澡 | 日本不卡视频免费 | 久久美女性网 | 国产亚洲一区二区精品 | av在线色 | 四虎最新永久在线精品免费 | 天天爱天天操天天干 | 波多野结衣第一页 | 椎名空中文字幕一区二区 | 亚洲第一区精品日韩在线播放 | 久热操| 四虎午夜影院 | 午夜69成人做爰视频网站 | 男女爱爱免费 | 日本免费黄色大片 | 亚洲午夜久久 |