91在线观看视频-91在线观看视频-91在线观看免费视频-91在线观看免费-欧美第二页-欧美第1页

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

雙向賦能:AI與數據庫的修行之道

愛云資訊 ? 2024-06-28 23:07 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

在這個數據為王的時代,數據是人工智能的三大支柱之一,其重要性不言而喻。最近,OpenAI收購了數據庫初創公司Rockset,迅速引起了業內外的廣泛關注。OpenAI早已在算法和計算能力方面遙遙領先,通過這次戰略性的收購,OpenAI將在其產品中融合Rockset的先進數據索引和查詢技術,幫助OpenAI將數據轉化為“可操作智能”。

現代數據庫與人工智能(AI)的融合,正如同一場席卷全球的技術革命,深刻地重塑著技術與產業的格局。

一方面,數據庫技術的技術迭代需要更好地支持人工智能應用工作負責,比如向量數據庫,也就是DB for AI;另一方面人工智能技術也更好地讓數據庫運維更方便,實現自動化和智能化,也就是AI for DB。

在這一個變革過程中,數據庫產業正面臨諸多挑戰,比如海量數據高性能和大并發、大量數據庫實例智能優化、保障數據安全防篡改的防護等。面對這種情況,企業如何通過技術創新和生態協同應對挑戰并抓住其中的機遇呢?

作為數據庫領域的領頭羊,東方國信、PingCAP、云和恩墨通過自身的技術與產品實踐給出了他們的答案,同時他們與英特爾的協同創新,也讓我們看到了數據庫生態的蓬勃生機。

新需求催生新挑戰

在AI大模型時代,由于數據庫的使用人數和數據量的爆炸性增長,數據庫系統的并發度會極大提升。云和恩墨聯合創始人兼CTO楊廷琨強調,數據量爆發性增長帶來壓力的同時,硬件技術的快速發展也促進了算力提升,為提升處理能力和性能提供了可能性。這時候,數據庫廠商需從兩方面著手應對:一方面增強單機性能,另一方面通過架構設計實現平滑擴展,以滿足海量數據的處理需求。

同時,數據量的爆炸性增長也會帶來極大的數據冗余。在此挑戰下,用戶從需求側又提出了很多新的要求,東方國信副總裁兼CTO查禮表示:用戶往往會希望數倉既能做數據加工,又能做分析和查詢,這要求數據庫系統具有高度靈活性和多功能性。

數據來源多樣化和用戶需求復雜化催生了對硬件越來越高的需求,數據庫要保持高性能、高穩定性,開發和運維人員又需要簡化數據庫的使用,這構成了一種“悖論”。

為解決數據庫行業“既要、又要”的問題,越來越多的數據技術公司讓AI“入局”,讓數據庫越跑越“聰明”。PingCAP服務總經理林景旭表示,他們正探索利用AI技術增強數據庫功能,同時簡化用戶操作。作為一家分布式數據庫廠商,PingCAP提供的開源分布式數據產品與解決方案,通過分布式數據庫架構,實現計算和存儲分離,以動態擴展滿足不同用戶需求,這其中便可以通過AI算法來優化資源使用和性能評判。

數據庫產業需要不斷創新,開發更加高效、可靠、智能的數據庫技術,才能滿足新需求的挑戰。同時,數據庫產業鏈也需要緊密合作,共同推動數據庫技術的發展,為數字經濟的發展提供更加堅實的基礎。

生態協同推動產業變革

數據庫產業面臨的挑戰是多方面的,這些挑戰并非單個企業能夠獨自解決,需要整個產業的協同合作,才能共同應對挑戰,并抓住其中的機遇。

憑借先進的處理器技術、開源合作策略以及對客戶需求的深刻理解,英特爾與數據庫領域的合作伙伴一起構建了一個開源開放、合作共贏的生態環境,助力數據庫技術的持續創新和應用落地。

英特爾中國云創中心技術總經理張曉軍介紹說,第四代和第五代英特爾?? 至強? 可擴展處理器內置了多項面向數據庫優化的技術,例如英特爾? QAT(英特爾? 數據保護與壓縮技術)用于數據壓縮解壓縮,以及英特爾? IAA(英特爾? 存內分析加速器)加速數據分析。在數據安全方面,英特爾也能通過英特爾? TDX(英特爾? 信任域擴展)和SGX(英特爾? 軟件防護擴展)為使用中的數據提供端到端硬件級防護能力。

此外英特爾至強6處理器已于近期發布,提供了兩種不同的 CPU 微架構版本,分別為性能核 (P-core) 和能效核(E-core),讓多種工作負載的性能和能效表現再創新高。其全新功能和內置加速器為目標工作負載帶來進一步助力,實現了更高的性能和能效。

wKgZomZ-0ZmAXpszAALAKKFfimY808.png

基于英特爾? 架構的加速器與軟件工具

眾多的合作伙伴正在借助至強處理器和加速器及軟件工具增強自身的產品競爭力。

比如PingCAP推出的TiDB開源分布式數據庫就得益于第四代英特爾? 至強? 可擴展處理器卓越的代際性能,其數據庫的只讀性能與讀寫性能分別達到基準配置的1.62倍與1.43倍。

wKgZomZ-0ZmAd4vGAAC0AyhEpBQ338.png

此外TiDB利用至強?? 可擴展處理器搭載的英特爾?? IAA提供的出色吞吐量壓縮和解壓縮功能,在不影響性能的前提下,提升了數據壓縮率,節約了存儲空間。PingCAP采用英特爾?? IAA代替LZ4之后,TiDB壓縮率為LZ4無損壓縮算法的1.4倍。

wKgZomZ-0ZmAbuQKAAD6U5qW0Yc786.png

并結合CPU的迭代,性能提升可達到原配置的1.56倍 ,有助于客戶化解數據壓縮所帶來的性能困擾。

wKgaomZ-0ZmAa7V8AAEZe0-RboQ070.png

雖然硬件性能的提升為數據庫處理海量數據提供了基礎,但要真正發揮這些算力,需要對數據庫內核進行深度優化。云和恩墨通過改進數據庫內核,使之更好地適應現代硬件,如多核CPU、大內存和高速IO子系統,從而實現單機性能的顯著提升。

根據其透露的測試結果,在一顆至強?? 雙路服務器架構上,以50G內存配置,再加上一個NVMe的SSD閃存,云和恩墨達到了700萬TPCC的指標,可以說是極大提高了單機能力。

東方國信適用于超大規模數據存儲和在線分析的大數據 BEH平臺企業版通過集成Gluten與Velox Backend向量化執行引擎,為Spark注入了原生矢量化執行的能力,同時結合第四代英特爾? 至強? 可擴展處理器,以及處理器集成的英特爾? QAT加速器,顯著優化了Spark批處理計算、SparkSQL計算、SQL查詢服務的執行效率。經測試,在相同硬件環境下,配合英特爾? QAT的加成,Spark計算性能可提升高達 2.9倍。

wKgaomZ-0ZmAT0OdAADj6_7f8dI573.png

除了硬件之外,英特爾還強化了在軟件及數據庫生態方面的投入。張曉軍還強調了英特爾在開源領域的貢獻,如Apache社區的Gluten項目,已經在很多客戶系統里得到了廣泛應用,相比傳統的Spark,性能可以提高2-3倍,如果其運行在英特爾的硬件上預計取得更優性能,顯著提升大數據處理效率。·

數據庫與AI深度融合

隨著大數據時代的到來,數據量及系統數量都呈指數級增長,數據類型也由結構化數據逐漸演變成了非結構化數據和半結構化數據,這就對數據庫系統的穩定性和能力提出了更高的要求,數據庫技術和人工智能技術相結合成為當前熱門的研究主題之一。

在AI時代,數據已成為驅動企業發展的核心要素,而數據庫作為存儲、管理和分析數據的重要基礎設施,與AI技術的深度融合將是大勢所趨。這種融合不僅能夠提升數據庫的性能和智能化水平,還能夠推動AI技術的應用落地。

數據庫廠商在不同維度上探索和應用AI,東方國信正在利用AI技術,尤其是在智能取數方面,通過自然語言處理生成SQL語句,提高數據提取的靈活性和效率。同時,他們也在探索智能建倉,嘗試通過AI技術自動化數據倉庫的構建和維護流程,旨在實現數據倉庫的自動化和智能化。

查禮表示,公司正積極研發解決方案,旨在通過AI輔助減少人工介入,提高效率,預計通過AI技術的引入,數倉維護成本能降低60%。

PingCAP利用AI算法進行資源管理,讓數據庫更適應復雜多變的業務場景。林景旭強調,通過集成AI技術,比如利用AI優化數據庫內部管理,提升數據庫本身的智能水平,使其在滿足復雜業務場景的同時,降低使用門檻。這意味著數據庫不僅要有強大的數據處理能力,還需具備自我管理和優化的能力,確保在面對日益復雜的業務需求時,能更加自主、高效地運行。

云和恩墨則推動自身“AI for DB”和“DB for AI”的雙向促進,楊廷琨指出,云和恩墨利用AI提升數據庫性能,尤其是在數據庫智能資源管理、智能監控、智能根因追蹤、智能參數調優、SQL智能優化以及自動駕駛等方面的應用潛能。

結語

現代數據庫與人工智能的結合不僅對處理能力、架構靈活性和用戶體驗提出了更高要求,也為數據庫產業帶來了前所未有的發展機遇。

隨著技術的不斷進步和生態合作的深化,未來數據庫將更加智能、靈活和強大,為數字經濟的發展提供堅實的基礎。英特爾與數據庫領域的合作伙伴將一起共同推動數據庫產業向智能化、高效化轉型,滿足客戶的業務創新需求。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4533

    瀏覽量

    87480
  • AI
    AI
    +關注

    關注

    88

    文章

    35168

    瀏覽量

    280173
  • 數據庫
    +關注

    關注

    7

    文章

    3927

    瀏覽量

    66281
  • OpenAI
    +關注

    關注

    9

    文章

    1210

    瀏覽量

    8941
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    數據庫數據恢復—MongoDB數據庫文件丟失的數據恢復案例

    MongoDB數據庫數據恢復環境: 一臺操作系統為Windows Server的虛擬機上部署MongoDB數據庫。 MongoDB數據庫故障: 工作人員在MongoDB服務仍
    的頭像 發表于 07-01 11:13 ?161次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復—MongoDB<b class='flag-5'>數據庫</b>文件丟失的<b class='flag-5'>數據</b>恢復案例

    數據庫數據恢復—SQL Server數據庫被加密如何恢復數據

    SQL Server數據庫故障: SQL Server數據庫被加密,無法使用。 數據庫MDF、LDF、log日志文件名字被篡改。
    的頭像 發表于 06-25 13:54 ?147次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復—SQL Server<b class='flag-5'>數據庫</b>被加密如何恢復<b class='flag-5'>數據</b>?

    數據庫數據恢復——MongoDB數據庫文件拷貝后服務無法啟動的數據恢復

    MongoDB數據庫數據恢復環境: 一臺Windows Server操作系統虛擬機上部署MongoDB數據庫。 MongoDB數據庫故障: 管理員在未關閉MongoDB服務的
    的頭像 發表于 04-09 11:34 ?312次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復——MongoDB<b class='flag-5'>數據庫</b>文件拷貝后服務無法啟動的<b class='flag-5'>數據</b>恢復

    數據庫數據恢復—SQL Server附加數據庫提示“錯誤 823”的數據恢復案例

    SQL Server數據庫附加數據庫過程中比較常見的報錯是“錯誤 823”,附加數據庫失敗。 如果數據庫有備份則只需還原備份即可。但是如果沒有備份,備份時間太久,或者其他原因導致備份
    的頭像 發表于 02-28 11:38 ?488次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復—SQL Server附加<b class='flag-5'>數據庫</b>提示“錯誤 823”的<b class='flag-5'>數據</b>恢復案例

    分布式云化數據庫有哪些類型

    分布式云化數據庫有哪些類型?分布式云化數據庫主要類型包括:關系型分布式數據庫、非關系型分布式數據庫、新SQL分布式數據庫、以列方式存儲
    的頭像 發表于 01-15 09:43 ?488次閱讀

    MySQL數據庫的安裝

    MySQL數據庫的安裝 【一】各種數據庫的端口 MySQL :3306 Redis :6379 MongoDB :27017 Django :8000 flask :5000 【二】MySQL 介紹
    的頭像 發表于 01-14 11:25 ?567次閱讀
    MySQL<b class='flag-5'>數據庫</b>的安裝

    數據庫是哪種數據庫類型?

    數據庫是一種部署在虛擬計算環境中的數據庫,它融合了云計算的彈性和可擴展性,為用戶提供高效、靈活的數據庫服務。云數據庫主要分為兩大類:關系型數據庫
    的頭像 發表于 01-07 10:22 ?515次閱讀

    數據庫加密辦法

    企業對于數據的重視程度不言而喻,也衍生出了數據=資產的概念。但是數據泄漏的事件頻繁發生,為了保護數據資產,企業有必要對數據庫做一些針對性的措
    的頭像 發表于 12-24 09:47 ?675次閱讀

    數據庫數據恢復—Mysql數據庫表記錄丟失的數據恢復流程

    Mysql數據庫故障: Mysql數據庫表記錄丟失。 Mysql數據庫故障表現: 1、Mysql數據庫表中無任何數據或只有部分
    的頭像 發表于 12-16 11:05 ?618次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復—Mysql<b class='flag-5'>數據庫</b>表記錄丟失的<b class='flag-5'>數據</b>恢復流程

    數據庫事件觸發的設置和應用

    數據庫無論對于生產管理還是很多的實際應用都非常重要。小編這次聊一下數據庫事件觸發的應用。示例使用了postgresql和Python。
    的頭像 發表于 12-13 15:14 ?647次閱讀

    數據庫數據恢復—MYSQL數據庫ibdata1文件損壞的數據恢復案例

    mysql數據庫故障: mysql數據庫文件ibdata1、MYI、MYD損壞。 故障表現:1、數據庫無法進行查詢等操作;2、使用mysqlcheck和myisamchk無法修復數據庫
    的頭像 發表于 12-09 11:05 ?636次閱讀

    數據庫數據恢復—通過拼接數據庫碎片恢復SQLserver數據庫

    一個運行在存儲上的SQLServer數據庫,有1000多個文件,大小幾十TB。數據庫每10天生成一個NDF文件,每個NDF幾百GB大小。數據庫包含兩個LDF文件。 存儲損壞,數據庫
    的頭像 發表于 10-31 13:21 ?702次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復—通過拼接<b class='flag-5'>數據庫</b>碎片恢復SQLserver<b class='flag-5'>數據庫</b>

    Oracle數據恢復—異常斷電后Oracle數據庫報錯的數據恢復案例

    Oracle數據庫故障: 機房異常斷電后,Oracle數據庫報錯:“system01.dbf需要更多的恢復來保持一致性,數據庫無法打開”。數據
    的頭像 發表于 09-30 13:31 ?744次閱讀
    Oracle<b class='flag-5'>數據</b>恢復—異常斷電后Oracle<b class='flag-5'>數據庫</b>啟<b class='flag-5'>庫</b>報錯的<b class='flag-5'>數據</b>恢復案例

    數據庫數據恢復—Oracle數據庫文件system01.dbf損壞的數據恢復案例

    打開oracle數據庫報錯“system01.dbf需要更多的恢復來保持一致性,數據庫無法打開”。
    的頭像 發表于 09-21 14:25 ?975次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復—Oracle<b class='flag-5'>數據庫</b>文件system01.dbf損壞的<b class='flag-5'>數據</b>恢復案例

    數據庫數據恢復—SQL Server數據庫出現823錯誤的數據恢復案例

    SQL Server數據庫故障: SQL Server附加數據庫出現錯誤823,附加數據庫失敗。數據庫沒有備份,無法通過備份恢復數據庫
    的頭像 發表于 09-20 11:46 ?707次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復—SQL Server<b class='flag-5'>數據庫</b>出現823錯誤的<b class='flag-5'>數據</b>恢復案例
    主站蜘蛛池模板: 国产精品美女久久久久网站 | 亚洲一二三四区 | 色拍拍拍 | 色婷婷婷丁香亚洲综合不卡 | 美女被草视频在线观看 | 色中色官网 | 四虎成人免费观看在线网址 | 天天操天天干天天舔 | 日本一区二区三区免费看 | 天天干天天插 | 成年片免费网址网站 | 亚洲欧洲综合网 | 丁香综合在线 | 激情综合网五月婷婷 | 激情天堂 | 天天综合色天天桴色 | 欧美怡红院免费全部视频 | 亚洲国产欧美精品一区二区三区 | 国产女人小便视频 | 91大神精品在线观看 | www.你懂的| 色综合综合色综合色综合 | 奇米影视四色首页手机在线 | 国产精品1区2区3区 国产精品1区2区3区在线播放 | 亚洲高清色图 | 人人爱爱 | 久久性妇女精品免费 | 91日韩精品天海翼在线观看 | 亚洲欧美综合一区二区三区四区 | 美女扒开尿口给男的桶个爽 | 亚州国产精品精华液 | 天天躁夜夜躁狠狠躁躁88 | 狠狠色丁香婷婷 | 日本不卡在线一区二区三区视频 | 香蕉视频啪啪 | 操xxx| 青草视频久久 | xxxxx69日本老师hd | 在线高清国产 | 激情福利 | 推倒都市极品贵妇 |