近日,2019年中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(簡稱“數(shù)博會”)在貴陽舉辦。期間,在領(lǐng)先科技成果發(fā)布會上,遼寧移動與華為“基于多租戶模型構(gòu)建MPP(大規(guī)模并行處理)數(shù)據(jù)庫”聯(lián)合創(chuàng)新項目,榮獲“優(yōu)秀項目”獎,更好地驅(qū)動大數(shù)據(jù)應用。
1
攜手共贏,把握大數(shù)據(jù)時代商機
數(shù)博會不僅是全球首個以大數(shù)據(jù)為主題的博覽會,更已成為全球大數(shù)據(jù)發(fā)展的風向標和國際性、權(quán)威性的成果交流平臺。
大數(shù)據(jù)時代背景下,數(shù)據(jù)的分析、組織和調(diào)度是信息價值挖掘的重要保障。MPP大規(guī)模并行處理架構(gòu)的數(shù)據(jù)庫系統(tǒng)因其具備良好的擴展性、高性能、可靠性等特點,正逐漸替代經(jīng)分系統(tǒng)中傳統(tǒng)數(shù)據(jù)倉庫系統(tǒng)。
但使用MPP數(shù)據(jù)庫時也面臨一些問題,其中最為突出的是多租戶同時使用時,如何實現(xiàn)各租戶計算資源和存儲資源的隔離,即當數(shù)據(jù)庫系統(tǒng)負載較高的時候,任務之間存在資源(CPU、I/O和內(nèi)存)競爭,以及避免任務之間由于資源競爭導致資源互鎖的一些問題。
本次遼寧移動與華為合作,基于華為的Node Group彈性集群架構(gòu)在MPP數(shù)據(jù)庫實現(xiàn)按租戶對系統(tǒng)資源(CPU、內(nèi)存、IO、存儲)和數(shù)據(jù)的隔離,確保各應用系統(tǒng)之間無干擾,合理地為各個應用提供資源,保障各應用能夠正常運行。
同時,在用戶資源隔離的基礎(chǔ)上,該項目的MPP數(shù)據(jù)庫還實現(xiàn)了租戶計算資源的彈性伸縮,可以充分利用其它租戶的空閑資源,不但保障了業(yè)務的正常運行,還可實現(xiàn)資源利用率最大化。
例如,地市集市業(yè)務系統(tǒng)在9:00~18:00點為業(yè)務人員提供交互分析,該業(yè)務的訪問量和工作量波動比較大,很難對資源做精準評估。當有業(yè)務人員提交比較復雜的關(guān)聯(lián)查詢時就會造成該資源池的利用率較高,反饋時間過長。而互聯(lián)網(wǎng)中心業(yè)務分析等業(yè)務,其執(zhí)行的周期和時間段又恰恰和地市集市的業(yè)務可以分開執(zhí)行,因此利用租戶資源的彈性伸縮特性,訪問高峰時完全可以借用互聯(lián)網(wǎng)中心業(yè)務分析等各業(yè)務模塊的空閑資源,提升地市集市的查詢效率,同時提升整體的資源利用率。
遼寧移動采用華為MPP數(shù)據(jù)庫GaussDB構(gòu)建統(tǒng)一的大數(shù)據(jù)系統(tǒng),逐步替換目前多套多種的數(shù)據(jù)庫系統(tǒng),有效解決了傳統(tǒng)應用分類建設造成的整體系統(tǒng)結(jié)構(gòu)復雜、系統(tǒng)利用率低等問題。
系統(tǒng)自2016年上線以來,GaussDB數(shù)據(jù)庫集群規(guī)模已達到80個節(jié)點,系統(tǒng)擴容750TB。支持700多個用戶的并行訪問。并逐步遷移多套核心系統(tǒng)至GaussDB數(shù)據(jù)庫平臺,大幅簡化整個數(shù)據(jù)平臺的復雜度,降低管理難度。GaussDB數(shù)據(jù)庫系統(tǒng)最終可以擴展到1024節(jié)點、10PB容量,滿足遼寧移動未來業(yè)務發(fā)展的需求。
同時該系統(tǒng)還支撐了盤錦市智慧城市運行管理平臺,可在旅游、交通、商圈及重點區(qū)域等方面有效為政府提供決策依據(jù)。在試用期間獲得高度評價。此外手機上網(wǎng)行為分析也支撐了遼寧電視臺春節(jié)大數(shù)據(jù)報告等需求,獲得了良好的社會效益。
2
持續(xù)創(chuàng)新,匠心打造
智能數(shù)據(jù)基礎(chǔ)設施“數(shù)據(jù)底座”
近年來,華為一直致力于為各行業(yè)構(gòu)建數(shù)據(jù)基礎(chǔ)設施,加速智能化進程,“數(shù)據(jù)+智能”正在創(chuàng)造更多的商業(yè)價值、產(chǎn)業(yè)價值和社會價值,支撐“數(shù)據(jù)+智能”的數(shù)據(jù)基礎(chǔ)設施已成為ICT重要組成部分。
華為智能數(shù)據(jù)與存儲從計算、存儲和數(shù)據(jù)處理三個領(lǐng)域重定義數(shù)據(jù)基礎(chǔ)設施。對于計算領(lǐng)域,華為引領(lǐng)多樣性計算,推動計算架構(gòu)多樣性發(fā)展,讓算力更充裕更經(jīng)濟。其次,在智能存儲領(lǐng)域,為應對存儲效率低、管理復雜的問題,華為重定義存儲架構(gòu),推出FusionStorage 8.0智能分布式存儲,可大幅提升效率,引領(lǐng)存儲智能化。同時在數(shù)據(jù)處理平臺領(lǐng)域,為應對更實時和智能的需求分析,華為重定義數(shù)據(jù)處理平臺打造全球首款AI-Native數(shù)據(jù)庫GaussDB,使得數(shù)據(jù)分析更智能,全面加速實現(xiàn)數(shù)據(jù)價值。
GaussDB 數(shù)據(jù)庫是華為大數(shù)據(jù)解決方案的重要組成,匯聚全球數(shù)據(jù)庫頂尖專家,從2011年開始研發(fā)。大數(shù)據(jù)是華為ICT戰(zhàn)略的重要支柱,在全球布局8個研究所,持續(xù)進行大規(guī)模研發(fā)投入。GaussDB作為華為研發(fā)的一款企業(yè)級數(shù)據(jù)倉庫產(chǎn)品,具備高性能、高可靠、高擴展、高安全、易用特性,兼容標準ANSI SQL 99/2003語法和PostgreSQL生態(tài),為各行業(yè)PB級海量大數(shù)據(jù)分析提供有競爭力的解決方案。
GaussDB在市場上不斷得到客戶的認可,已廣泛應用于國內(nèi)外金融、交通、運營商、能源、電力、電商等領(lǐng)域的200+客戶,躋身業(yè)界一流數(shù)據(jù)倉庫產(chǎn)品行列,2016年、2017年、2018年連續(xù)三年在Gartner魔力象限排名中位列中國廠商第一。展望未來,華為智能數(shù)據(jù)與存儲將為智能時代構(gòu)筑數(shù)據(jù)基礎(chǔ)設施底座,把數(shù)字世界帶入每個人、每個家庭、每個組織,構(gòu)建萬物互聯(lián)的智能世界。
-
華為
+關(guān)注
關(guān)注
216文章
34867瀏覽量
254486 -
中國移動
+關(guān)注
關(guān)注
22文章
5591瀏覽量
72582 -
MPP
+關(guān)注
關(guān)注
0文章
24瀏覽量
10726
原文標題:遼寧移動與華為的“數(shù)據(jù)庫”聯(lián)合創(chuàng)新項目,獲獎啦
文章出處:【微信號:gh_6ee649e83ee2,微信公眾號:華為云與計算】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
中國移動與華為合作成果榮獲通信產(chǎn)業(yè)最高榮譽
華為榮獲GTI Awards“創(chuàng)新移動服務和應用獎”
博實結(jié)榮獲廣東省電子信息行業(yè)科學技術(shù)獎
中國移動聯(lián)合華為榮獲全球電信領(lǐng)域最佳AI應用獎
廣電計量牽頭項目獲得中國商業(yè)聯(lián)合會服務業(yè)科技創(chuàng)新獎一等獎
傳音旗下人工智能項目榮獲2024年“上海產(chǎn)學研合作優(yōu)秀項目獎”一等獎

傳音旗下小語種AI技術(shù)榮獲2024年“上海產(chǎn)學研合作優(yōu)秀項目獎”一等獎

北極芯微榮獲第四屆“長風杯”創(chuàng)新創(chuàng)業(yè)大賽優(yōu)秀項目獎
愛立信再次榮獲2024彭博綠金杰出項目獎

華為攜手運營商榮獲Glotel 2024四項大獎
軟通動力榮獲華為鴻蒙生態(tài)“行業(yè)解決方案創(chuàng)新獎”
DigiKey 與 Lippincott 合作品牌煥新項目在 2025 年度 Graphis 設計大賽中榮獲金獎
喜訊 | MDD辰達半導體榮獲藍點獎“最具投資價值獎”
博泰車聯(lián)網(wǎng)榮獲上汽大眾“優(yōu)秀合作表現(xiàn)獎”

評論