9月11日-12日，2024 IDC中國(guó)年度峰會(huì)暨頒獎(jiǎng)典禮于上海圓滿召開。全球權(quán)威IT市場(chǎng)研究和咨詢公司IDC公布了 2024 未來(lái)企業(yè)大獎(jiǎng)的優(yōu)秀獎(jiǎng)名單。中國(guó)聯(lián)通與酷克數(shù)據(jù)聯(lián)合申報(bào)的《中國(guó)聯(lián)通筑夢(mèng)數(shù)字化轉(zhuǎn)型：自主可控、開放協(xié)作的混合受管理湖倉(cāng)一體平臺(tái)》項(xiàng)目，憑借其深度國(guó)產(chǎn)化、自主可控、高效靈活、統(tǒng)一管理等先進(jìn)特性，成功入選 2024 未來(lái)數(shù)字基礎(chǔ)架構(gòu)領(lǐng)軍者獎(jiǎng)項(xiàng)。

IDC未來(lái)企業(yè)大獎(jiǎng)（Future Enterprise Award，F(xiàn)EA）已連續(xù)征集9年，是業(yè)界首個(gè)針對(duì)不同機(jī)構(gòu)、組織、個(gè)人在數(shù)字化轉(zhuǎn)型背景下進(jìn)行表彰的獎(jiǎng)項(xiàng)，具有前瞻性、中立性和國(guó)際性的聲譽(yù)。

每年，IDC都通過(guò)公開征集、公眾投票和內(nèi)外部專家評(píng)審的方式，票選出當(dāng)年最具標(biāo)桿意義的數(shù)字化轉(zhuǎn)型案例，旨在表彰那些引領(lǐng)未來(lái)商業(yè)趨勢(shì)、彰顯數(shù)字化轉(zhuǎn)型巨大商業(yè)價(jià)值的先鋒力量。

酷克數(shù)據(jù)HashData云原生數(shù)據(jù)倉(cāng)庫(kù)攜手中國(guó)聯(lián)通打造的自主可控開放式湖倉(cāng)一體平臺(tái)，整合數(shù)據(jù)湖低成本存儲(chǔ)與數(shù)據(jù)倉(cāng)庫(kù)高效處理的優(yōu)勢(shì)，構(gòu)建了穩(wěn)定高效的數(shù)據(jù)處理生態(tài)?；诤}(cāng)之間無(wú)縫調(diào)度與管理能力，打破傳統(tǒng)大數(shù)據(jù)體系的數(shù)據(jù)孤島，實(shí)現(xiàn)數(shù)據(jù)湖與數(shù)據(jù)倉(cāng)庫(kù)之間數(shù)據(jù)的自由流通與共享。對(duì)構(gòu)建開放、共享、安全、高效的數(shù)據(jù)供給體系發(fā)揮了重要作用，使數(shù)據(jù)“供得出、流得動(dòng)、用得好、控得住”，充分發(fā)揮數(shù)據(jù)資源對(duì)經(jīng)營(yíng)業(yè)務(wù)的支撐價(jià)值。

項(xiàng)目背景：大數(shù)據(jù)集約化的瓶頸與難題

在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的背景下，中國(guó)聯(lián)通面臨大數(shù)據(jù)集約化建設(shè)的需求，系統(tǒng)升級(jí)建設(shè)過(guò)程中遇到了諸如超大規(guī)模數(shù)據(jù)存儲(chǔ)承載能力擴(kuò)展瓶頸、數(shù)據(jù)鏈路中各計(jì)算引擎對(duì)同一數(shù)據(jù)無(wú)法識(shí)別、數(shù)據(jù)共享效率低等一系列難題。為此，中國(guó)聯(lián)通與酷克數(shù)據(jù)合作，旨在建設(shè)自主可控的湖倉(cāng)一體平臺(tái)，提升網(wǎng)絡(luò)建設(shè)、運(yùn)維、服務(wù)營(yíng)銷、用戶管理的智能化水平，進(jìn)一步促進(jìn)用戶服務(wù)滲透率的提高。

項(xiàng)目核心在于平臺(tái)的自主性與開放性，重點(diǎn)實(shí)現(xiàn)湖與倉(cāng)的融合。項(xiàng)目通過(guò)分布式存儲(chǔ)元數(shù)據(jù)和數(shù)據(jù)請(qǐng)求路由管理技術(shù)，形成存儲(chǔ)集群的聯(lián)邦，解決分布式存儲(chǔ)系統(tǒng)的可擴(kuò)展性問(wèn)題。同時(shí)，對(duì)元數(shù)據(jù)信息和數(shù)據(jù)權(quán)限進(jìn)行統(tǒng)一管理，解決Lambda架構(gòu)下多計(jì)算引擎引發(fā)的數(shù)據(jù)不一致、計(jì)算成本高、數(shù)據(jù)共享難等問(wèn)題。新平臺(tái)通過(guò)逐級(jí)串聯(lián)與打通，解決了湖上數(shù)倉(cāng)高價(jià)值數(shù)據(jù)分析的“最后一公里”問(wèn)題，大幅提升了數(shù)據(jù)要素流通效率，業(yè)務(wù)應(yīng)用價(jià)值顯著。

HashData解決方案：元數(shù)據(jù)管理、云原生彈性、數(shù)據(jù)共享

分析型數(shù)據(jù)庫(kù)是項(xiàng)目建設(shè)最重要的技術(shù)投資之一。經(jīng)過(guò)中國(guó)聯(lián)通的深入調(diào)研和多輪技術(shù)選型，最終選擇了酷克數(shù)據(jù)旗下的HashData云端數(shù)據(jù)倉(cāng)庫(kù)作為核心技術(shù)解決方案?；谠圃軜?gòu)和分布式設(shè)計(jì)，不僅滿足了數(shù)據(jù)庫(kù)的事務(wù)性需求，也完美適應(yīng)了數(shù)據(jù)湖的應(yīng)用場(chǎng)景。

HashData摒棄了傳統(tǒng)的“湖上建倉(cāng)”或“倉(cāng)外掛湖”的模式，通過(guò)元數(shù)據(jù)、計(jì)算和存儲(chǔ)的分離，以及智能感知數(shù)據(jù)湖元數(shù)據(jù)變化的設(shè)計(jì)，解決了湖倉(cāng)數(shù)據(jù)共享問(wèn)題。此外，HashData還顯著提升了資源利用率、擴(kuò)展性、并發(fā)支持以及擴(kuò)縮容的靈活性，從而降低了運(yùn)維成本。

HashData在中國(guó)聯(lián)通OLAP數(shù)倉(cāng)規(guī)模已超過(guò)2000+節(jié)點(diǎn)，具備基于異構(gòu)芯片的靈活部署能力。依托存算分離架構(gòu)優(yōu)勢(shì)和云原生調(diào)度能力，各業(yè)務(wù)租戶可靈活申請(qǐng)資源，實(shí)現(xiàn)算力的彈性擴(kuò)縮容，極大地提升了資源使用效率。

HashData云端數(shù)據(jù)倉(cāng)庫(kù)與中國(guó)聯(lián)通現(xiàn)有Hadoop數(shù)據(jù)湖技術(shù)棧實(shí)現(xiàn)了高效協(xié)同工作。以數(shù)據(jù)湖作為統(tǒng)一存儲(chǔ)，基于共享互通的數(shù)據(jù)組織、兼容開放的數(shù)據(jù)分析接口和高效的數(shù)據(jù)緩存能力，為聯(lián)通各業(yè)務(wù)提供了高效、便捷的一體化數(shù)據(jù)加工和分析技術(shù)支撐，進(jìn)一步提升了湖倉(cāng)一體平臺(tái)在異構(gòu)數(shù)據(jù)復(fù)雜查詢和超大規(guī)模數(shù)據(jù)處理方面的性能，為中國(guó)聯(lián)通的數(shù)字化建設(shè)提供了強(qiáng)有力的支撐。

項(xiàng)目?jī)r(jià)值：經(jīng)營(yíng)分析與營(yíng)銷能力顯著提升

該平臺(tái)自上線以來(lái)，已經(jīng)全面支撐了中國(guó)聯(lián)通集團(tuán)及其下屬省分、子公司的各類業(yè)務(wù)場(chǎng)景，實(shí)現(xiàn)了每日TB級(jí)數(shù)據(jù)高效采集與處理。平臺(tái)的引入使得數(shù)據(jù)分析類業(yè)務(wù)發(fā)展核心指標(biāo)的發(fā)布效率大幅提升，日?qǐng)?bào)告發(fā)布時(shí)間提前了30%，月報(bào)告發(fā)布時(shí)間提前了20%，為企業(yè)的快速?zèng)Q策提供了有力的數(shù)據(jù)支撐。同時(shí)，依托平臺(tái)高效的數(shù)據(jù)分析引擎，也極大提升了自助數(shù)據(jù)分析業(yè)務(wù)中基于全量數(shù)據(jù)的經(jīng)營(yíng)分析報(bào)表的業(yè)務(wù)洞察力。

值得一提的是，中國(guó)聯(lián)通在數(shù)字化建設(shè)過(guò)程中，始終將數(shù)據(jù)安全與隱私保護(hù)放在首位。平臺(tái)通過(guò)加強(qiáng)數(shù)據(jù)加密、權(quán)限控制等安全措施，確保了數(shù)據(jù)在采集、存儲(chǔ)、處理和分析全過(guò)程中的安全性與合規(guī)性。同時(shí)，平臺(tái)還積極響應(yīng)國(guó)家關(guān)于網(wǎng)絡(luò)安全和數(shù)據(jù)保護(hù)的政策法規(guī)要求，為中國(guó)聯(lián)通在數(shù)字化時(shí)代的安全發(fā)展提供了堅(jiān)實(shí)的保障。

結(jié)語(yǔ)

中國(guó)聯(lián)通一直致力于利用數(shù)字技術(shù)驅(qū)動(dòng)創(chuàng)新，積極擁抱云計(jì)算、大數(shù)據(jù)、人工智能等前沿技術(shù)，構(gòu)建高效、智能、安全的網(wǎng)絡(luò)基礎(chǔ)設(shè)施，不斷優(yōu)化產(chǎn)品和服務(wù)，提升用戶體驗(yàn)，以滿足日益增長(zhǎng)的數(shù)字化需求。

在此背景下，酷克數(shù)據(jù)與中國(guó)聯(lián)通的合作無(wú)疑為數(shù)字化建設(shè)之路注入了新的活力。通過(guò)共同打造的自主可控、開放協(xié)作的混合受管理湖倉(cāng)一體平臺(tái)，不僅解決了中國(guó)聯(lián)通在大數(shù)據(jù)集約化建設(shè)中面臨的諸多挑戰(zhàn)，更為業(yè)務(wù)推動(dòng)提供了具象有力的技術(shù)支撐。

展望未來(lái)，酷克數(shù)據(jù)將繼續(xù)攜手中國(guó)聯(lián)通，深耕湖與倉(cāng)的深度一體融合，打破數(shù)據(jù)孤島，促進(jìn)數(shù)據(jù)的自由流通與共享，為聯(lián)通提供更高效、更智能的數(shù)據(jù)管理和分析服務(wù)，共同打造國(guó)央企數(shù)字化基礎(chǔ)建設(shè)的先鋒力量。