91在线观看视频-91在线观看视频-91在线观看免费视频-91在线观看免费-欧美第二页-欧美第1页

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

杉巖數據主要解決了機器學習對于高吞吐和低時延的需求問題

lhl545545 ? 來源:DOIT ? 作者:朱 朋博 ? 2020-09-10 14:03 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

2EB最大單一存儲集群

普通個人電腦硬盤一般為500GB,1TB大約等于兩塊電腦盤,1 PB大約等于2000塊電腦硬盤,1EB大約相當于兩百萬塊個人電腦的硬盤,1EB數據量假設用的10TB磁盤的話也需要10萬塊,如此規模的硬盤摞在一起相比也是非常壯觀,更何況要在企業數據中心交付的話,需要非常多的硬件設備。

在杉巖數據的品牌戰略暨新品發布會上,CEO陳堅介紹說,杉巖數據最大單一存儲集群規模達到了2EB。按照上述粗獷的估算方法,大概需要20萬塊硬盤,一塊3.5寸的盤大約600g,20萬塊大概是12噸,普通轎車的重量大約在1.5到2噸,算下來就是6到8輛轎車的重量,夠形象了吧。

杉巖數據CEO

韓信點兵,多多益善,大規模軍隊作戰難點在于如何高效地組織起有效的進攻和防守,對將領的要求非常高。而杉巖數據組織20萬塊硬盤的操作同樣考慮組織能力,杉巖靠的是軟件層次上的創新,將成千上萬個硬盤組織起來構成一個集群,在技術上也是非常大的挑戰。

2EB最大單一存儲集群的出現,是用戶用行動證明了對于杉巖數據這樣一家存儲公司的認可。如此大規模的部署案例,這家分布式存儲公司再也不能低調了。

杉巖數據是誰?

杉巖數據是一家來自深圳的軟件定義存儲廠商,杉巖數據的名字音譯自SandStone(砂巖),砂巖是一種沉積巖,主要組成是地殼最常見的成分,而杉巖數據做的軟件定義存儲依靠的是最常見的通用服務器,在此基礎上加入軟件存儲系統。

IDC給出的市場數據來看,杉巖數據在中國對象存儲市場份額排在第二位,在塊存儲市場也排在第五位,整體軟件定義存儲市場份額能達到第六位,是一家主流的軟件定義存儲廠商,在市場上扮演重要角色。

企業級存儲市場通常需要慢工出細活兒。杉巖數據成立于2014年,僅僅六年后的2020年就有如此成績還是非常令人羨慕的,不久前,杉巖數據還宣布獲得了1.5億人民幣的B+輪融資,收獲市場和資本雙重認可,在品牌戰略暨新品發布會上,還有有包括華為和阿里云等技術合作伙伴,以及許多行業用戶站臺。

杉巖數據的崛起之路

2014年,在深圳一個不到三十平的民房里,有幾位碼農在電腦前忙碌著,一位中年男子,一會兒負責做飯,一會兒負責掃地,燈泡壞了估計還是他負責換,這位中年男子就是陳堅,而這,就是杉巖數據創始成員最早的辦公地點,團隊成員除了陳堅以外,另外幾位小伙伴全都負責寫代碼。

杉巖數據的初始創始成員包括陳堅在內,主要都來自華為的企業存儲業務部門,原本做的業務就與分布式存儲相關,對普通人來說從華為出走其實需要不少勇氣,華為待遇其實非常好,2014年的華為存儲也正處于快速成長期,眼看著業務蒸蒸日上其實想走更難,創業很累不說,還要很多不確定性,除非是對要做的事情非常有把握。

2014年,開源云的浪潮襲來,以OpenStack為代表的開源云方案收獲大量擁躉,中國技術才趕上了這波浪潮,與全世界開源愛好者一道做起了開源云,軟件開發者越發意識到了軟件所能創造的價值,有人說軟件能定義一切,對于做基礎技術的人而言,軟件定義存儲也從概念一步步變為現實。

Ceph作為OpenStack推薦的存儲方案,也很快變得家喻戶曉,使用OpenStack和Ceph的企業用戶也非常多,以電信運營商為主的大型企業客戶在大規模使用OpenStack方案。同時,國內出現了許多基于Ceph的開源存儲解決方案供應商,杉巖數據就是其中的典型代表。

基于Ceph開源項目做企業級存儲方案并不容易,Ceph只是技術方案,而企業對于存儲方案的穩定性和可靠性要求非常高,將技術轉變為經過驗證的產品方案需要經過長期的打磨過程,各種辛苦只有杉巖自己最懂。

2020年8月18日,杉巖數據六周年前夕召開的這次品牌戰略暨新品發布會,是杉巖數據第一次正式的發布會,標志著杉巖數據正式走上臺前,結束了低調期。

CEO陳堅將過去六年分為兩個階段,2014年到2017年期間是產品打磨期,打磨產品的可靠性、穩定性、可用性和可維護性,先是2015年發布了杉巖統一存儲平臺USP,隨后2016年發布海量對象存儲MOS,應對海量非結構化數據存儲的場景。這一階段積累了第一批行業頭部客戶,比如中國移動、深圳供電局、廣發證券等。

第二階段,產品趨于成熟的同時開始大規模推向市場,很快,市場取得了突飛猛進的成果,在金融、電力、能源、醫療、教育等等十多個行業和20多個應用場景收獲500+客戶,上線的總容量超過了3000PB,單一集群數據規模2EB達到中國最大。

此外,杉巖還是中國云計算標準單位成員之一,中國去年發布的云存儲的國標中杉巖是參與標準制定的單位,行業影響力提升。

從2014年到2020年,杉巖數據在6年內總共完成了4輪融資,包括天璣數據、順為資本、廣發乾和、深圳擔保集團、中遠海運、襄禾資本以及無錫金投都是杉巖數據的投資方,有行業和政府方面的資金,資金方全都是以人民幣的方式注資。

陳堅強調,杉巖數據是一家技術驅動型公司,200名員工中有60%都是研發人員,但企業級存儲產品的研發要靠技術更要靠經 驗,杉巖數據的核心研發人員,平均在存儲領域研發經驗在7年以上,杉巖數據有一支強大的研發隊伍,為杉巖數據貢獻了40多項發明和專利。

如今的杉巖數據儼然已是一家獨立的存儲新勢力。

杉巖數據的發展要點與技術創新

作為存儲行業的老兵,陳堅將存儲發展總結為三個階段,第一階段的重點是存好數據,第二階段是管理好各種數據,當下所處的第三階段是用好數據,這個時代的特征是智能。陳堅認為,真正的智能存儲應該具有數據感知和應用感知的能力,存儲系統能夠幫助上層應用做數據的處理和智能的調度,幫助應用做加速和優化。

智能是杉巖數據未來的一大發展方向,發布會現場,杉巖數據發布了新一代杉巖融合智能大數據存儲解決方案,另外一個重點是國產自主可控,為此,杉巖發布了華巖安全存儲一體化解決方案。

杉巖數據的對象存儲是傳統強項,杉巖數據CTO邱尚高介紹了對象存儲的最新消息。新的對象存儲V6版本在存的能力上有突破,文件規模理論上可以達到1000億,單桶文件數支持30億個。通常情況下,文件數的增多將影響到性能表現,但杉巖數據的整體系統性能表現非常平穩,性能僅下降10%。

與阿里云深度合作構建強化版混合云。以前許多混合云都只是能將本地存儲的數據歸檔到公有云上,而杉巖數據與阿里云構建的混合云能進行雙向數據同步,不僅如此,業務還能同時在公有云和私有云上運行,還可以進行業務的平滑遷移。

強化異構納管能力。在異構方面,V6版本能夠納管如開源的對象存儲、金融行業應用較多的Documentum、FileNet、 FastDFS等第三方的對象存儲,幫助客戶縮短數據遷移時間,保護用戶現有投資。

智能處理引擎功能。在杉巖對象存儲里面,可以用插件對各種處理組件(OCR識別,或者全文識別,或者人臉識別、車輛識別、機器學習領域等等)進行結合,將非結構化數據轉化為結構化數據,提升數據的價值和使用效率,為AI、機器學習等領域的業務賦能。

MosFS主要解決了機器學習對于高吞吐和低時延的需求問題,在上層利用內存以及SSD等技術來加速數據訪問。同時,結合業務感知能力,為數據做一層高速緩存來保障機器學習的性能。MosFS還可以把計算存儲的本地存盤組成一個分布式的緩存層,加快訓練速度。

面向大數據,杉巖對象存儲通過替換傳統HDFS存儲來降低成本并提高性能,做法是提供兼容HDFS的接口,把HDFS的數據歸集到統一的存儲上,幫助客戶實現非結構化數據跟半結構化數據或者結構化數據的完全統一。

華巖國產化一體機是一款統一存儲產品,這款產品是基于統一存儲產品軟件構建的產品,底層采用國產處理器和國產服務器,對外提供標準的塊存儲以及標準的文件接口和對象接口,滿足復合型的業務要求。目前該產品底層處理器支持華為鯤鵬,飛騰,海光,操作系統采用基于信創的麒麟和統信操作系統。

結語

2020年8月的這次品牌戰略暨新品發布會是杉巖數據第一次正式發布會,高調介紹2EB最大單一存儲集群的項目,高調進行產品發布,這意味著韜光養晦的日子正式告一段落了。
責任編輯:pj

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 數據
    +關注

    關注

    8

    文章

    7257

    瀏覽量

    91937
  • 人臉識別
    +關注

    關注

    77

    文章

    4089

    瀏覽量

    84346
  • 阿里云
    +關注

    關注

    3

    文章

    1014

    瀏覽量

    44217
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    FX3進行讀或寫操作時CS信號拉,在讀或寫完成后CS置,對吞吐量有沒有影響?

    從盡可能提高吞吐量的角度看,在進行讀或寫操作時CS信號拉,在讀或寫完成后CS置,對吞吐量有沒有影響,還是應該CS一直拉比較好。
    發表于 05-08 07:13

    工業級MIFI全棧式解決方案:快速構建可靠、Wi-Fi網絡

    Air8000核心板為例,在工業物聯網場景中快速構建可靠、的Wi-Fi網絡,供終端IoT設備接入。 最新開發資料詳見: www.air8000.cn 一、了解兩種工作模式? ? 在實際使用中
    的頭像 發表于 04-17 13:46 ?325次閱讀
    工業級MIFI全棧式解決方案:快速構建<b class='flag-5'>高</b>可靠、<b class='flag-5'>低</b>時<b class='flag-5'>延</b>Wi-Fi網絡

    **【技術干貨】Nordic nRF54系列芯片:傳感器數據采集與AI機器學習的完美結合**

    和更多外設接口。無論是運行還是休眠狀態,功耗表現都非常出色! 3. 在傳感器數據采集與AI機器學習中的優勢? 答:主頻、功耗,內置專用核
    發表于 04-01 00:00

    憶聯PCle 5.0 SSD助力數據中心TCO優化

    隨著DeepSeek等大模型規模化部署,數據中心承載越來越龐大的數據規模及計算任務,需要強大的基礎設施來支持數據傳輸和通信,對底層存儲系統也提出了更大挑戰:存儲設備不僅要滿足海量
    的頭像 發表于 03-04 16:47 ?625次閱讀
    憶聯PCle 5.0 SSD助力<b class='flag-5'>數據</b>中心TCO優化

    川諧波”獲超3億A輪融資

    和無錫創投集團等多家機構的跟投。 這筆資金將主要用于“川諧波”進一步擴大產能,提升自動化生產水平,以滿足日益增長的客戶需求。此外,公司還將圍繞諧波減速器的底層技術架構進行持續精進,不斷提升產品的核心競爭力。 此前
    的頭像 發表于 01-06 10:49 ?510次閱讀

    傳統機器學習方法和應用指導

    在上一篇文章中,我們介紹機器學習的關鍵概念術語。在本文中,我們會介紹傳統機器學習的基礎知識和多種算法特征,供各位老師選擇。 01 傳統
    的頭像 發表于 12-30 09:16 ?1196次閱讀
    傳統<b class='flag-5'>機器</b><b class='flag-5'>學習</b>方法和應用指導

    【「具身智能機器人系統」閱讀體驗】+數據在具身人工智能中的價值

    數據對于訓練增強和優化機器人能力的深度學習模型至關重要。 從財務上講,用戶數據對互聯網公司具有重要價值,估計每個用戶 600 美元,考慮到
    發表于 12-24 00:33

    什么是機器學習?通過機器學習方法能解決哪些問題?

    計算機系統自身的性能”。事實上,由于“經驗”在計算機系統中主要數據的形式存在,因此機器學習需要設法對數據進行分析
    的頭像 發表于 11-16 01:07 ?970次閱讀
    什么是<b class='flag-5'>機器</b><b class='flag-5'>學習</b>?通過<b class='flag-5'>機器</b><b class='flag-5'>學習</b>方法能解決哪些問題?

    NPU與機器學習算法的關系

    在人工智能領域,機器學習算法是實現智能系統的核心。隨著數據量的激增和算法復雜度的提升,對計算資源的需求也在不斷增長。NPU作為一種專門為深度學習
    的頭像 發表于 11-15 09:19 ?1238次閱讀

    中國移動發布廣域吞吐100Gbps網卡

    10月10日,中國移動研究院透露,在2024中國算力大會的一個分論壇上,中國移動正式推出了其廣域吞吐100Gbps網卡。   據悉,這款網卡基于中國移動自主研發的廣域吞吐協議
    的頭像 發表于 10-12 15:11 ?898次閱讀

    當前主流的大模型對于底層推理芯片提出了哪些挑戰

    隨著大模型時代的到來,AI算力逐漸變成重要的戰略資源,對現有AI芯片也提出了前所未有的挑戰:大算力的需求吞吐量與延時、高效內存管理、能耗等等。
    的頭像 發表于 09-24 16:57 ?1206次閱讀

    物理服務器怎么樣?

    洛杉磯作為美國科技和互聯網的重要中心,物理服務器的質量通常非常,可以提供卓越的性能、強大的安全性、多樣的配置選項和專業的服務支持。以下是對洛物理服務器的詳細介紹。
    的頭像 發表于 08-16 09:58 ?412次閱讀

    【《時間序列與機器學習》閱讀體驗】+ 時間序列的信息提取

    之前對《時間序列與機器學習》一書進行了整體瀏覽,并且非常輕松愉快的完成了第一章的學習,今天開始學習第二章“時間序列的信息提取”。 先粗略的翻閱第二章,內容復雜,充斥
    發表于 08-14 18:00

    【「時間序列與機器學習」閱讀體驗】+ 簡單建議

    這本書以其系統性的框架和深入淺出的講解,為讀者繪制一幅時間序列分析與機器學習融合應用的宏偉藍圖。作者不僅扎實地構建了時間序列分析的基礎知識,更巧妙地展示
    發表于 08-12 11:21

    3GPP R16的主要特點

    移動寬帶)、URLLC(可靠通信)、mMTC(大規模機器通信)三大場景的增強。 垂直行業能力增強:R16標準引入了NPN(非公用網絡)、5G LAN、TSN(時間敏感網絡)等
    發表于 07-24 07:51
    主站蜘蛛池模板: 久久9精品 | 久热国产精品视频 | 国模精品视频一区二区三区 | 欧美一区二区三区大片 | 日本高清中文字幕在线观穿线视频 | 俺去久久 | 欧美日韩国产一区二区三区不卡 | 91桃色国产线观看免费 | 亚洲天天干 | 国产成人精品日本亚洲语音1 | 老师下面好湿好紧好滑好想要 | 一区二区三区无码高清视频 | 色第一页 | 男人j桶进女人免费视频 | 国语自产免费精品视频一区二区 | 国产成人啪午夜精品网站 | 久久99色| 2018天天干天天操 | 人人澡人人澡人人看青草 | 青草99| 加勒比一木道|视频在线看 加勒比在线免费视频 | 丁香月婷婷 | 69色综合| 免费的很黄很色的床小视频 | 唯美久草 | xxxx性xxxx| www亚洲一区 | 亚洲爱爱网 | h视频免费高清在线观看 | 国内一区二区三区精品视频 | 四虎欧美 | 五月丁香六月综合缴清无码 | www.亚洲天堂.com| 日本一区二区三区欧美在线观看 | 免费观看一级特黄三大片视频 | 午夜精品久久久 | 欧美成人免费夜夜黄啪啪 | 狠狠色噜狠狠狠狠色综合久 | 国产小视频免费 | 日韩欧美色图 | 国产毛片精品 |