在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

對象存儲中的五個要素

電子工程師 ? 來源:開源云中文社區 ? 作者:開源云中文社區 ? 2019-11-11 14:30 ? 次閱讀

一般來說,當人們考慮對象存儲時,只考慮一件事——每TB/GB的價格。盡管這是一個不錯的成本指標,但它的作用是使對象存儲一維化,并將其降級為存檔用例。此外,它扭曲了企業技術堆棧中這一日益重要的部分的價值。

坦率地說,這應該歸咎于傳統對象存儲廠商。多年來,它們在技術方面創新不足,轉而提供更便宜的產品。它們還會說這就是顧客想要的,但它們錯了。

AWS去年收入達250億美元可作為證據——其中絕大多數是高性能的主要對象存儲。如果我們保守地將S3存儲服務的規模算為200億美元,可以說,S3的規模是其他廠商的總和。再加上價格相似、增長迅速的Azure Blob和Google Cloud,情況就明朗了——成本只是一個考慮因素。

這就是為什么現代企業關注的是更廣泛的一系列指標——強調性能、運維效率、靈活性和價格的指標,而不僅僅是價格。他們認識到將數據放在“冰上”會降低其價值。在目標是最大化組織數據的價值的時候,供應商的方法似乎與之背道而馳。

企業應該考慮什么?這分為五大類:性能、可擴展性、S3兼容性、故障響應、一致性。成本之外,這五個要素定義了對象存儲中的新指標。

性能

傳統上,對象存儲并不以性能著稱。在價格競爭中,廠商不斷犧牲性能。現代對象存儲改變了這一點。

從Amazon到Minio,我們都看到了接近甚至超過Hadoop的速度。新的對象存儲指標涉及到讀寫速度(HDD為10GB/s,NVMe為35+GB/s)。對于Spark、Presto、TensorflowTeradata、Vertica、Splunk和分析堆棧中的其他現代計算框架來說,這種吞吐量非常快。MPP數據庫以對象存儲為目標這一事實證明,對象存儲越來越成為主要存儲。

如果對象存儲系統無法提供這些速度,則無法與所有數據交互,也無法從中提取價值。即使你將數據從傳統對象存儲中提取到內存中的處理框架中,你仍然需要吞吐量來將數據往返于該內存中——你根本無法從傳統對象設備獲得這樣的吞吐量。

這是一個關鍵點。新的性能指標是吞吐量,而不是延遲。這是大規模數據所需要的——這是現代數據基礎設施中的一個標準。

應該注意的是,雖然性能基準是一個很好的代理,但是只有在該環境中運行了特定的應用程序之后,才能真正知道性能是什么樣子的。只有這樣,它們才能理解瓶頸到底是什么,是存儲軟件、驅動器、網絡還是計算層。

可伸縮性

可伸縮性通常指一個命名空間中的PB數。每個供應商都聲稱zeta規模,但隱藏了這樣一個事實:隨著規模的擴大,龐大的、單體的系統變得脆弱、復雜、不穩定和昂貴。

可伸縮性的新指標是你可以處理多少個不同的命名空間或租戶。

這個指標是直接從hyper-scaler中獲取的,其中,構建塊很小,但可以擴展到數十億個。簡而言之,這是云原生的方式。

當構建塊很小時,一切都可以更有效地理解和優化——安全性、訪問控制、策略管理、生命周期管理、無中斷升級和更新以及最終的性能。構建塊的大小是故障域可管理性的函數。這就是高彈性系統的架構。

多租戶在現代企業中具有多個維度。當然,它指的是企業如何組織對數據和應用程序的訪問,它也指應用程序本身以及它們在邏輯上如何相互隔離。

現代多租戶方法具有以下特點:

——租戶可以在短時間內從幾百個發展到幾百萬個。

——租戶之間完全隔離,使它們能夠運行具有不同配置、權限、功能、安全性和服務級別的同一對象存儲軟件的不同版本。當擴展新服務器、更新和地理位置時,這是一個實際的運維問題。

——有彈性和按需。

——每個操作都是API驅動的,自動化的,沒有人看儀表板。

——軟件足夠輕量,可以進行容器化,并利用Kubernetes等行業標準的編排服務。

S3兼容性

Amazon S3 API是對象存儲的事實標準,以至于每個對象存儲軟件供應商都聲稱與之兼容。也就是說,AWS S3的兼容性實際上是二元的。S3兼容性的指標是1。

這意味著,有成百上千的“角落”用例并沒有如你所愿發生。這對專有軟件或設備供應商來說尤其具有挑戰性。原因是,它們的大多數用例都是直接存檔或備份,因此API調用的多樣性很低,而且用例非常同質。顯然,這是一個開源軟件具有顯著優勢的領域。考慮到應用程序、操作系統和硬件架構的大小和多樣性,足以覆蓋大多數“角落”用例。

對應用程序創建者來說,這很重要。你需要測試應用程序。開源使評估供應商聲明和確定平臺對應用程序性能的影響變得容易。如果你的供應商足夠好,可以作為一個門戶,并被其他人作為一個門戶,那么你可以有信心,它能滿足你的需要。關于開源和S3的最后一點是,開源意味著企業避免了供應商鎖定,提高了透明度。

關于S3兼容,如果你正在運行大數據應用程序,S3 SELECT通過用SQL從對象存儲中只提取所需的內容,可以大大提高性能和效率。

另外,對bucket通知的支持也是關鍵。bucket通知有助于無服務器計算——這是任何基于微服務的功能即服務中的關鍵組件。假設對象存儲是云中存儲的事實標準,那么當將對象服務器公開給云原生應用程序時,此功能是必須的。

最后,S3實現需要支持Amazon S3服務器端加密API(SSE-C、SSE-S3、SSE-KMS)。更棒的是,它應該支持可證明足夠安全的防篡改。

故障

在對象存儲中,最容易被忽略的指標可能是系統如何處理故障。故障會發生,有多種形式。對象存儲系統需要優雅地處理所有這些問題。

例如,如果存在單點故障,那么這個指標是零。

不幸的是,許多對象存儲系統將使用“特殊”節點,這些節點必須啟動才能使集群正常工作。其中包括名稱節點或元數據服務器。這就會造成單點故障。

即使有多個故障點,承受災難性失敗的能力也是至關重要的。驅動器會出現故障,服務器會壞。關鍵是采用將故障視為正常情況的軟件。這意味著,當磁盤或節點關閉時,軟件可以不受影響地繼續運行。

inline erasure coding和bitrot protection帶來的革命確保在軟件返回數據之前,你可以丟失與奇偶校驗塊一樣多的磁盤或節點(這通常是驅動器的一半)。

故障很少大規模測試,但應該是強制性的。模擬負載下的故障將提供故障總成本(數據丟失、時間和技能)的準確消息。

一致性

一致性的指標是100%。一致性是任何存儲系統中的一個關鍵組件,但嚴格的一致性很少。例如,Amazon S3 ListObject不是嚴格一致的,它只是最終一致的。

嚴格一致性是什么意思?對于確認的PUT操作之后的所有操作,必須保持以下狀態:更新的值在從任何節點讀取時都可見;更新帶有冗余,免受節點故障的影響。

這意味著,如果在寫入過程中拔出插頭,不會丟失任何內容。結果是系統永遠不會返回損壞或過時的數據。這是一個很高的標準,對交易型應用程序到備份和恢復用例都有影響。

結論

這些是對象存儲中的新指標,反映了現代企業的使用模式,其中性能、一致性、可伸縮性、故障域和S3兼容性是云原生應用程序和大數據分析的基礎。在構建現代數據堆棧時,除了考慮成本之外,別忘了這幾個指標。

責任編輯:zl

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 驅動器
    +關注

    關注

    54

    文章

    8497

    瀏覽量

    148642
  • 存儲
    +關注

    關注

    13

    文章

    4473

    瀏覽量

    86932
  • API
    API
    +關注

    關注

    2

    文章

    1556

    瀏覽量

    63334
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    SMT貼片加工的那些關鍵要素,你了解嗎?

    一站式PCBA智造廠家今天為大家講講SMT貼片加工流程的關鍵要素有哪些?SMT貼片加工流程的關鍵要素。隨著電子產品日益小型化、輕量化的發展趨勢,SMT貼片加工作為電子制造
    的頭像 發表于 04-01 09:46 ?200次閱讀

    軟國際推出基于DeepSeek的數據要素保障基地平臺

    為深度盤活數據資源、釋放數據要素的價值,推動數據要素市場的健康發展,軟國際依托深厚行業積累,推出了以DeepSeek深度賦能的數據要素保障基地平臺, 作為推動數據資源化、資產化、資本
    的頭像 發表于 03-03 17:16 ?422次閱讀

    RTOS的本地存儲指針使用

    本地存儲指針是RTOS的一重要特性,增強了任務管理和數據處理能力。在RTOS上下文中,本地存儲是指存儲在本地的特定任務或
    的頭像 發表于 02-28 16:33 ?779次閱讀
    RTOS<b class='flag-5'>中</b>的本地<b class='flag-5'>存儲</b>指針使用

    存儲控電腦,云存儲控電腦如何實現文件同步?

    煩惱,一切都變得如此簡單和高效。今天小編給大家分享云存儲控電腦如何實現文件同步。 ? ?云存儲控電腦實現文件同步的步驟如下: ? ?1.選擇云
    的頭像 發表于 02-10 11:19 ?253次閱讀
    云<b class='flag-5'>存儲</b><b class='flag-5'>中</b>控電腦,云<b class='flag-5'>存儲</b><b class='flag-5'>中</b>控電腦如何實現文件同步?

    對象存儲是什么結構類型?

    對象存儲屬于非結構化數據存儲架構,采用扁平化命名空間結構。其核心通過唯一標識符(ObjectID)定位數據對象,突破傳統文件系統的層級目錄限制,形成"桶-
    的頭像 發表于 02-10 11:14 ?220次閱讀

    HPC工作負載管理的關鍵要素

    HPC工作負載管理是一復雜而精細的過程,涉及資源分配、作業調度、性能監控與優化以及故障處理與恢復等多個關鍵要素。下面,AI部落小編帶您了解HPC工作負載管理的關鍵要素
    的頭像 發表于 02-08 09:53 ?231次閱讀

    PCB的基本要素

    網絡。同時PCB板還具有絕緣,隔熱,防潮等功能。 3、PCB的基本要素用 01 要素一:載板 PCB的載板又稱為基
    的頭像 發表于 01-07 09:30 ?922次閱讀

    為什么選不中PCB上的對象

    圖就是一封裝的“鎖定”屬性: “鎖定”用來確保對象不會被誤操作修改,所以被“鎖定”的du當然輕易是選不中的(默認情況)!對于PCB已經完全布局、布線且不希望被改動的對象,就可以進行
    的頭像 發表于 11-12 12:23 ?2139次閱讀
    為什么選不中PCB上的<b class='flag-5'>對象</b>?

    關于對象存儲和云硬盤區別,你了解多少?

    掛載到云服務器上使用,適合高性能、低延遲的數據庫和文件系統存儲。選擇哪種方案應根據具體業務需求和數據類型決定。UU云小編將從定義特點、使用方式與共享、存儲與訪問特性、應用場景等四方面對對象
    的頭像 發表于 11-01 10:57 ?391次閱讀

    Jtti:云存儲網關的定義及用例

    存儲網關,也稱為邊緣文件服務器,是一種混合云存儲設備,可將本地網絡連接到一或多個云存儲服務,通常是對象
    的頭像 發表于 10-30 16:11 ?430次閱讀

    oss對象存儲費用是多少一年?#費用 #對象存儲

    存儲
    jf_57681485
    發布于 :2024年10月15日 15:38:19

    機械振動的三基本要素

    機械振動是物體或質點在其平衡位置附近進行的往復運動。在物理學,機械振動是一種非常普遍的現象,它涉及到許多不同的物理過程和應用。機械振動的三基本要素是:振幅、周期和頻率。 1. 振幅
    的頭像 發表于 09-26 14:55 ?1858次閱讀

    基于分布式對象存儲WDS的信托非結構化數據整合平臺

    基于分布式對象存儲WDS的信托非結構化數據整合平臺
    的頭像 發表于 08-28 09:56 ?556次閱讀
    基于分布式<b class='flag-5'>對象</b><b class='flag-5'>存儲</b>WDS的信托非結構化數據整合平臺

    基于DPU的Ceph存儲解決方案

    1. 方案背景和挑戰 Ceph是一高度可擴展、高性能的開源分布式存儲系統,設計用于提供優秀的對象存儲、塊存儲和文件
    的頭像 發表于 07-15 13:44 ?1575次閱讀
    基于DPU的Ceph<b class='flag-5'>存儲</b>解決方案

    撤回!京電子終止向特定對象發行股票事項

    近日,京電子(002579.SZ)發布公告,公司召開了第屆董事會第二十三次會議及第屆監事會第十八次會議,審議通過了 《關于終止向特定對象發行股票事項并撤回申請文件的議案》,同意公
    的頭像 發表于 05-23 14:28 ?690次閱讀
    撤回!<b class='flag-5'>中</b>京電子終止向特定<b class='flag-5'>對象</b>發行股票事項
    主站蜘蛛池模板: 成年人啪啪网站 | 日本a级精品一区二区三区 日本a级特黄三级三级三级 | 亚色中文字幕 | www.操你啦| 中文字幕在线看视频一区二区三区 | 欧美午夜精品一区二区三区 | 性欧美高清极品猛交 | 午夜伦y4480影院中文字幕 | 最近在线视频免费观看2019 | 国产男女交性视频播放免费bd | 丁香婷婷色 | 99亚洲精品卡2卡三卡4卡2卡 | 综合网激情五月 | 你懂的免费在线视频 | 午夜视频网| 一级片一级片一级片 | 免费看污黄视频软件 | 性中国videosex国产孕妇 | 97成人免费视频 | 成人国产一区二区 | 久久这里只精品热在线8 | 免费高清成人啪啪网站 | 免费的三级网站 | 夜间免费小视频 | 91精品欧美激情在线播放 | 日韩视频 中文字幕 视频一区 | 日韩亚洲欧洲在线rrrr片 | 欧美美女福利视频 | 免费观看三级毛片 | 欧美在线精品一区二区三区 | 一级看片 | 天天天天射 | 我想看一级黄色片 | 就要爱综合| 精品久久香蕉国产线看观看亚洲 | 欲色视频| bt种子天堂 | 欧美性色视频 | 91亚色视频在线观看 | 日本黄色片段 | 欧美人与zoxxxx另类9 |