在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

人工智能如何高效地存儲和管理數(shù)據(jù)

姚小熊27 ? 來源:物聯(lián)網(wǎng) ? 作者:物聯(lián)網(wǎng) ? 2020-10-26 16:17 ? 次閱讀

隨著大數(shù)據(jù)的大量來源以及企業(yè)可用數(shù)據(jù)量的增加,存儲容量規(guī)劃已成為存儲管理員的問題。據(jù)估計,每天產(chǎn)生2.5萬億字節(jié)的數(shù)據(jù)。現(xiàn)在,如果以神經(jīng)元計算的話,那就是相當于2.5億個人類大腦的海量數(shù)據(jù)。而且,相同的估計表明,全球總數(shù)據(jù)的90%是從2016年到2018年生成的。

可以簡單地說,每天生成越來越多的數(shù)據(jù),這正增加了存儲工作負載的規(guī)模和復雜性。但是,人工智能可以拯救存儲管理員,幫助他們高效地存儲和管理數(shù)據(jù)。通過使用AI數(shù)據(jù)存儲,供應(yīng)商和企業(yè)可以將存儲管理提升到一個新的水平。而且,存儲管理員可以找到他們目前正在努力管理的指標的解決方案。

存儲管理員需要努力的主要指標

存儲管理員在管理存儲問題時面臨一些挑戰(zhàn)。而且,如果他們克服了這些挑戰(zhàn),將幫助他們在數(shù)據(jù)存儲的各個方面之間找到適當?shù)钠胶猓缭谀睦锓峙涔ぷ髫撦d,如何分配工作負載以及如何優(yōu)化堆棧等等。

一般而言,吞吐量是指處理某事物的速率。在網(wǎng)絡(luò)級別,吞吐量的度量單位是Mbps(兆位/秒),而在存儲級別,吞吐量的度量單位是MB /秒(兆字節(jié)/秒)。由于一個字節(jié)等于八兆位,因此生產(chǎn)率在存儲級別上提高了。并且,變得難以管理提高的生產(chǎn)率。

延時

延遲是服務(wù)器完成請求所花費的時間。關(guān)于存儲,這是指滿足單個存儲塊的請求所花費的時間。存儲塊或塊存儲是將數(shù)據(jù)存儲在卷中的塊。純延遲不受吞吐量影響,但是如果單個塊請求很大,則應(yīng)用延遲可能會隨著吞吐量的增加而偏離。

IOPS(每秒輸入/輸出操作)

IOPS是指存儲堆棧每秒可以處理的離散讀寫任務(wù)的數(shù)量。存儲堆棧是一種允許過程調(diào)用的數(shù)據(jù)結(jié)構(gòu)。這意味著將多個過程彼此存儲在堆棧中,然后在調(diào)用和返回的基礎(chǔ)上一個接一個地執(zhí)行所有過程。例如,如果一個過程被調(diào)用,它將被執(zhí)行,然后返回,以便在堆棧中調(diào)用下一個過程。而且,在談?wù)揑OPS時,基礎(chǔ)輸入/輸出任務(wù)可以達到存儲系統(tǒng)的堆棧限制。例如,讀取一個大文件和多個小文件可能會對IOPS產(chǎn)生影響。由于讀取單個大文件僅需要執(zhí)行一個讀取任務(wù),因此可以以較高的速度執(zhí)行它,而另一方面,讀取多個文件的速度非常慢,因為需要執(zhí)行許多讀取任務(wù)。

AI數(shù)據(jù)存儲如何解決存儲問題

企業(yè)管理員和存儲供應(yīng)商處理各種各樣的存儲類型。而且,它們還滿足不同輸入/輸出服務(wù)的指標。大型文件共享應(yīng)用可能需要適當?shù)耐掏铝浚脖仨氃试S延遲損失,因為大型而復雜的應(yīng)用可能會對延遲產(chǎn)生不利影響。另一方面,電子郵件服務(wù)器可能需要大量存儲,低延遲和良好的吞吐量,但它可能不需要非常苛刻的IOPS配置文件。并且,存儲管理員應(yīng)該決定應(yīng)該為哪些存儲分配什么資源。因此,在組織中運行著成千上萬的服務(wù)時,對基礎(chǔ)存儲的管理超過了人們進行明智更改的能力。而且,這就是AI算法派上用場的地方。

人工智能支持的存儲管理和計劃

AI可以監(jiān)控存儲以檢測多種工作負載的模式和性能。這里的工作負載是由各種輸入/輸出特征或應(yīng)用任務(wù)生成的數(shù)據(jù)流。通過檢測這些工作負載模式,AI可以幫助存儲管理員洞悉哪些工作負載可能使他們面臨最大化存儲陣列的風險。此外,存儲監(jiān)視還可以幫助了解是否有任何額外的工作負載可以放入陣列中。而且,如果添加到陣列中,那么工作負載將造成多少中斷。

例如,假設(shè)一家企業(yè)正在向流程中添加電子郵件服務(wù)器。在這種情況下,人工智能系統(tǒng)可以幫助預測存儲陣列將能夠滿足該服務(wù)器的存儲需求還是將其最大化。借助此類技術(shù),存儲管理員可以主動獲取有關(guān)如何將不同的工作負載分配給不同的存儲堆棧并最大程度地減少延遲的信息。因此,將AI集成到存儲陣列,存儲供應(yīng)商和組織中可以優(yōu)化存儲堆棧。

除了監(jiān)視存儲活動外,存儲管理員還需要檢查和分析存儲系統(tǒng)要使用的應(yīng)用的編碼和錯誤。這有助于他們更好地了解如何圍繞應(yīng)用的需求設(shè)計存儲體系結(jié)構(gòu)。他們通過了解應(yīng)用的輸入/輸出模式來做到這一點。用于執(zhí)行此操作的最常見技術(shù)是捕獲應(yīng)用的跟蹤。

Strace是Linux的用戶空間實用程序,可用于診斷、調(diào)試和獲取有關(guān)輸入和輸出功能的指令。但是,由于復雜的應(yīng)用可以具有多個輸入/輸出功能,因此這對人類來說可能是一個挑戰(zhàn)。另一方面,ML算法可以輕松地提取和分析大量數(shù)據(jù),并解決許多存儲問題,最好是通過查看存儲系統(tǒng)本身來解決。此外,通過使用大量數(shù)據(jù)訓練算法,以了解特定堆棧或整個應(yīng)用如何收集和存儲數(shù)據(jù),它們可以幫助實現(xiàn)對該特定應(yīng)用存儲活動的實時觀察,以防止堆棧最大化并改善存儲容量。

AI數(shù)據(jù)存儲可滿足客戶需求

遙測數(shù)據(jù)是自動記錄和無線傳輸來自遠程或不可訪問來源的數(shù)據(jù)。遙測以下列方式起作用:傳感器在源處測量數(shù)據(jù),它們將其轉(zhuǎn)換為電壓,然后將其與定時數(shù)據(jù)合并為單個數(shù)據(jù)流,該數(shù)據(jù)流將傳輸?shù)竭h程接收器。接收后,可以根據(jù)用戶要求對數(shù)據(jù)進行處理。

AI的計算機視覺技術(shù)可以掃描遙測數(shù)據(jù),以保護存儲陣列免受漏洞侵害。當使用有關(guān)漏洞的歷史數(shù)據(jù)進行訓練時,機器學習算法可以將來自各種應(yīng)用程序的傳入數(shù)據(jù)與歷史數(shù)據(jù)進行匹配,以發(fā)現(xiàn)漏洞的可能性。因此,借助AI的預測分析,存儲供應(yīng)商可以著眼于在遇到客戶之前防止存儲問題。

AI數(shù)據(jù)存儲仍處于起步階段,但已經(jīng)顯示出了驚人的結(jié)果。而且,因此云供應(yīng)商和其他存儲管理員正在對AI進行越來越多的投資,以使用超融合存儲系統(tǒng)進行存儲維護。采用主流AI數(shù)據(jù)存儲肯定會幫助企業(yè)控制上述所有指標,并為其客戶提供更好的服務(wù)。
責任編輯:YYX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 人工智能
    +關(guān)注

    關(guān)注

    1804

    文章

    48599

    瀏覽量

    245929
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    8948

    瀏覽量

    139334
收藏 人收藏

    評論

    相關(guān)推薦
    熱點推薦

    人工智能對智慧園區(qū)的提升和幫助

    隨著人工智能(AI)技術(shù)的快速發(fā)展,其在智慧園區(qū)中的應(yīng)用正逐步改變傳統(tǒng)園區(qū)的管理模式和服務(wù)方式。 智慧園區(qū) 通過整合物聯(lián)網(wǎng)、大數(shù)據(jù)、云計算等技術(shù),實現(xiàn)了資源的高效配置和
    的頭像 發(fā)表于 03-13 14:39 ?237次閱讀

    嵌入式和人工智能究竟是什么關(guān)系?

    應(yīng)用場景。例如,在智能家居領(lǐng)域,嵌入式系統(tǒng)可以控制各種智能設(shè)備,如智能燈泡、智能空調(diào)等,而人工智能則可以實現(xiàn)對這些設(shè)備的
    發(fā)表于 11-14 16:39

    《AI for Science:人工智能驅(qū)動科學創(chuàng)新》第6章人AI與能源科學讀后感

    、優(yōu)化等方面的應(yīng)用有了更清晰的認識。特別是書中提到的基于大數(shù)據(jù)和機器學習的能源管理系統(tǒng),通過實時監(jiān)測和分析能源數(shù)據(jù),實現(xiàn)了能源的高效利用和智能
    發(fā)表于 10-14 09:27

    AI for Science:人工智能驅(qū)動科學創(chuàng)新》第4章-AI與生命科學讀后感

    閱讀這一章后,我深感人工智能與生命科學的結(jié)合正引領(lǐng)著一場前所未有的科學革命,以下是我個人的讀后感: 1. 技術(shù)革新與生命科學進步 這一章詳細闡述了人工智能如何通過其強大的數(shù)據(jù)處理和分析能力,加速生命科學
    發(fā)表于 10-14 09:21

    《AI for Science:人工智能驅(qū)動科學創(chuàng)新》第一章人工智能驅(qū)動的科學創(chuàng)新學習心得

    人工智能:科學研究的加速器 第一章清晰地闡述了人工智能作為科學研究工具的強大功能。通過機器學習、深度學習等先進技術(shù),AI能夠處理和分析海量數(shù)據(jù),發(fā)現(xiàn)傳統(tǒng)方法難以捕捉的模式和規(guī)律。這不僅極大地提高了
    發(fā)表于 10-14 09:12

    risc-v在人工智能圖像處理應(yīng)用前景分析

    RISC-V在人工智能圖像處理領(lǐng)域的應(yīng)用前景十分廣闊,這主要得益于其開源性、靈活性和低功耗等特點。以下是對RISC-V在人工智能圖像處理應(yīng)用前景的詳細分析: 一、RISC-V的基本特點 RISC-V
    發(fā)表于 09-28 11:00

    人工智能ai 數(shù)電 模電 模擬集成電路原理 電路分析

    人工智能ai 數(shù)電 模電 模擬集成電路原理 電路分析 想問下哪些比較容易學 不過好像都是要學的
    發(fā)表于 09-26 15:24

    Samtec 人工智能深度分享 | 如何管理海量數(shù)據(jù)

    讓計算機專注于人工智能任務(wù),我們可以把更多的時間放在人際交往、家庭、旅游以及各種人生冒險經(jīng)歷上。 人工智能還能幫助提高準確性和精確度。擁有一個龐大的數(shù)據(jù)源,可以在幾毫秒內(nèi)快速提取和分析數(shù)據(jù)
    發(fā)表于 09-11 13:40 ?267次閱讀
    Samtec <b class='flag-5'>人工智能</b>深度分享 | 如何<b class='flag-5'>管理</b>海量<b class='flag-5'>數(shù)據(jù)</b>

    人工智能ai4s試讀申請

    目前人工智能在繪畫對話等大模型領(lǐng)域應(yīng)用廣闊,ai4s也是方興未艾。但是如何有效利用ai4s工具助力科研是個需要研究的課題,本書對ai4s基本原理和原則,方法進行描訴,有利于總結(jié)經(jīng)驗,擬按照要求準備相關(guān)體會材料。看能否有助于入門和提高ss
    發(fā)表于 09-09 15:36

    名單公布!【書籍評測活動NO.44】AI for Science:人工智能驅(qū)動科學創(chuàng)新

    大力發(fā)展AI for Science的原因。 第2章從科學研究底層的理論模式與主要困境,以及人工智能三要素(數(shù)據(jù)、算法、算力)出發(fā),對AI for Science的技術(shù)支撐進行解讀。 第3章介紹了在
    發(fā)表于 09-09 13:54

    報名開啟!深圳(國際)通用人工智能大會將啟幕,國內(nèi)外大咖齊聚話AI

    呈現(xiàn)、產(chǎn)業(yè)展覽、技術(shù)交流、學術(shù)論壇于一體的世界級人工智能合作交流平臺。本次大會暨博覽會由工業(yè)和信息化部政府采購中心、廣東省工商聯(lián)、前海合作區(qū)管理局、深圳市工信局等單位指導,深圳市人工智能產(chǎn)業(yè)協(xié)會主辦
    發(fā)表于 08-22 15:00

    FPGA在人工智能中的應(yīng)用有哪些?

    FPGA(現(xiàn)場可編程門陣列)在人工智能領(lǐng)域的應(yīng)用非常廣泛,主要體現(xiàn)在以下幾個方面: 一、深度學習加速 訓練和推理過程加速:FPGA可以用來加速深度學習的訓練和推理過程。由于其高并行性和低延遲特性
    發(fā)表于 07-29 17:05

    西部數(shù)據(jù)發(fā)布AI數(shù)據(jù)周期框架,推動人工智能革新

    人工智能領(lǐng)域持續(xù)革新的今天,西部數(shù)據(jù)公司憑借其深厚的技術(shù)積累,正式發(fā)布了全新的人工智能數(shù)據(jù)周期(AI Data Cycle)框架。這一框架不僅為下一代
    的頭像 發(fā)表于 06-14 17:55 ?1214次閱讀

    人工智能數(shù)據(jù)中心的新型連接解決方案

    (AI)和機器學習(ML)應(yīng)用對復雜計算能力、海量存儲容量和無縫連接提出了前所未有的要求。電子元件之間高速、高效的通信使人工智能數(shù)據(jù)中心能夠計算龐大的
    的頭像 發(fā)表于 06-13 08:26 ?904次閱讀
    <b class='flag-5'>人工智能</b><b class='flag-5'>數(shù)據(jù)</b>中心的新型連接解決方案

    西部數(shù)據(jù)發(fā)布全新人工智能數(shù)據(jù)周期存儲框架,助力用戶發(fā)掘人工智能價值

    公司持續(xù)拓展旗下企業(yè)級SSD和HDD產(chǎn)品組合,應(yīng)對全新人工智能數(shù)據(jù)周期中的關(guān)鍵工作負載 2024年6月7日,上海- 西部數(shù)據(jù)公司(NASDAQ:WDC)于今日正式發(fā)布了人工智能
    的頭像 發(fā)表于 06-11 10:57 ?555次閱讀
    主站蜘蛛池模板: 欧美激情亚洲色图 | 亚洲天堂成人在线 | 美女大黄三级视频在线观看 | 三级精品在线观看 | 久久综合九色 | 久久毛片视频 | 四虎影在线永久免费观看 | 2020天天操 | 757福利影院合集3000 | 8050网午夜| 三级黄页| 日韩伊人网| 亚洲欧美日韩在线观看你懂的 | 婷婷激情小说网 | 国产精品久久久久久久免费大片 | 国产盗摄女子私密保健视频 | 午夜免费一级片 | 亚洲日本中文字幕天天更新 | 男人j进入女人j视频大全 | 国产一级大片免费看 | 久久97精品久久久久久久看片 | 国内真实实拍伦视频在线观看 | 天天影院网 | 色九| 欧美黄色片视频 | 丁香婷婷九月 | 性夜影院爽黄e爽在线观看 羞羞色院91精品网站 | 天天干天天插天天操 | 色骚网| 青青热久久国产久精品秒播 | 九九精品国产 | 99久久婷婷国产综合精品电影 | 国产高清毛片 | 任你操免费视频 | 热99精品视频 | 成人欧美一区二区三区的电影 | 久久婷婷婷 | 五月天婷婷精品视频 | 午夜色综合| 五月天男人的天堂 | 三级毛片在线免费观看 |