在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

使用DNA在現實世界中存儲數據

DPVg_AI_era ? 來源:YXQ ? 2019-08-01 15:29 ? 次閱讀

相比傳統的數據儲存方式,DNA存儲具有占用空間小、獲取容易、儲存時間長3大優勢,但也面臨存儲速度慢、花費高的弊端。隨著技術的不斷成熟,它真的能成為主流嗎?

全球每年產生的數據需要4180億個1TB硬盤才能放下,若是把如此龐大的數據放到DNA上,只需 1kg DNA就夠了!DNA存儲才是未來!

幾年前,甚至研究人員也不愿使用DNA來存儲數據,因為這看起來過于科幻,并沒有任何實用價值。今天,我們可以使用正確的軟件和生物化學模塊擴展PostgreSQL,并在DNA上運行SQL。

在這個數據爆炸的時代,全球的數據不僅遠遠超過我們理解數字的能力(比如你知道Zettabytes是多少嗎?)更超過了我們的儲存能力。

一切都是數字化的,一切都越來越多地運行在基于數據訓練算法的應用程序上,而這些算法反過來會產生更多的數據來為更多的下游應用程序和算法提供信息。你懂了吧?

簡單地說,按照這種速度,很快就沒有足夠的數據存儲和計算材料可供使用。這就是為什么人們現在已經開始尋找替代的數據存儲介質的原因。使用DNA來存儲數據,這聽起來很奇怪,實際上很有意義。現在,研究人員取得了突破,使他們能夠將DNA存儲整合到流行的開源數據庫PostgreSQL中。

DNA是如何儲存數據的?

DNA的核心是數據存儲層。DNA由四種堿基組成:腺嘌呤、鳥嘌呤、胞嘧啶和胸腺嘧啶(又名AGCT)。從這四個堿基中,DNA形成由三個核苷酸組成的基團(稱為密碼子)。密碼子是給我們的細胞指示蛋白質形成的單位。

我們的信息技術基礎設施基于以位(bits)為單位的信息存儲(由兩位數字組成:0和1),而DNA信息存儲在四個潛在基本單元的串中。為了將非遺傳信息存儲在DNA中,我們必須首先將二進制數據從位轉換為DNA數據(AGCT)結構。

將Bits轉換為DNA序列

理論部分實際上相當簡單。與使用硅或磁性介質(它們的工作原理是將狀態存儲為1和0的序列)相同,存儲A、G、C和T的序列。但是,這在實踐中是如何工作的呢?如何在DNA中寫入和讀取數據呢?

這聽起來可能有點遙不可及,但分子技術的進步已經使它成為可行——盡管并不完美。

例如,微軟展示了世界上第一個自動DNA數據存儲和檢索系統。如果你想知道這個DNA來自哪里:這是合成DNA,產生它的是系統的一部分。

天然存在的DNA由兩條核苷酸鏈的雙螺旋的形式構成。相反,用于數據存儲的DNA是單鏈核苷酸序列,也稱為寡核苷酸(oligo),它通過化學過程合成,該化學過程一次構建一個核苷酸。

使用DNA在現實世界中存儲數據

倫敦帝國理工學院 SCALE實驗室負責人Heinis和Eurecom數據科學系助理教授Appuswamy 在創新數據系統研究會議上發表了題為“ OligoArchive: Using DNA in the DBMS storage hierarchy ”的研究論文。雖然他們不是第一個使用DNA存儲和檢索數據的人,但他們是第一個使用結構化數據、與現成的數據庫集成、并超越存儲、實現計算的人。

關于DNA作為數據存儲層的第一件事是,每次執行寫操作時,都必須合成寡核苷酸。這將如何在實踐中發揮作用?實驗室技術人員是否必須待命執行此操作,并“重新填充”用于化學過程的原材料?

并非如此,根據Appuswamy和Heinis的說法,這是微軟通過其自動DNA存儲和檢索系統所證明的價值所在。這表明,在沒有人參與的情況下操作這樣一個過程是可能的。就像除了維護,沒有人監督數據中心的日常運作一樣,這同樣適用于基于DNA的數據中心。

盡管如此,我們還遠沒有用合成DNA陣列取代硬盤。首先,以這種方式存儲數據的現代技術非常緩慢。剛開始,科學家們花了一周時間來存儲一兆字節的數據。

Appuswamy和Heinis一致認為,在這方面還需要更多的工作。但這超出了他們自己的研究范圍,所以只能等待生化合成過程進一步提高。

首先,他們注意到存儲速度已經越來越快,目前速度是每秒幾KB。雖然與SSD相比,這仍然非常緩慢,但這是一個很大的進步。對于Appuswamy和Heinis的研究(即歸檔存儲),這實際上是可以接受的。

數據庫引擎使用三層存儲層次結構,由具有不同價格/性能特性的設備組成。性能層存儲高性能OLTP和實時分析應用程序訪問的數據。

容量層存儲由延遲不敏感(latency-insensitive)的批分析應用程序訪問的數據。歸檔層用于存儲很少訪問的數據,例如,在安全合規性檢查或法律審計期間。今天磁帶通常用于這一層。

OligoArchive通過將基于磁帶的歸檔層替換為基于DNA的歸檔層來改變數據庫存儲層次結構。合成DNA的存儲需要額外的措施,對于普通的設備來說,基于DNA的存儲是否有效還值得懷疑。但無論如何,數據和數據庫都將進入云端,只要你的數據安全地存儲在數據中心,對終端用戶來說,這都是一個黑匣子。

在DNA上運行SQL

Appuswamy和Heinis還指出,即使它仍然很慢,DNA存儲提供了很大的并行處理潛力。因為它很豐富、價格低廉 - 或者更確切地說,我們希望它最終會是這樣。按照目前的速度,存儲一分鐘的高質量立體聲將花費100,000美元。

盡管使用合成DNA進行大規模存儲仍然過于昂貴,但Appuswamy和Heinis表示,他們預計成本會下降,這是包括存儲技術在內的每一項科技突破的典型方式。

如果合成寡核苷酸在經濟上變得可行,那么擁有大量的合成寡核苷酸將是一個合理的預期。這意味著許多DNA存儲單元可以并行運行的巨大潛力。雖然不是每種算法的每一個方面都是可并行的,但對于那些算法來說,可以實現極大的加速。這就把我們帶到了一個關鍵點。

直到今天,DNA一直被用于存儲非結構化文件,無論是文本還是視頻,或者其他什么。Appuswamy和Heinis所做的是將DNA存儲整合到關系數據庫中。他們采用了標準數據庫基準測試TPC-H中包含的數據和查詢,并在PostgreSQL實例上運行了TPC-H。不是串行訪問,而是隨意選擇數據。

使用后端的DNA在數據庫系統中存儲結構化數據,并通過SQL查詢,這在今天已成為現實。

研究人員為PostgreSQL構建了歸檔和恢復工具(pg_oligo_dump和pg_oligo_restore),對DNA上的關系數據執行模式感知編碼和解碼,并使用這些工具將12KB TPC-H數據庫歸檔到DNA,執行in-vitro計算,以及再次恢復它。

這是巨大的。這意味著現在DNA存儲還可以支持SQL操作,來有選擇地訪問和處理部分數據。請注意,數據不會被提取到數據庫來執行操作。Appuswamy和Heinis找到了一種方法來處理寡核苷酸中的SQL連接。這超出了生化儲存的范圍——它還需要生物化學計算。

然而,要做到這一點,研究人員必須處理一系列與用于編碼和解碼DNA信息的技術缺陷有關的問題。對DNA進行操作需要專門的編碼技術,這些技術可以產生適合生化操作的寡核苷酸。讀取DNA數據目前非常容易出錯,以前的工作依賴于數據過度表示(over-representation):數據被寫在許多副本中,因此如果原始數據被破壞,備份還在。

相比之下,Appuswamy和Heinis依賴于元數據。他們利用數據庫模式感知,在編寫的塊中添加一些額外的數據位。研究表明,這可以在編碼(寫入)過程中提高密度,并有助于在解碼(讀取)過程中識別錯誤。他們注意到這比預期效果更好。

DNA是數據的未來嗎?

盡管部分技術還不成熟,但這是一個重大突破。擁有足夠的數據中心存儲空間已經成為一個game changer。但是,將像DNA這樣豐富的東西作為一種可行的存儲和計算介質的意義可能會超出我們的想象。

這可能只是朝這個方向邁出的第一步,但每一個旅程都從第一步開始,Appuswamy和Heinis并不是獨行者。

Eurecom,CNRSICL,UCA以及DNA合成初創企業Helixworks已獲得歐盟資助,以進一步開展DNA儲存研究。該系統將被設計成支持數據編碼的全自動循環,將其合成為DNA,并通過序列讀取數據。它將存儲各種不同的數據類型,并在存儲和精確檢索數據時實現近距離數據處理。

將數據存儲在DNA中的進一步研究將由歐盟資助

Appuswamy和Heinis提到,到目前為止,主要是其他研究人員對這個感興趣,至于說公司,微軟似乎比任何公司都表現出了更多的興趣。

掌握這項技術可能意味著擁有未來,因為這一領域的突破將產生巨大的影響。Appuswamy和Heinis指出,這表明了人們的態度:

“幾年前,人們會認為這太離譜了。今天,當我們告訴他們我們正在做什么時,他們會說——多告訴我們一些”。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4492

    瀏覽量

    86993
  • DNA
    DNA
    +關注

    關注

    0

    文章

    244

    瀏覽量

    31392

原文標題:存儲1分鐘聲音花10萬美元,DNA存儲真的有未來嗎?

文章出處:【微信號:AI_era,微信公眾號:新智元】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    RTOS的本地存儲指針使用

    本地存儲指針是RTOS的一個重要特性,增強了任務管理和數據處理能力。RTOS上下文中,本地存儲是指
    的頭像 發表于 02-28 16:33 ?804次閱讀
    RTOS<b class='flag-5'>中</b>的本地<b class='flag-5'>存儲</b>指針使用

    KEPServerEX 數據存儲插件

    好LogGroup之后,Triggers里面記錄條件,設置 “登錄靜態間隔”--否; “在數據更改時記錄”---是 這樣數據就會在變化的時候才會
    的頭像 發表于 02-28 14:47 ?232次閱讀
    KEPServerEX <b class='flag-5'>數據</b><b class='flag-5'>存儲</b>插件

    數據怎么云存儲電腦,數據怎么操作才能云存儲電腦

    怎么操作才能云存儲電腦。 ? ?在數字化時代,云存儲成為了一種高效、靈活的數據管理方式。通過將數據存儲
    的頭像 發表于 01-14 10:10 ?497次閱讀
    <b class='flag-5'>數據</b>怎么云<b class='flag-5'>存儲</b><b class='flag-5'>在</b>電腦,<b class='flag-5'>數據</b>怎么操作才能云<b class='flag-5'>存儲</b><b class='flag-5'>在</b>電腦

    MTP存儲的應用前景

    隨著信息技術的飛速發展,數據量呈爆炸式增長,傳統的存儲方式已經無法滿足日益增長的數據存儲需求。云存儲作為一種新興的
    的頭像 發表于 01-03 10:31 ?418次閱讀

    【「具身智能機器人系統」閱讀體驗】+數據具身人工智能的價值

    嵌入式人工智能(EAI)將人工智能集成到機器人等物理實體,使它們能夠感知、學習環境并與之動態交互。這種能力使此類機器人能夠人類社會中有效地提供商品及服務。 數據是一種貨幣化工具 數據
    發表于 12-24 00:33

    SFTP存儲的應用

    ,并且支持用戶身份驗證。 2. SFTP存儲的應用 2.1 數據安全 存儲環境
    的頭像 發表于 11-13 14:16 ?575次閱讀

    ar與虛擬現實的區別 如何優化ar應用的用戶界面

    可以通過智能手機、平板電腦或專門的AR眼鏡看到現實世界和虛擬信息的結合。AR不會完全取代現實世界,而是增強用戶的現實體驗。 虛擬
    的頭像 發表于 11-11 10:05 ?1173次閱讀

    dp接口虛擬現實的作用

    虛擬現實(VR)技術的發展為用戶帶來了沉浸式的體驗,使得人們能夠以前所未有的方式探索虛擬世界。在這一過程,DP接口(DisplayPort)扮演了至關重要的角色。 一、DP接口簡介
    的頭像 發表于 10-30 14:07 ?727次閱讀

    存儲數據會因為斷電而丟失嗎

    存儲數據是否會因為斷電而丟失,取決于存儲器的類型及其工作原理。深入探討這個問題之前,我們首先需要了解
    的頭像 發表于 09-26 15:23 ?4153次閱讀

    DNA計算機研究取得突破性進展:PB級數據存儲與高效處理

    8月29日,科學界傳來振奮人心的消息,一項革命性的研究成果為實現全功能DNA計算機奠定了堅實基礎。研究團隊成功開發出一種創新技術,該技術不僅能在DNA存儲驚人的PB級
    的頭像 發表于 08-29 16:29 ?790次閱讀

    ram存儲數據斷電后會丟失嗎

    后,存儲RAM數據會丟失。 一、RAM的工作原理 RAM的基本概念 RAM是一種半導體存儲器,由大量的
    的頭像 發表于 08-06 09:19 ?3540次閱讀

    增強現實和虛擬現實的聯系和區別

    信息疊加到現實世界的技術。用戶可以通過頭戴式顯示器、智能手機或平板電腦等設備,看到現實世界與虛擬信息的結合。 虛擬
    的頭像 發表于 07-08 11:00 ?3114次閱讀

    增強現實是虛實結合嗎為什么

    們提供了一種全新的交互方式,使得虛擬世界現實世界之間的界限變得模糊,實現了虛實結合。 增強現實技術是一種將計算機生成的虛擬信息與現實
    的頭像 發表于 07-08 10:58 ?782次閱讀

    XR與AR和VR的區別 如何使用人工智能開發更小、更輕的擴展現實眼鏡

    現實世界中看到虛擬物體,或者虛擬環境感受到現實世界的物體。XR技術包括了AR、VR、MR(M
    的頭像 發表于 07-05 18:23 ?1.4w次閱讀
    XR與AR和VR的區別 如何使用人工智能開發更小、更輕的擴展<b class='flag-5'>現實</b>眼鏡

    虛擬現實技術和增強現實技術區別與聯系

    是一種通過計算機生成的三維環境,使用戶能夠沉浸在一個虛擬世界,實現與虛擬環境的交互。VR技術的核心原理是通過計算機圖形學、傳感器技術、人機交互技術等手段,模擬現實世界的環境和物體,讓
    的頭像 發表于 07-04 11:44 ?3174次閱讀
    主站蜘蛛池模板: 亚洲在线a | 亚洲伊人久久在 | 日韩欧美卡通动漫在线观看 | 91在线免费视频 | 99国产精品农村一级毛片 | 久久婷婷综合中文字幕 | 6月婷婷 | 成 人 免费 黄 色 视频 | 午夜欧美性视频在线播放 | 婷婷色爱区综合五月激情韩国 | 99草视频| 日本不卡视频一区二区三区 | 台湾一级毛片永久免费 | 综合久久99 | 亚洲欧美精品一区二区 | 国产无限资源 | 免费观看a黄一级视频 | 日本一区二区高清免费不卡 | 毛片资源网| 久久国产影视 | www久久久| 中文字幕一区二区三区5566 | 国产成人三级 | 五月天婷婷免费视频观看 | 婷婷在线观看香蕉五月天 | 天天爽夜爽免费精品视频 | 好黄好猛好爽好痛的视频 | 午夜亚洲国产 | 狠狠插天天干 | 欧美xxxxx精品 | 美女网色| 精品精品国产高清a毛片牛牛 | 四虎最新紧急更新地址 | 四级毛片在线播放 | 免费一级特黄特色大片在线 | 亚洲无吗在线视频 | 免费视频国产 | 欲色网站| 国产精品一区二区三区四区五区 | 欧美三级视频在线 | 二级黄绝大片中国免费视频 |