麻省理工學院CSAIL將人工智能中的視覺和觸覺結合起來
我們已經向人類層面的智慧邁進了一步。圖像識別技術和觸覺傳感器正在相互結合，以提高它們的能力。麻省理工學院計算機科學與人工智能實驗室(CSAIL)創建了一個觸覺和視覺信息數據庫，并利用它來訓練人工智能系統來推斷物體的外觀和感覺。
圖：李云珠，麻省理工學院CSAIL的博士生，領導了這個項目。
與麻省理工學院CSAIL的大多數項目一樣，這一系統仍處于早期研究階段，但通過將這兩種“感官”聯系起來，從數字角度看，團隊可能為人工智能提供了一種新的體驗世界的方式。這一突破可能會帶來更加敏感和實用的機器人手臂，可以改善任何數量微妙或任務關鍵的操作。它還保證在能夠像我們這樣理解、或至少可以理解世界的人工智能系統的發展中，會有更多的進展。
感覺與感性
通過一個簡單的攝像頭，這個研究小組負責人李云珠（中國科學院博士生，主要論文作者）在這個系統上，建立了200多個每天被觸摸超過12，000次的對象的數據集。然后，他們將12，000段視頻剪輯壓縮成靜態幀，并使用這些片段來編譯“VisGel”，這是一個包含300多萬個視覺/觸覺配對圖像的數據集。利用該數據集，研究小組訓練了一個人工智能模型，根據周圍區域的視覺數據預測物體的感覺，并使用KUKA機器人手臂與GelSight觸覺傳感器配對獲得相應的觸覺信息。例如，研究小組將在電腦鼠標上輸入某一點的系統圖像，而人工智能將使用生成的對抗性網絡(GAN)構建該地區的觸覺地圖。
GAN使用一對網絡來相互競爭并改進它們的輸出：一個生成器網絡，它為鑒別器網絡編譯一個圖像(或者一個觸覺圖)，以測試和比較真實（或ground truth）數據。然后，研究小組將把GAN生產的模型與KUKA機器人手臂獲取的觸覺數據進行比較，再一次對照可測量的“ground truth”。該系統也可以反過來工作，使用觸覺傳感器數據創建一個圖像預測對象上的某個點可能是什么樣子。這些圖像也將在GAN中運行，并將最后一次與ground truth圖像進行比較，以檢驗模型輸出的有效性。
靈巧數字
聲明：本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人，不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用，如有內容侵權或者其他違規問題，請聯系本站處理。
舉報投訴
-
麻省理工學院
+關注
關注
0文章
12瀏覽量
6928 -
CSAIL
+關注
關注
0文章
1瀏覽量
1563
發布評論請先 登錄
相關推薦
熱點推薦
Wolfspeed與紐約州立大學理工學院加強教育研究合作
紐約州立大學理工學院（SUNY Poly）在 近日舉行的新聞發布會上宣布，任命兩名教職人員為 Wolfspeed 捐贈講席教授（Wolfspeed Endowed Chairs），標志著該校研究擴展的重要里程碑。
突破麻省理工學院技術壟斷，深圳傳感器公司帶來全新機器人觸覺傳感器技術
近日 戴盟機器人CEO段江嘩 赴亞特蘭大參加 2025 IEEE國際機器人 與自動化大會（ICRA 2025） 顧不上時差帶來的疲憊感 他一下飛機 就投入到籌備工作中 在這次海外首秀上 這家深企帶來
偉創力與麻省理工學院 (MIT) 就其全新的“新制造倡議”(INM) 達成戰略合作
行業巨擘+全球頂級學府? 近日，偉創力與 麻省理工學院? (MIT) 就其 全新的“新制造倡議”(INM) 達成戰略合作 。作為INM行業聯盟的 創始成員 ，偉創力將在這一項目中與MIT的研究人員
麻省理工學院香港校友會代表團到訪華沿機器人
近日，麻省理工學院香港校友會（MIT Club of Hong Kong）代表團40余人到訪華沿機器人總部，通過展廳參觀、技術交流與座談研討，深入了解國產機器人產業發展現狀，并就“機器人+人工智能”的融合發展趨勢展開深度對話。華沿機器人CEO王光能及相關人員出席。
美國加州理工學院：研究量子傳感技術可實現粒子時空高精度探測
? 據美國加州理工學院官網近日消息，由美國、瑞士、委內瑞拉等國組成的聯合團隊研發出了基于量子傳感技術的超導微線單光子探測器（SMSPDs），可實現粒子物理實驗中的時空同步高精度追蹤。目前該成果已在
佐治亞理工學院：毛囊級傳感器！研發可運動無感佩戴的AR控制傳感器
? 佐治亞理工學院的研究人員開發了一種幾乎難以察覺的微結構大腦傳感器,有望使腦機接口（BCI）技術真正融入日常生活。 傳統BCI系統依賴貼附在頭皮上的電極和凝膠，存在設備龐大、使用不適等問題，而侵入
華為智能微模塊助力沈陽工學院打造智慧教育新生態
智能浪潮奔涌而至，人工智能大模型正深刻重塑教育行業的未來圖景。沈陽工學院，作為全國首批部署DeepSeek大模型的高校，攜手華為數字能源，以FusionModule2000智能微模塊6
江蘇理工學院蒞臨漢得利BESTAR公司考察交流
2025年2月20日下午，江蘇理工學院電氣信息工程學院副院長陶為戈、王琪，管理學院教授謝德兵以及電氣信息工程學院梁寶博士等學術代表團蒞臨漢得利BESTAR公司考察交流。校企雙方圍繞技術
魔角石墨烯，超流剛度首次測得
美國麻省理工學院和哈佛大學的物理學家首次在“魔角”石墨烯中直接測量了超流剛度。超流剛度是衡量材料超導性的一個關鍵指標。這是科學家首次在二維材料中直接測得超流剛度，意味著人們朝著理解這種材料的非凡特性
麻省理工學院研發全新納米級3D晶體管,突破性能極限
11月7日，有報道稱，美國麻省理工學院的研究團隊利用超薄半導體材料，成功開發出一種前所未有的納米級3D晶體管。這款晶體管被譽為迄今為止最小的3D晶體管，其性能與功能不僅與現有的硅基晶體管相當，甚至在某些方面還超越了后者。
麻省理工學院推出新型機器人訓練模型
近日，據TechCrunch報道，麻省理工學院的研究團隊展示了一種創新的機器人訓練模型，該模型突破了傳統模仿學習方法的局限，不再依賴標準數據集，而是借鑒了大型語言模型（LLM）如GPT-4等所使用的大規模信息處理方式，為機器人學習新技能開辟了全新的道路。
VILA與其他模型在提供邊緣AI 2.0方面的表現
VILA 是 NVIDIA 研究部門與麻省理工學院共同開發的高性能視覺語言模型系列。最大的模型約有 400 億參數，最小的模型約有 30 億參數，并且完全開源（包括模型檢查點、訓練代碼和訓練數據）。
美國老化電網已無法負荷AI計算
外媒《華盛頓郵報》刊發的美國麻省理工學院學者丹妮拉·魯斯與前美國能源部分析學者尼科·恩里克斯聯合署名文章，表達了對于美國老化電網已無法負荷AI計算的擔心。 文章稱因為AI的爆發使得人工智能系統耗電量
美國佐治亞理工學院一行蒞臨達實智能調研
近日，美國佐治亞理工學院“聚焦數據科學領域·深度探訪粵港澳大灣區”學生代表團來深交流。美國佐治亞理工學院(Georgia Institute of Technology)一行探訪了大灣區科技企業代表達實智能。
貴州理工學院采購南京大展的DZ-STA200同步熱分析儀
理工學院采購了南京大展的DZ-STA200同步熱分析儀，就是客戶對于我們品牌產品的認可。DZ-STA200同步熱分析儀作為集熱重分析（TG）與差示掃描量熱分析（DSC）
工商網監
評論