在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

使用NVIDIA Isaac Manipulator生成抓取姿勢和機器人運動

NVIDIA英偉達企業(yè)解決方案 ? 來源:NVIDIA英偉達企業(yè)解決方案 ? 2024-05-17 10:33 ? 次閱讀

NVIDIA 宣布與 Intrinsic.ai工業(yè)機器人任務的基礎技能模型學習展開合作。

工業(yè)制造中的許多拾取和放置問題仍然由人類操作員解決,為這些任務而編程機器人仍具有挑戰(zhàn)性。例如,在機器維護環(huán)境中,作為復雜的多步驟零件制造過程的一部分,協(xié)作機器人可以用來從料倉中挑選原材料零件,并將其送入數(shù)控機床或彎曲機。

這類機器人可以使用基礎模型進行編程,從而實現(xiàn)基礎模型在物體零件、機器人形態(tài)和現(xiàn)實世界的工業(yè)環(huán)境等方面顯著的通用性。

本文介紹了使用 NVIDIA Isaac Manipulator 生成抓取姿勢和機器人運動的工作流,首先在NVIDIA Isaac Sim中進行仿真,然后在現(xiàn)實世界中使用 Intrinsic Flowstate 執(zhí)行。

感知也是通過 Flowstate 完成的,在 Flowstate 中,我們使用對象姿態(tài)估計包來獲得雜亂場景中可抓取對象的位置和方向。

在本文中,我們在一個具有挑戰(zhàn)性的智能取放應用程序上演示了該系統(tǒng):一個機器人在雜亂的垃圾箱中抓取金屬零件,并以精確的放置姿勢將其區(qū)分。這些薄金屬片本身很難被感知,因為一般的深度相機難以處理鏡面,同時操作也有難度,因為需要使用吸盤夾具而不是手指。

用于抓取和運動生成的Isaac Manipulator

為了生成真空抓取的合成數(shù)據(jù),我們使用了金屬片和吸盤的 CAD 模型。在仿真過程中,我們針對每個物體嘗試數(shù)千種抓取方式,并找到最優(yōu)的解決方案。

良好的吸盤需要密封并避免金屬板上出現(xiàn)的孔洞,我們還想避免金屬板在運輸過程中的晃動,這也是在仿真中需要確保的。

7f055768-1380-11ef-b74b-92fbcf53809c.gif

圖 1. Isaac Sim 中的抓握示例

在生成了一組密集的抓取姿勢后,我們使用物體姿勢信息將其轉換為機器人框架。然后,我們使用CUDA 加速運動生成庫 NVIDIA cuMotion(由 cuRobo 提供支持)生成無碰撞軌跡,以移動機器人并實現(xiàn)其中一個目標抓取姿勢。

其中一些姿勢可能在運動學上無法實現(xiàn),或者可能會發(fā)生碰撞,cuRobo 在規(guī)劃軌跡時會對這兩種情況進行過濾。作為參考,cuRobo 可以在 NVIDIA RTX 40 系列顯卡上快速生成運動計劃,僅需 30 毫秒。

在 Isaac Sim 中進行評估

我們首先在 Isaac Sim 中評估了工作流。仿真機器人來自配備有吸盤的定制 Kuka K10 機械臂的 CAD 文件。物體被隨機定位,以仿真現(xiàn)實世界中的垃圾箱揀選場景。

我們沒有使用物體檢測器,而是直接從仿真器中獲取物體姿態(tài)信息。我們利用了有關物體類型的地面實況信息,根據(jù)物體的初始姿態(tài)確定最佳可觸及抓手。

利用 Intrinsic Flowstate在現(xiàn)實世界執(zhí)行

我們的工作流直接從仿真轉移到現(xiàn)實世界中的工作單元。實際的硬件設置包括一個外部校準的頂置多攝像頭系統(tǒng)和一個配備吸盤的 Kuka K10 機械臂。

使用 Intrinsic Flowstate 中的原生對象姿態(tài)估計包來檢測片狀金屬物體的位置。然后,使用 Isaac Manipulator 來計算對象的抓取位置,并計劃一個無碰撞的軌跡來執(zhí)行抓取任務。

最后,我們通過 Flowstate 中的位置控制器在機械臂上執(zhí)行該機器人軌跡。總的來說,在演示中實現(xiàn)了大約 8 秒/次拾取的循環(huán)時間。

展望未來

我們計劃將框架擴展到更高級的智能拾放功能,例如機器維修。在這個例子中,機器人必須將抓取的物體精確地放置在某個位置或固定裝置上,以便機器進行下游處理。

審核編輯:劉清
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 控制器
    +關注

    關注

    112

    文章

    16464

    瀏覽量

    179612
  • NVIDIA
    +關注

    關注

    14

    文章

    5079

    瀏覽量

    103822
  • 仿真器
    +關注

    關注

    14

    文章

    1019

    瀏覽量

    83960
  • 工業(yè)機器人

    關注

    91

    文章

    3376

    瀏覽量

    92919

原文標題:利用 Intrinsic Flowstate 和 NVIDIA Isaac Manipulator 實現(xiàn)智能取放自動化

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業(yè)解決方案】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    簡述NVIDIA Isaac的重要更新

    在 2025 CES,NVIDIA 宣布了對NVIDIA Isaac的重要更新。NVIDIA Isaac 是一個由加速庫、應用框架和 AI
    的頭像 發(fā)表于 01-17 09:57 ?167次閱讀
    簡述<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b>的重要更新

    NVIDIA發(fā)布Isaac GR00T Blueprint,加速人形機器人開發(fā)

    NVIDIA創(chuàng)始兼首席執(zhí)行官黃仁勛親自揭曉了NVIDIA Isaac GR00T Blueprint的發(fā)布。這一Blueprint旨在加速下一代人形
    的頭像 發(fā)表于 01-13 11:01 ?414次閱讀

    NVIDIA發(fā)布人形機器人重磅更新!Isaac GR00T Blueprint厲害在哪?

    電子發(fā)燒友網(wǎng)報道(文/吳子鵬)在備受矚目的CES 2025上,NVIDIA機器人領域宣布了重磅更新——Isaac GR00T Blueprint,幫助開發(fā)者更高效、高質(zhì)量地打造人形機器人
    的頭像 發(fā)表于 01-08 18:14 ?3336次閱讀
    <b class='flag-5'>NVIDIA</b>發(fā)布人形<b class='flag-5'>機器人</b>重磅更新!<b class='flag-5'>Isaac</b> GR00T Blueprint厲害在哪?

    堅米智能借助NVIDIA Isaac Lab加速四足機器人開發(fā)

    堅米智能(中堅科技)借助NVIDIA Isaac Lab平臺,通過NVIDIA Isaac Sim的 3D 生成與建模技術構建高度逼真的虛擬
    的頭像 發(fā)表于 12-29 14:01 ?254次閱讀

    利用NVIDIA Isaac平臺構建、設計并部署機器人應用

    機器人在智能制造設施、商業(yè)廚房、醫(yī)院、倉庫物流和農(nóng)業(yè)領域等不同環(huán)境中的應用正在迅速擴展。該行業(yè)正在向智能自動化轉變,這需要增強的機器人功能來執(zhí)行感知、地圖構建、導航、負載處理、物體抓取和復雜的裝配
    的頭像 發(fā)表于 11-09 11:41 ?944次閱讀
    利用<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b>平臺構建、設計并部署<b class='flag-5'>機器人</b>應用

    NVIDIA助力Figure發(fā)布新一代對話式人形機器人

    該初創(chuàng)公司展示了新型機器人,其使用 NVIDIA Isaac Sim 處理合成數(shù)據(jù),并使用基于 NVIDIA 加速計算進行實時推理訓練的生成
    的頭像 發(fā)表于 11-04 10:10 ?322次閱讀

    NVIDIA 加速人形機器人發(fā)展

    開發(fā)者可以訪問新的 NVIDIA NIM 微服務,用于 Isaac Lab 和 Isaac Sim 中的機器人仿真、OSMO 機器人云計算編
    發(fā)表于 07-30 09:15 ?802次閱讀
    <b class='flag-5'>NVIDIA</b> 加速人形<b class='flag-5'>機器人</b>發(fā)展

    逐際動力攜手英偉達Isaac平臺, 助力通用機器人研發(fā)

    在近日舉行的年度計算機視覺與模式識別會議(CVPR)上,英偉達發(fā)布了其最新版本的NVIDIA Isaac Sim。與此同時,逐際動力也宣布將采用這一升級版的Isaac平臺,以強化學習和提升通用
    的頭像 發(fā)表于 06-21 09:34 ?2484次閱讀

    NVIDIA Isaac 機器人平臺利用最新的生成式 AI 和先進的仿真技術,加速 AI 機器人技術的發(fā)展

    NVIDIA 發(fā)布了 Isaac ManipulatorIsaac Perceptor 等一系列基礎模型、機器人工具和 GPU 加速庫
    的頭像 發(fā)表于 06-04 18:00 ?7790次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>機器人</b>平臺利用最新的<b class='flag-5'>生成</b>式 AI 和先進的仿真技術,加速 AI <b class='flag-5'>機器人</b>技術的發(fā)展

    全球機器人開發(fā)領域采用NVIDIA 機器人開發(fā)和生產(chǎn)

    比亞迪電子、西門子、泰瑞達和 Alphabet 旗下公司 Intrinsic 采用 NVIDIA Isaac 機器人平臺開發(fā)自主機械臂、人形機器人和移動
    的頭像 發(fā)表于 06-03 18:25 ?1340次閱讀

    NVIDIA Isaac Manipulator助力讓下一代機器人技術觸手可及

    兩家公司在芝加哥 Automate 展會上宣布將圍繞 NVIDIA AI、Isaac Manipulator 和 Intrinsic 平臺的使用展開合作。
    的頭像 發(fā)表于 05-13 14:15 ?939次閱讀

    NVIDIA攜手Alphabet旗下Intrinsic讓下一代機器人技術觸手可及

    兩家公司在芝加哥 Automate 展會上宣布將圍繞 NVIDIA AI、Isaac Manipulator 和 Intrinsic 平臺的使用展開合作。
    的頭像 發(fā)表于 05-11 09:38 ?734次閱讀

    NVIDIA Isaac機器人平臺升級,加速AI機器人技術革新

    NVIDIA Isaac機器人平臺近期實現(xiàn)重大升級,通過引入最新的生成式AI技術和先進的仿真技術,顯著加速了AI機器人技術的發(fā)展步伐。該平臺
    的頭像 發(fā)表于 03-27 10:36 ?759次閱讀

    NVIDIA入局人形機器人Isaac平臺迎來重要更新

    NVIDIA Isaac 機器人平臺利用最新的生成式 AI 和先進的仿真技術,加速 AI 機器人技術的發(fā)展。
    的頭像 發(fā)表于 03-26 09:07 ?1172次閱讀
    <b class='flag-5'>NVIDIA</b>入局人形<b class='flag-5'>機器人</b>!<b class='flag-5'>Isaac</b>平臺迎來重要更新

    NVIDIA Isaac生成式AI應用于制造業(yè)和物流業(yè)

    NVIDIA Isaac 機器人平臺利用最新的生成式 AI 和先進的仿真技術,加速 AI 機器人技術的發(fā)展。
    的頭像 發(fā)表于 03-22 10:06 ?605次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b>將<b class='flag-5'>生成</b>式AI應用于制造業(yè)和物流業(yè)
    主站蜘蛛池模板: 久久精品亚洲一级毛片 | 手机看片a永久免费看大片 手机毛片 | 国产午夜在线视频 | 麻豆三级在线播放 | 欧美一级视频精品观看 | 免费人成网站 | 四虎精品影院 | av网站免费线看 | 三级黄色免费网站 | 亚洲色四在线视频观看 | 免费观看黄a一级视频 | 狠狠五月深爱婷婷网免费 | 在线播放亚洲视频 | 黄网在线免费看 | 天天爽夜夜爽人人爽曰喷水 | 最近2018中文字幕免费看手机 | 欧美三级影院 | 亚洲综合色网 | 天天操天天干天天爱 | 免费恐怖片 | 天堂一区二区三区在线观看 | 日本三级网站在线线观看 | 欧美手机看片 | 四虎最新永久免费网址 | 午夜欧美精品久久久久久久 | 一区二区三区视频免费观看 | 伊人久久影院大香线蕉 | 欧美性视频一区二区三区 | 久久人人澡| 激情开心婷婷 | 国产免费啪啪 | 热久久综合这里只有精品电影 | 亚洲国产福利精品一区二区 | 日本一区二区不卡视频 | 欧美潘金莲一级风流片a级 欧美片欧美日韩国产综合片 | 欧美黄色片视频 | 亚洲色图综合网站 | 免费黄色成人 | 国产逼逼视频 | 国产理论视频在线观看 | 丁香九月婷婷 |