在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

目前幾種主流的機(jī)器人智能抓取系統(tǒng)方案

新機(jī)器視覺(jué) ? 來(lái)源:新機(jī)器視覺(jué) ? 2023-11-14 14:20 ? 次閱讀

機(jī)器人學(xué)習(xí)中的經(jīng)典問(wèn)題之一便是分揀:在一堆無(wú)序擺放的物品堆中,取出目標(biāo)物品。在快遞分揀員看來(lái),這幾乎是一個(gè)不需要思考的過(guò)程,但對(duì)于機(jī)械臂而言,這意味著復(fù)雜的矩陣計(jì)算。

事實(shí)上,對(duì)于人類需要耗費(fèi)大量時(shí)間的數(shù)理難題,用智能系統(tǒng)處理起來(lái)就顯得十分容易,但在幾乎不需要思考的情況下就能做出的分選動(dòng)作,則是全世界機(jī)機(jī)器人研究專家關(guān)注的熱點(diǎn)。

a8e3b0dc-82a0-11ee-939d-92fbcf53809c.jpg

機(jī)械臂抓取需要確定每段機(jī)械臂的位姿

首先,機(jī)械臂需要視覺(jué)伺服系統(tǒng),來(lái)確定物體的位置,根據(jù)末端執(zhí)行器(手)和視覺(jué)傳感器(眼)的相對(duì)位置,可分為Eye-to-HandEye-in-Hand兩種系統(tǒng)。

Eye-to-Hand的分離式分布,視野固定不變,如果相機(jī)的標(biāo)定精度高的話,那么視覺(jué)定位于抓取的精度也越高。

Eye-in-Hand則將機(jī)械臂與視覺(jué)傳感器固定在一起,視野隨機(jī)械臂的移動(dòng)而改變,傳感器越近時(shí)精度越高,但過(guò)于靠近時(shí)則可能使目標(biāo)超出視野范圍。

a8f8b75c-82a0-11ee-939d-92fbcf53809c.jpg

精密的視覺(jué)系統(tǒng)與靈活機(jī)械臂的配合,才能完成一次完美的抓取,而這正是當(dāng)前機(jī)器人操作中的核心難題,歸納起來(lái)就是這么一件事:找到合適的抓取點(diǎn)(或吸附點(diǎn)),抓住它。之后的轉(zhuǎn)運(yùn)執(zhí)行,則屬于運(yùn)動(dòng)規(guī)劃的分支。

目前幾種主流的解決方案

Model-based(基于模型的方法)

這種方法很好理解,即知道要抓什么,事先采用實(shí)物掃描的方式,提前將模型的數(shù)據(jù)給到機(jī)器人系統(tǒng),機(jī)器在實(shí)際抓取中就只需要進(jìn)行較少的運(yùn)算:

1. 離線計(jì)算:根據(jù)搭載的末端類型,對(duì)每一個(gè)物體模型計(jì)算局部抓取點(diǎn);

2. 在線感知:通過(guò)RGB或點(diǎn)云圖,計(jì)算出每個(gè)物體的三維位姿;

3. 計(jì)算抓取點(diǎn):在真實(shí)世界的坐標(biāo)系下,根據(jù)防碰撞等要求,選取每個(gè)物體的最佳抓取點(diǎn)。

RGB顏色空間由紅綠藍(lán)三種基本色組成,疊加成任意色彩,同樣地,任意一種顏色也可以拆解為三種基本色的組合,機(jī)器人通過(guò)顏色坐標(biāo)值來(lái)理解“顏色”。這種方式與人眼識(shí)別顏色的方向相似,在顯示屏上廣泛采用。

Half-Model-based(半模型的方法)

在這種訓(xùn)練方式中,不需要完全預(yù)知抓取的物體,但是需要大量類似的物體來(lái)訓(xùn)練算法,讓算法得以在物品堆中有效對(duì)圖像進(jìn)行“分割”,識(shí)別出物體的邊緣。這種訓(xùn)練方式,需要這些流程:

1.離線訓(xùn)練圖像分割算法,即把圖片里的像素按物體區(qū)分出來(lái),此類工作一般由專門的數(shù)據(jù)標(biāo)注員來(lái)處理,按工程師的需求,標(biāo)注出海量圖片中的不同細(xì)節(jié);

2.在線處理圖像分割,在人工標(biāo)注出的物體上,尋找合適的抓取點(diǎn)。

這是一種目前應(yīng)用較為廣泛的方式,也是機(jī)械臂抓取得以推進(jìn)的主要推力。機(jī)械臂技術(shù)發(fā)展緩慢,但計(jì)算機(jī)視覺(jué)的圖像分割則進(jìn)展迅速,也從側(cè)面撬動(dòng)了機(jī)器人、無(wú)人駕駛等行業(yè)的發(fā)展。

a92d4f58-82a0-11ee-939d-92fbcf53809c.jpg

Model-free(自由模型)

這種訓(xùn)練方式不涉及到“物體”的概念,機(jī)器直接從RGB圖像或點(diǎn)云圖上計(jì)算出合適的抓取點(diǎn),基本思路就是在圖像上找到Antipodal(對(duì)映點(diǎn)),即有可能“抓的起來(lái)”的點(diǎn),逐步訓(xùn)練出抓取策略。這種訓(xùn)練方式往往讓機(jī)器手大量嘗試不同種類的物品,進(jìn)行self-supervisedlearning,Google的Arm Farm,即為其中的代表之一。

值得注意的是,對(duì)于機(jī)械手而言,不同形狀的物品,抓取難度有天壤之別。即便是同樣形狀的物體,由于表面反光度和環(huán)境光照的影響,在不同場(chǎng)景的抓取難度也大相徑庭。從實(shí)驗(yàn)室到商業(yè)落地,其中有相當(dāng)一段路要走。

高精密度的相機(jī)研發(fā),是機(jī)器人“感知”物體的第一步。

實(shí)際商業(yè)場(chǎng)景中,最麻煩的物體總是“下一個(gè)物體”。工業(yè)機(jī)器人要真正融入實(shí)際生產(chǎn)體系,只有具備聰明的大腦,針對(duì)不同工況做出柔性的調(diào)整,才能拓寬工業(yè)機(jī)器人的使用場(chǎng)景。







審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    213

    文章

    29537

    瀏覽量

    211759
  • RGB
    RGB
    +關(guān)注

    關(guān)注

    4

    文章

    804

    瀏覽量

    59653
  • 視覺(jué)傳感器
    +關(guān)注

    關(guān)注

    3

    文章

    262

    瀏覽量

    23237
  • 伺服系統(tǒng)
    +關(guān)注

    關(guān)注

    14

    文章

    584

    瀏覽量

    39956
  • 計(jì)算機(jī)視覺(jué)

    關(guān)注

    9

    文章

    1706

    瀏覽量

    46594

原文標(biāo)題:機(jī)器人智能抓取系統(tǒng):目前幾種主流的解決方案

文章出處:【微信號(hào):vision263com,微信公眾號(hào):新機(jī)器視覺(jué)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    大象機(jī)器人攜手進(jìn)迭時(shí)空推出 RISC-V 全棧開(kāi)源六軸機(jī)械臂產(chǎn)品

    識(shí)別聯(lián)調(diào)。 進(jìn)迭時(shí)空致力于為智能機(jī)器人提供完整全棧優(yōu)化的RISC-V AI軟硬件解決方案,第一代RISC-V AI CPU芯片K1已完成AI視覺(jué)感知、AI語(yǔ)音處理、自動(dòng)避障、路徑規(guī)劃、運(yùn)動(dòng)控制等
    發(fā)表于 04-25 17:59

    富唯智能最小復(fù)合機(jī)器人的強(qiáng)大抓取實(shí)力?

    在工業(yè)自動(dòng)化領(lǐng)域,復(fù)合機(jī)器人的身影愈發(fā)常見(jiàn)。但你是否好奇,最小的復(fù)合機(jī)器人抓取多少多重?富唯智能以創(chuàng)新技術(shù),給出了令人驚嘆的答案,徹底顛覆我們對(duì)小身形
    的頭像 發(fā)表于 04-16 16:31 ?222次閱讀
    富唯<b class='flag-5'>智能</b>最小復(fù)合<b class='flag-5'>機(jī)器人</b>的強(qiáng)大<b class='flag-5'>抓取</b>實(shí)力?

    復(fù)合機(jī)器人抓取精度的影響因素及提升策略

    復(fù)合機(jī)器人結(jié)合了移動(dòng)機(jī)器人(如AGV)和機(jī)械臂的功能,廣泛應(yīng)用于物流、制造等領(lǐng)域。抓取精度是其核心性能指標(biāo)之一,直接影響作業(yè)效率和產(chǎn)品質(zhì)量。本文將探討復(fù)合機(jī)器人
    的頭像 發(fā)表于 04-12 11:15 ?268次閱讀

    名單公布!【書籍評(píng)測(cè)活動(dòng)NO.58】ROS 2智能機(jī)器人開(kāi)發(fā)實(shí)踐

    過(guò)去十幾年機(jī)器人行業(yè)的繁榮,逐漸成為智能機(jī)器人開(kāi)發(fā)的主流標(biāo)準(zhǔn)。 當(dāng)然,ROS的快速發(fā)展也遠(yuǎn)超那群年輕的預(yù)期,本來(lái)只是為一款家用服務(wù)
    發(fā)表于 03-03 14:18

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】2.具身智能機(jī)器人的基礎(chǔ)模塊

    具身智能機(jī)器人的基礎(chǔ)模塊,這個(gè)是本書的第二部分內(nèi)容,主要分為四個(gè)部分:機(jī)器人計(jì)算系統(tǒng),自主機(jī)器人的感知
    發(fā)表于 01-04 19:22

    《具身智能機(jī)器人系統(tǒng)》第10-13章閱讀心得之具身智能機(jī)器人計(jì)算挑戰(zhàn)

    閱讀《具身智能機(jī)器人系統(tǒng)》第10-13章,我對(duì)具身智能機(jī)器人的工程實(shí)踐有了全新認(rèn)識(shí)。第10章從實(shí)時(shí)性角度剖析了
    發(fā)表于 01-04 01:15

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+兩本互為支持的書

    最近在閱讀《具身智能機(jī)器人系統(tǒng)》這本書的同時(shí),還讀了 《計(jì)算機(jī)視覺(jué)之PyTorch數(shù)字圖像處理》一書,這兩本書完全可以視為是互為依托的姊妹篇。《計(jì)算機(jī)視覺(jué)之PyTorch數(shù)字圖像處理》是介紹
    發(fā)表于 01-01 15:50

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】2.具身智能機(jī)器人大模型

    近年來(lái),人工智能領(lǐng)域的大模型技術(shù)在多個(gè)方向上取得了突破性的進(jìn)展,特別是在機(jī)器人控制領(lǐng)域展現(xiàn)出了巨大的潛力。在“具身智能機(jī)器人大模型”部分,作者研究并探討了大模型如何提升
    發(fā)表于 12-29 23:04

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】1.初步理解具身智能

    感謝 感謝電子發(fā)燒友網(wǎng)社區(qū)給予《具身智能機(jī)器人系統(tǒng)》試讀機(jī)會(huì)。在這知識(shí)的盛宴中,我感受到社區(qū)的關(guān)懷與支持。定不負(fù)期望,認(rèn)真研讀,分享所學(xué),回饋社區(qū)。 一、本書大綱 《具身智能
    發(fā)表于 12-28 21:12

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】1.全書概覽與第一章學(xué)習(xí)

    了解具身智能機(jī)器人相關(guān)的知識(shí),我感到十分榮幸和幸運(yùn)。 全書簡(jiǎn)介 本書以循序漸進(jìn)的方式展開(kāi),通過(guò)對(duì)具身智能機(jī)器人技術(shù)的全方位解析,幫助讀者系統(tǒng)
    發(fā)表于 12-27 14:50

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+數(shù)據(jù)在具身人工智能中的價(jià)值

    提供了對(duì)機(jī)器人環(huán)境和動(dòng)作的統(tǒng)一和詳細(xì)的理解。只有在這些過(guò)程之后,數(shù)據(jù)才能有效地用于訓(xùn)練 EAI 系統(tǒng)目前,應(yīng)用 Sim2Real 技術(shù)的主要障礙是“現(xiàn)實(shí)差距”,即模擬環(huán)境與現(xiàn)實(shí)世界之間的差異,包括物理
    發(fā)表于 12-24 00:33

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+初品的體驗(yàn)

    《具身智能機(jī)器人系統(tǒng)》 一書由甘一鳴、俞波、萬(wàn)梓燊、劉少山老師共同編寫,其封面如圖1所示。 本書共由5部分組成,其結(jié)構(gòu)和內(nèi)容如圖2所示。 該書可作為高校和科研機(jī)構(gòu)的教材,為學(xué)生和研究人員提供
    發(fā)表于 12-20 19:17

    《具身智能機(jī)器人系統(tǒng)》第1-6章閱讀心得之具身智能機(jī)器人系統(tǒng)背景知識(shí)與基礎(chǔ)模塊

    、谷歌的RT系列等前沿產(chǎn)品中展露鋒芒。這些突破性成果標(biāo)志著AI正從虛擬世界邁向物理世界的深度交互。 而研讀《具身智能機(jī)器人系統(tǒng)》前六章,我對(duì)具身智能(Embodied Artifici
    發(fā)表于 12-19 22:26

    智能移動(dòng)機(jī)器人

    富唯智能移動(dòng)機(jī)器人分為復(fù)合機(jī)器人和轉(zhuǎn)運(yùn)機(jī)器人,搭載ICD核心控制器,實(shí)現(xiàn)一體化控制,最快可實(shí)現(xiàn)15分鐘現(xiàn)場(chǎng)機(jī)器人的快速部署,無(wú)縫對(duì)接產(chǎn)線,配
    的頭像 發(fā)表于 08-27 17:22 ?635次閱讀
    <b class='flag-5'>智能</b>移動(dòng)<b class='flag-5'>機(jī)器人</b>

    ROS讓機(jī)器人開(kāi)發(fā)更便捷,基于RK3568J+Debian系統(tǒng)發(fā)布!

    化的快速發(fā)展,智能機(jī)器人設(shè)備已成為工業(yè)自動(dòng)化體系的佼佼者,而智能機(jī)器人設(shè)備核心—ROS系統(tǒng),是機(jī)器人
    發(fā)表于 07-09 11:38
    主站蜘蛛池模板: 特级一级毛片视频免费观看 | 久久婷婷激情 | 一级毛片免费全部播放完整 | 美国人与性xxxxxxx | ww欧洲ww欧洲视频 | 天天射天天干天天操 | 欧美午夜片 | 欧美另类高清xxxxx | 亚洲人在线 | 制服丝袜中文字幕第一页 | 俄罗斯久久 | 一区二区三区高清视频在线观看 | 精品免费视在线视频观看 | 一级三级黄色片 | 日韩在线视频免费观看 | 在线看片成人免费视频 | 亚洲日本在线观看视频 | 美女扒开内裤让男人桶 | 亚洲免费视频一区二区三区 | 亚洲欧洲第一页 | 四虎影院成人在线观看 | 福利一级片 | 婷婷国产成人久久精品激情 | 免费一区二区视频 | 一级毛片aaa片免费观看 | 扒开末成年粉嫩的流白浆视频 | 天天做天天看夜夜爽毛片 | 五月天丁香婷婷开心激情五月 | 午夜在线观看视频在线播放版 | 国产稀缺精品盗摄盗拍 | 男操女免费视频 | 国产精品视频一区国模私拍 | 精品久久久久国产免费 | 一区二区三区免费视频播放器 | 日韩一卡2卡三卡4卡无卡网站 | 免费看一级大片 | 天天爽夜夜爽 | 看黄a大片 免费 | 91网站在线播放 | 亚洲爱婷婷色婷婷五月 | 高清视频黄色录像免费 |