在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

目前幾種主流的機器人智能抓取系統方案

新機器視覺 ? 來源:新機器視覺 ? 2023-11-14 14:20 ? 次閱讀

機器人學習中的經典問題之一便是分揀:在一堆無序擺放的物品堆中,取出目標物品。在快遞分揀員看來,這幾乎是一個不需要思考的過程,但對于機械臂而言,這意味著復雜的矩陣計算。

事實上,對于人類需要耗費大量時間的數理難題,用智能系統處理起來就顯得十分容易,但在幾乎不需要思考的情況下就能做出的分選動作,則是全世界機機器人研究專家關注的熱點。

a8e3b0dc-82a0-11ee-939d-92fbcf53809c.jpg

機械臂抓取需要確定每段機械臂的位姿

首先,機械臂需要視覺伺服系統,來確定物體的位置,根據末端執行器(手)和視覺傳感器(眼)的相對位置,可分為Eye-to-HandEye-in-Hand兩種系統。

Eye-to-Hand的分離式分布,視野固定不變,如果相機的標定精度高的話,那么視覺定位于抓取的精度也越高。

Eye-in-Hand則將機械臂與視覺傳感器固定在一起,視野隨機械臂的移動而改變,傳感器越近時精度越高,但過于靠近時則可能使目標超出視野范圍。

a8f8b75c-82a0-11ee-939d-92fbcf53809c.jpg

精密的視覺系統與靈活機械臂的配合,才能完成一次完美的抓取,而這正是當前機器人操作中的核心難題,歸納起來就是這么一件事:找到合適的抓取點(或吸附點),抓住它。之后的轉運執行,則屬于運動規劃的分支。

目前幾種主流的解決方案

Model-based(基于模型的方法)

這種方法很好理解,即知道要抓什么,事先采用實物掃描的方式,提前將模型的數據給到機器人系統,機器在實際抓取中就只需要進行較少的運算:

1. 離線計算:根據搭載的末端類型,對每一個物體模型計算局部抓取點;

2. 在線感知:通過RGB或點云圖,計算出每個物體的三維位姿;

3. 計算抓取點:在真實世界的坐標系下,根據防碰撞等要求,選取每個物體的最佳抓取點。

RGB顏色空間由紅綠藍三種基本色組成,疊加成任意色彩,同樣地,任意一種顏色也可以拆解為三種基本色的組合,機器人通過顏色坐標值來理解“顏色”。這種方式與人眼識別顏色的方向相似,在顯示屏上廣泛采用。

Half-Model-based(半模型的方法)

在這種訓練方式中,不需要完全預知抓取的物體,但是需要大量類似的物體來訓練算法,讓算法得以在物品堆中有效對圖像進行“分割”,識別出物體的邊緣。這種訓練方式,需要這些流程:

1.離線訓練圖像分割算法,即把圖片里的像素按物體區分出來,此類工作一般由專門的數據標注員來處理,按工程師的需求,標注出海量圖片中的不同細節;

2.在線處理圖像分割,在人工標注出的物體上,尋找合適的抓取點。

這是一種目前應用較為廣泛的方式,也是機械臂抓取得以推進的主要推力。機械臂技術發展緩慢,但計算機視覺的圖像分割則進展迅速,也從側面撬動了機器人、無人駕駛等行業的發展。

a92d4f58-82a0-11ee-939d-92fbcf53809c.jpg

Model-free(自由模型)

這種訓練方式不涉及到“物體”的概念,機器直接從RGB圖像或點云圖上計算出合適的抓取點,基本思路就是在圖像上找到Antipodal(對映點),即有可能“抓的起來”的點,逐步訓練出抓取策略。這種訓練方式往往讓機器手大量嘗試不同種類的物品,進行self-supervisedlearning,Google的Arm Farm,即為其中的代表之一。

值得注意的是,對于機械手而言,不同形狀的物品,抓取難度有天壤之別。即便是同樣形狀的物體,由于表面反光度和環境光照的影響,在不同場景的抓取難度也大相徑庭。從實驗室到商業落地,其中有相當一段路要走。

高精密度的相機研發,是機器人“感知”物體的第一步。

實際商業場景中,最麻煩的物體總是“下一個物體”。工業機器人要真正融入實際生產體系,只有具備聰明的大腦,針對不同工況做出柔性的調整,才能拓寬工業機器人的使用場景。







審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 機器人
    +關注

    關注

    211

    文章

    28501

    瀏覽量

    207472
  • RGB
    RGB
    +關注

    關注

    4

    文章

    799

    瀏覽量

    58569
  • 視覺傳感器
    +關注

    關注

    3

    文章

    250

    瀏覽量

    22907
  • 伺服系統
    +關注

    關注

    14

    文章

    574

    瀏覽量

    39247
  • 計算機視覺
    +關注

    關注

    8

    文章

    1698

    瀏覽量

    46030

原文標題:機器人智能抓取系統:目前幾種主流的解決方案

文章出處:【微信號:vision263com,微信公眾號:新機器視覺】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    【「具身智能機器人系統」閱讀體驗】2.具身智能機器人的基礎模塊

    具身智能機器人的基礎模塊,這個是本書的第二部分內容,主要分為四個部分:機器人計算系統,自主機器人的感知
    發表于 01-04 19:22

    《具身智能機器人系統》第10-13章閱讀心得之具身智能機器人計算挑戰

    閱讀《具身智能機器人系統》第10-13章,我對具身智能機器人的工程實踐有了全新認識。第10章從實時性角度剖析了
    發表于 01-04 01:15

    【「具身智能機器人系統」閱讀體驗】+兩本互為支持的書

    最近在閱讀《具身智能機器人系統》這本書的同時,還讀了 《計算機視覺之PyTorch數字圖像處理》一書,這兩本書完全可以視為是互為依托的姊妹篇。《計算機視覺之PyTorch數字圖像處理》是介紹
    發表于 01-01 15:50

    【「具身智能機器人系統」閱讀體驗】2.具身智能機器人大模型

    近年來,人工智能領域的大模型技術在多個方向上取得了突破性的進展,特別是在機器人控制領域展現出了巨大的潛力。在“具身智能機器人大模型”部分,作者研究并探討了大模型如何提升
    發表于 12-29 23:04

    【「具身智能機器人系統」閱讀體驗】1.初步理解具身智能

    感謝 感謝電子發燒友網社區給予《具身智能機器人系統》試讀機會。在這知識的盛宴中,我感受到社區的關懷與支持。定不負期望,認真研讀,分享所學,回饋社區。 一、本書大綱 《具身智能
    發表于 12-28 21:12

    【「具身智能機器人系統」閱讀體驗】1.全書概覽與第一章學習

    了解具身智能機器人相關的知識,我感到十分榮幸和幸運。 全書簡介 本書以循序漸進的方式展開,通過對具身智能機器人技術的全方位解析,幫助讀者系統
    發表于 12-27 14:50

    【「具身智能機器人系統」閱讀體驗】+數據在具身人工智能中的價值

    提供了對機器人環境和動作的統一和詳細的理解。只有在這些過程之后,數據才能有效地用于訓練 EAI 系統目前,應用 Sim2Real 技術的主要障礙是“現實差距”,即模擬環境與現實世界之間的差異,包括物理
    發表于 12-24 00:33

    【「具身智能機器人系統」閱讀體驗】+初品的體驗

    《具身智能機器人系統》 一書由甘一鳴、俞波、萬梓燊、劉少山老師共同編寫,其封面如圖1所示。 本書共由5部分組成,其結構和內容如圖2所示。 該書可作為高校和科研機構的教材,為學生和研究人員提供
    發表于 12-20 19:17

    《具身智能機器人系統》第1-6章閱讀心得之具身智能機器人系統背景知識與基礎模塊

    、谷歌的RT系列等前沿產品中展露鋒芒。這些突破性成果標志著AI正從虛擬世界邁向物理世界的深度交互。 而研讀《具身智能機器人系統》前六章,我對具身智能(Embodied Artifici
    發表于 12-19 22:26

    智能移動機器人系統方案指南

    至 48 V 之間。根據所采用的技術和預期用途,此類機器人系統可以與人類進行不同程度的交互,比如在人員周圍安全運作,與人員進行高效的合作和協同工作。為幫助工程師更好地解決設計難題,智能移動
    的頭像 發表于 11-14 10:30 ?436次閱讀
    <b class='flag-5'>智能</b>移動<b class='flag-5'>機器人</b><b class='flag-5'>系統</b><b class='flag-5'>方案</b>指南

    【書籍評測活動NO.51】具身智能機器人系統 | 了解AI的下一個浪潮!

    。 這些技術的綜合應用使具身智能系統能夠進行復雜的環境感知、決策制定和物理操作。例如,通過多模態感知技術,智能體能夠綜合視覺、 聽覺和觸覺數據,更全面地理解和響應其所處的環境。 具身智能
    發表于 11-11 10:20

    智能移動機器人

    富唯智能移動機器人分為復合機器人和轉運機器人,搭載ICD核心控制器,實現一體化控制,最快可實現15分鐘現場機器人的快速部署,無縫對接產線,配
    的頭像 發表于 08-27 17:22 ?362次閱讀
    <b class='flag-5'>智能</b>移動<b class='flag-5'>機器人</b>

    ROS讓機器人開發更便捷,基于RK3568J+Debian系統發布!

    化的快速發展,智能機器人設備已成為工業自動化體系的佼佼者,而智能機器人設備核心—ROS系統,是機器人
    發表于 07-09 11:38

    Al大模型機器人

    )大模型AI機器人采用中英文雙語應用,目前的知識圖譜包括了金航標和薩科微所有的產品內容、應用場景、產品的家屬參數等,熱賣的型號S8050、TL431、SS8550、FR107、LM321、ZMM5V6
    發表于 07-05 08:52

    富唯智能案例|3D視覺引導機器人抓取鞋墊上下料

    隨著制造業對自動化、智能化需求的不斷提升,如何實現鞋墊上下料的精準、高效操作成為了企業亟待解決的問題。傳統的上下料方式往往依賴人工,存在效率低下、精度不足等問題。而富唯智能的3D視覺引導機器人
    的頭像 發表于 04-08 16:57 ?419次閱讀
    富唯<b class='flag-5'>智能</b>案例|3D視覺引導<b class='flag-5'>機器人</b><b class='flag-5'>抓取</b>鞋墊上下料
    主站蜘蛛池模板: 欧美日韩一区二区三区视频| 国产精品久久久久影视不卡| 久久伊人男人的天堂网站| 欧美freesex10一13| 欧美日韩乱国产| 免费精品一区二区三区在线观看| 毛片啪啪| 国产农村一一级特黄毛片| 日韩天堂| 亚洲国产精品第一区二区| 在线视频观看你懂的| 一区在线观看视频| 亚洲国产精品第一页| 久久精品国产精品亚洲精品| 高h水果榨汁play男男| 亚洲国产精品久久婷婷| 日毛片| 久久精品亚洲精品国产欧美| 日本黄色高清视频网站| 欧美成人3d动漫在线播放网站| 精品三级视频| 夜夜操网| 久久v| 乌克兰一级毛片| 美国一区二区三区| 国产理论视频| 49pao强力免费打造在线高清| 九九九精品午夜在线观看| 午夜爱爱免费视频| 欧美精品一二区| 丁香花高清在线观看| 天堂资源8中文最新版在线| 1024手机看片欧美日韩| 九月婷婷亚洲综合在线| 四虎影城| 丁香啪啪天堂激情婷婷| 天天草天天爽| 中文字幕在线观看一区二区| 一级毛片免费在线观看网站| 在线播放真实国产乱子伦| 日本一区三区二区三区四区|