在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

用于黑暗中視覺自我運動估計的新型主動照明框架

INDEMIND ? 來源:INDEMIND ? 2025-02-28 14:29 ? 次閱讀

本文提出一種新型主動照明框架,通過動態控制可移動光源主動照亮高紋理區域,顯著提升VO與VSLAM算法在極端光照條件下的性能。在真實機器人平臺上進行的實驗表明,相比傳統固定照明方法,本文方法可將姿態估計誤差最高降低75%。

? 文章:

Active Illumination for Visual Ego-Motion Estimation in the Dark

? 作者:

Francesco Crocetti, Alberto Dionigi, Raffaele Brilli, Gabriele Costante, Paolo Valigi

? 論文鏈接:

https://arxiv.org/abs/2502.13708

? 編譯:

INDEMIND

01 本文核心內容

基于視覺的位姿估計是實現移動機器人定位最廣泛采用的策略之一。過去幾十年間,多種高效的VO(視覺里程計)和VSLAM方法不斷涌現,而近期視覺-慣性融合技術的出現更是展現了卓越性能。

VO和VSLAM解決方案的有效性依賴于提魯棒且高區分性視覺特征的能力。這些特征可以是稀疏的、密集的,甚至是基于學習的。大多數前沿研究假設視覺估計系統的運行條件接近理想狀態,即場景紋理豐富且光照條件適宜。然而,即使特征提取與跟蹤模塊的性能輕微下降,也可能導致整個估計流程的失敗。盡管如此,許多應用(如災害救援或地下勘探)要求機器人平臺在遠非理想的環境中運行。尤其是低光照或完全黑暗的環境,對基于視覺的系統而言是最具挑戰性的場景,因為此類環境幾乎完全無法提取有效的視覺線索。

一種直接的解決方案是為機器人配備強力廣角光源以照亮相機捕獲的整個場景。然而,這種方法存在兩個顯著缺陷:(i)能效低下,電池能量被浪費在照亮無紋理區域(如平坦表面);(ii)在大規模環境中,由于光線過度散射,光源功率可能不足以充分照亮整個場景。反之,采用固定式窄光束光源雖然能效更高,并可有效照亮場景的遠距離部分以提升可見性,但由于大部分區域仍處于未照明狀態,特征跟蹤極易丟失。

受上述挑戰的啟發,本文提出了一種創新方法以推動技術前沿。如圖1所示,我們為機器人配備搭載在機械臂上的窄光束光源,并開發了一種新方法用于識別場景中預期包含最顯著特征信息的區域。這使得我們能夠定義控制機械臂的設定點,動態調整光束方向。相機圖像以預定義頻率持續采樣,并通過基于深度學習的增強網絡進行處理,生成增強圖像流。隨后,系統分析這些圖像以確定目標區域,進而驅動搭載LED聚光末端執行器的機械臂調整光束聚焦位置。

0b008694-f561-11ef-9310-92fbcf53809c.png

據我們所知,這是首個通過機械臂實現主動光束自適應調整以支持基于視覺的位姿估計的方法。

02 主要貢獻

動態特征區域識別:設計低光環境下圖像高特征密度區域動態檢測方法;

主動光源控制:提出信息驅動策略控制可移動光源聚焦環境紋理豐富區域;

實驗驗證:構建搭載可控光源的機器人平臺,通過真實場景實驗證明本方法顯著優于現有技術。

03 方法架構

在本研究中,我們考慮完全黑暗環境下的場景,以及配備帶有定向機械臂安裝光源的移動機器人。所提出的主動照明方法的目標是為機器人平臺提供合適的光束方向控制策略,以通過VO或VSLAM算法獲得最佳的機器人位姿估計。

為此,我們設計了一種新型的低光條件下視覺定位框架。該框架利用圖像增強生成對抗網絡(GAN)來識別高特征密度區域,并結合一種新型主動照明策略和機械臂控制器對這些區域進行照明。

0b1a69ba-f561-11ef-9310-92fbcf53809c.png

圖2所示的開發框架圍繞一個核心要素——雙軸移動光源展開。該組件賦予機器人動態調節環境光照的能力。該主動照明系統是一款閉環控制裝置,能夠在暗環境中實現光束的動態調控。在VSLAM算法持續追蹤特征點與描述符以進行位姿估計的同時,圖像流輸入至低幀率重采樣器,該設備輸出保持原始分辨率但幀率降低的圖像。該重采樣器作為并行于位姿估計流程的復合處理管道的入口,其處理鏈路由兩大核心模塊構成:"增強網絡模塊(ENB)"與"特征聚焦模塊(FFB)",專門負責生成雙軸光束設備的控制參考信號

04 結果

實驗活動的結果總結于表I。第一個重要發現是,在幾乎所有場景和定義的指標下,主動光源方法AL-VO均優于固定光源方法FL-VO。具體而言,在走廊環境等挑戰性場景中,FL-VO持續失敗且無法完成軌跡。如圖4所示,這是由于FL-VO在導航過程中意外照射平坦表面,導致VO算法因紋理信息不足而失效。相反,得益于主動光源策略,AL-VO能夠將光束重新定向至富含角點、邊緣和物體的區域,從而完整跟蹤所有軌跡0b3ce8dc-f561-11ef-9310-92fbcf53809c.png

0b4f88c0-f561-11ef-9310-92fbcf53809c.png

作為參考,我們還納入了VO算法在最佳光照條件(LO-VO)和低光條件下結合EnlightenGAN增強(EG-VO)的性能指標。與預期一致,LO-VO和EG-VO取得了最佳整體表現。值得注意的是,EG-VO在黑暗條件下表現出色,結果與LO-VO(日光條件)非常接近。但需指出,盡管EnlightenGAN提供了卓越的圖像增強能力,其較高的計算復雜度限制了EG-VO在資源受限機器人平臺上的部署。因此,在此類場景中,AL-VO是低光VO的更優選擇。

0b605c90-f561-11ef-9310-92fbcf53809c.png

最后,如圖5的定性結果所示,所有方法在房間R場景中均能生成合理軌跡。然而,FL-VO在某一彎道區域顯著偏離真實軌跡(GT),而AL-VO能夠保持與GT軌跡的高度對齊,且得分接近LO-VO和EG-VO。

05 總結

在本研究中,我們提出了一種新型主動照明框架,旨在使VO和VSLAM算法能夠在黑暗環境中正常運行。具體而言,我們開發了一種創新性的主動式方法,通過識別并優先照亮圖像中特征點最密集的區域。大量真實環境實驗驗證了該方法的有效性,并凸顯了其實際應用潛力。未來的工作將通過在目標選擇指標中引入額外參數,將機器人未來運動軌跡納入考量,從而進一步提升系統性能。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 機器人
    +關注

    關注

    213

    文章

    29510

    瀏覽量

    211649
  • 照明
    +關注

    關注

    11

    文章

    1557

    瀏覽量

    132115
  • 光源
    +關注

    關注

    3

    文章

    736

    瀏覽量

    68471
  • VSLAM
    +關注

    關注

    0

    文章

    25

    瀏覽量

    4482

原文標題:誤差降低75%!首個面向黑暗環境下視覺自運動估計的主動照明技術!

文章出處:【微信號:gh_c87a2bc99401,微信公眾號:INDEMIND】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    半導體產業展望-黑暗中等待黎明到來

    半導體產業展望-黑暗中等待黎明到來,半導體產業1H12仍處于黑暗期,但黑暗中仍有亮點,前景依然廣闊
    發表于 12-02 09:27 ?1681次閱讀
    半導體產業展望-<b class='flag-5'>黑暗中</b>等待黎明到來

    科天健:機器視覺照明要點

    照明系統可以使整個視覺檢測系統更具有效率和準確性。下面科天健將詳細介紹機器視覺照明要點:一:使用強光檢測缺失的材料光場照明技術適
    發表于 05-10 11:32

    嵌入式主動視覺系統如何實現?

    根據通用主動視覺系統的設計要求,提出了基于DSP的嵌入式主動視覺系統的設計方案,并完成系統的軟硬件設計。最終實現的系統具有俯仰和搖擺2個自由度、支持雙CCD
    發表于 08-28 08:00

    基于DSP的嵌入式通用主動視覺系統該怎么設計?

    處的狀態,如幾何位置、姿態、攝像機的成像光學條件等,調整自身各部分的狀態參數,使其能夠達到一個最佳成像狀態,從而使系統能夠最方便地完成特定的視覺任務,如動態地跟蹤物體的運動主動視覺
    發表于 09-03 08:24

    惠州機器視覺光源常見的幾種照明方式

    兩種或兩種以上照明技術共同配合完成。因而豐富的照明技術可以解決視覺系統中圖像獲取的很多問題,光源照明技術的選擇可能對一個視覺系統的成功與否至
    發表于 05-07 09:54

    一種新型全搜索運動估計IP核設計

    為了降低全搜索運動估計算法帶來的巨大計算量,提高運動估計計算速度,提出了一種新型用于全搜索
    發表于 07-29 16:07 ?16次下載

    什么是運動估計

    什么是運動估計 運動估計基本思想是將圖像序列的每一幀分成許多互不重疊的宏塊,并認為
    發表于 08-25 13:11 ?3660次閱讀
    什么是<b class='flag-5'>運動</b><b class='flag-5'>估計</b>

    英特爾推出黑暗中快速成像的系統,效果不錯

    在CVPR 2018上,英特爾實驗室的Vladlen Koltun和陳啟峰帶領的團隊提出了一種在黑暗中快速成像的系統,效果非常贊。
    的頭像 發表于 05-21 15:19 ?3557次閱讀
    英特爾推出<b class='flag-5'>黑暗中</b>快速成像的系統,效果不錯

    游戲中視覺風格的歷史和現狀

    Double Fine(殘酷傳奇,破碎時代)的Lee Petty介紹了游戲中視覺風格的歷史和現狀,并提供了如何使用視覺風格在您自己的游戲中產生最大影響的見解。
    的頭像 發表于 11-08 06:19 ?2992次閱讀

    美科學家研制新型相機可黑暗中拍3D照片

    美科學家研制新型相機可黑暗中拍3D照片 關鍵詞:相機,黑暗,3D照片 家用電子 時間:2014-01-09 15:55:24來源:互聯網 美國麻省理工學院的科學家研制了一種新型相機,能
    的頭像 發表于 06-07 15:34 ?2241次閱讀

    計算機視覺概論完成主成分分析和分類開始運動估計

    本文檔的主要內容詳細介紹的是計算機視覺概論完成主成分分析和分類開始運動估計資料免費下載。
    發表于 11-29 08:00 ?0次下載
    計算機<b class='flag-5'>視覺</b>概論完成主成分分析和分類開始<b class='flag-5'>運動</b><b class='flag-5'>估計</b>

    計算機視覺方向簡介之視覺慣性里程計

    實現SLAM的算法,根據融合框架的不同又分為松耦合和緊耦合。 其中VO(visual odometry)指僅視覺的里程計,T表示位置和姿態。松耦合中視覺運動
    的頭像 發表于 04-07 16:57 ?2966次閱讀
    計算機<b class='flag-5'>視覺</b>方向簡介之<b class='flag-5'>視覺</b>慣性里程計

    計算機視覺方向簡介

    其中VO(visual odometry)指僅視覺的里程計,T表示位置和姿態。松耦合中視覺運動估計和慣導運動
    的頭像 發表于 04-15 15:14 ?2823次閱讀
    計算機<b class='flag-5'>視覺</b>方向簡介

    華裔女博士提出:Facebook提出用于超參數調整的自我監督學習框架

    【導讀】Facebook的研究人員近日提出了一種用于超參數調整的自我監督學習框架
    的頭像 發表于 04-26 09:45 ?1924次閱讀
    華裔女博士提出:Facebook提出<b class='flag-5'>用于</b>超參數調整的<b class='flag-5'>自我</b>監督學習<b class='flag-5'>框架</b>

    發光的樂器在黑暗中會是什么樣子

    電子發燒友網站提供《發光的樂器在黑暗中會是什么樣子.zip》資料免費下載
    發表于 11-14 10:12 ?0次下載
    發光的樂器在<b class='flag-5'>黑暗中</b>會是什么樣子
    主站蜘蛛池模板: free性欧美video69 | 欧美精品一区视频 | 久久综合狠狠综合狠狠 | 国产精品第一页在线观看 | 三级视频在线播放线观看 | avtt加勒比手机版天堂网 | 色伊人久久 | 窝窝午夜视频 | 欧美满足你的丝袜高跟ol | 人人艹在线观看 | 日韩毛片在线看 | japanesexxx日本69 japan日韩xxxx69hd | 欧美草逼| 上课被同桌强行摸下面小黄文 | 中文字幕一区二区在线观看 | 大香线蕉97久久 | 亚洲免费视频播放 | 日本毛片在线观看 | 青娱乐啪啪 | 精品香港经典三级在线看 | 久久天天躁狠狠躁夜夜免费观看 | 亚洲伊人精品综合在合线 | 日本特黄a级高清免费大片18 | youjizz国产 | 2017亚洲男人天堂 | 天堂avwww | 亚洲精品视频区 | 四虎最新紧急入口 | 国产一级特黄aa大片在线 | 亚洲国产精品乱码在线观看97 | 婷婷久久综合九色综合98 | 久久国产精品久久久久久久久久 | 黄色网址视频在线播放 | 性久久久久久 | 欧美图片小说视频 | 人人入人人爱 | 午夜湿影院| 激情综合婷婷丁香六月花 | 天天做天天爽爽快快 | 欧美第一网站 | 视频网站黄色 |