高光譜成像技術因其能夠捕獲物體在不同波長下的光譜信息。廣泛應用于農業、環境監測、工業檢測等領域。近年來,隨著嵌入式平臺(如NVIDIA Jetson和樹莓派)性能的不斷提升,高光譜相機的嵌入式部署成為可能。
系統組成
在嵌入式平臺上部署高光譜相機,面臨著諸多技術難題。如高光譜相機如何和嵌入式設備通信,產生的海量數據如何處理,處理結果如何發送給控制器等,都限制了光譜相機在嵌入式設備上的應用。同時不同的嵌入式平臺各自擁有獨特的硬件架構和數據處理模式,如何讓高光譜相機與各類平臺完美適配也成為需要考慮的問題。為解決該問題,友思特eBUS軟件,為嵌入式分選和檢測成像平臺搭建提出專屬解決方案。
如圖為友思特自定義嵌入式分選和檢測成像平臺。自定義的分選系統由下面及部分組成:
√ 工業高光譜相機
√ 實時數據采集(如友思特eBUS Rx方案)
√ 高性能處理平臺(如Nvidia Jetson系列、RK3588系列、樹莓派系列)
√ 實時通信協議(如友思特eBUS Edge軟件傳輸方案)
**部分資料來源于網絡(各部分組成均可由用戶自由組合)
(1) eBUS Rx嵌入式平臺數據采集
eBUS Rx是一種將任何傳感器設備接入嵌入式平臺的軟件,任何傳感器、物聯網設備,不需要ARM平臺的驅動,通過eBUS Rx即可接入嵌入式平臺。
通過eBUS Rx,原本僅支持win系統的設備,可以成功部署在ARM上,實現低功耗、便捷式、小型化的數據傳輸和控制。
(2) eBUS Edge實現多平臺自定義GigE Vision協議打包
eBUS Edge是一個軟件平臺,無需任何額外的硬件,即可將相機、成像解決方案以及嵌入式和物聯網設備轉換為完全符合的GigE Vision、GenICam設備。如嵌入式平臺上進行AI處理后的結果,需要進一步傳給后端控制器和其他系統使用,使用ebus edge,實現處理后的坐標或圖像數據進行協議打包,發送。
主要特征
1. 保持原有的硬件連接
eBUS Rx基于原有的相機接口(如USB 3.0或以太網),能夠將高光譜相機的輸出信號轉換為嵌入式平臺可識別的格式。這種即插即用的設計大大降低了硬件集成的復雜性。
2. 高效數據傳輸
高光譜相機生成的數據量巨大,eBUS適配器通過優化數據傳輸協議,將CPU使用率至少降低20%以上,確保數據能夠以高帶寬、低延遲的方式傳輸到嵌入式平臺。這對于實時處理高光譜數據至關重要。
3. 兼容性強
eBUS軟件不僅支持與高光譜相機的直接連接,還能與多種嵌入式平臺兼容。
①NVIDIA Jetson:Jetson系列設備通過其強大的GPU計算能力,能夠高效處理高光譜相機采集的數據。
②Raspberry Pi:樹莓派則憑借其較低的功耗和高性價比,成為了許多小型、低功耗應用的理想選擇。
③瑞芯微RK3588:同時,目前最新版本的ebus已支持國產瑞芯微RK3588。
應用場景
1農業生產
在現代化農業生產中,通過安裝在農田、溫室等環境中的攝像頭和傳感器,實時監測農作物的生長狀況、土壤濕度、氣象條件等信息,為精準農業提供數據支持。eBUS 收發解決方案可以整合來自不同類型傳感器(如可見光攝像頭、紅外熱成像儀、土壤濕度傳感器等)的數據,實現全方位的農業環境監測。
2工業生產
在現代化工業生產中,通過部署在生產線上的高精度攝像頭和傳感器(如激光測距儀、3D結構光模組),實時監測零部件的加工精度、表面缺陷及裝配狀態,為智能制造提供數據支持。嵌入式視覺系統(如Jetson AGX Orin)結合eBUS協議可以整合來自不同工位的多源數據(如可見光檢測、紅外熱成像、振動傳感器等),實現全流程的質量控制和自動化優化。
3智慧城市交通管理
在智慧城市交通管理中,通過安裝在路口、收費站及車載終端的多模態攝像頭(如全局快門攝像頭、熱成像儀),實時監測車輛流量、車牌信息及行人行為,為交通調度和自動駕駛提供低延遲的決策依據。嵌入式平臺(如NVIDIA Drive)結合GMSL/MIPI協議可同步處理多路視頻流(如環視攝像頭+毫米波雷達),實現低延遲的復雜環境感知。
4數字醫療
在數字化醫療場景中,通過內窺鏡、手術顯微鏡及可穿戴設備中的微型攝像頭,實時采集患者影像數據(如組織形態、血流信號),為遠程診斷和機器人手術提供高精度視覺反饋。嵌入式系統通過傳輸協議整合多模態數據,實現術中實時AI輔助。
因此,借助eBUS,開發者能夠輕松將這些設備與高光譜相機結合,開展各種嵌入式光譜成像應用。解決了數據傳輸、接口兼容性等問題,并為光譜成像技術的實時應用提供了強有力的支持。
友思特產品
eBUS Edge
對于使用各種先進相機、傳感器和嵌入式平臺開發成像系統的機器視覺設計人員來說,eBUS Edge是一種軟件解決方案,通過將任何設備轉換為符合 GenICam 標準的標準化GigE Vision設備來簡化部署,從而實現跨設備的可移植性和互操作性,同時仍允許第三方處理應用程序。
設計和部署基于標準的檢測解決方案,無需在已經很緊湊的系統中添加額外的專用硬件,并輕松地將高級傳感器和攝像頭添加到現有的檢測應用中,以改進機器視覺檢測系統,而不受設備限制。
通過將數據轉換為GigE Vision,最終用戶可以使用現成的圖像處理軟件,并朝著先進的工廠自動化應用發展。
而GenlCam允許用戶繼續控制設備。本地決策可減少帶寬需求,同時為更復雜的分析任務保留集中處理能力。
審核編輯 黃宇
-
嵌入式
+關注
關注
5143文章
19561瀏覽量
315449 -
相機
+關注
關注
4文章
1442瀏覽量
54520 -
光譜
+關注
關注
4文章
907瀏覽量
35944 -
高光譜
+關注
關注
0文章
406瀏覽量
10226
發布評論請先 登錄
高光譜相機在生物醫學中的應用:病理分析、智慧中醫與成分分析
高光譜相機在工業檢測中的應用:LED屏檢、PCB板缺陷檢測
高光譜相機在農業監測中的應用
高光譜相機在防火材料研究與應用

高光譜相機在礦石分選中的應用

高光譜相機:農業監測革命新利器!
利用恩智浦云實驗室部署AI模型

評論