在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

將eFPGA應用于嵌入式360度視域視覺系統之中

電子設計 ? 來源:電子設計 ? 作者:電子設計 ? 2020-12-26 01:21 ? 次閱讀

工業和信息化部、公安部和交通運輸部聯合發布“關于印發《智能網聯汽車道路測試管理規范(試行)》的通知”,為我國智能網聯汽車道路測試提供了相關法律依據。三部委在賦予智能網聯汽車上路資格的同時,也提出了若干嚴格的條件。

其中,在第二章“測試主體、測試駕駛人及測試車輛”的第七條第(四)點中,三部委要求:具備車輛狀態記錄、存儲及在線監控功能,能實時回傳下列第1、2、3項信息,并自動記錄和存儲下列各項信息在車輛事故或失效狀況發生前至少90秒的數據,數據存儲時間不少于3年:

1. 車輛控制模式;

2. 車輛位置;

3. 車輛速度、加速度等運動狀態;

4. 環境感知與響應狀態;

5. 車輛燈光、信號實時狀態;

6. 車輛外部360度視頻監控情況;

7. 反映測試駕駛人和人機交互狀態的車內視頻及語音監控情況;

8. 車輛接收的遠程控制指令(如有);

9. 車輛故障情況(如有)。

由此可以看出,上述條件除了對進行道路測試的智能網聯汽車有若干功能性要求外,還在相關領域將推動若干新一代通信、監控、控制和存儲等技術的發展,為智能網聯汽車專用SoC的開發提供新的市場機會。

嵌入式FPGA(eFPGA)將在這類芯片中扮演重要角色。如為了滿足第六條中提到的車輛外部360度視頻監控數據的獲取和處理,采用eFPGA來設計相關功能芯片具有很明顯的優勢。作為同時提供獨立FPGA芯片和eFPGA IP產品的公司,Achronix可以幫助智能汽車SoC設計人員先在FPGA芯片上開發和調試相關功能,而在市場進入批量化應用后無需顯著修改設計,立即將設計移植到搭載了eFPGA的SoC之上。

將eFPGA應用于嵌入式360度視域視覺系統中

帶有多個高分辨率攝像頭的嵌入式360°視域視覺系統已經進入了各種應用中,如汽車傳感器融合、視頻監控、目標檢測、運動分析等。在此類系統中,多個實時攝像機的視頻流(最多6個) 被匯聚在一起逐幀處理,進行失真和其他圖像偽影校正,調整曝光和白平衡,然后動態拼接成一個360°全景視圖,以4K清晰度和60 fps幀頻輸出,最終投影到一個球形坐標空間上。

目前用于此類應用的高分辨率魚眼相機鏡頭通常具有一個廣角視域(FOV)。環視相機系統最大的瓶頸之一是: 實時到或從外部存儲器存儲/讀取和訪問多路攝像機輸入數據,然后將其作為一個單一幀進行處理。硬件需要在一幀延遲內,在輸入攝像機傳入的原始傳感器數據和拼接輸出視頻之間完成處理運行。

高性能計算平臺一直朝著與CPU一起協同使用FPGA的方向發展,以便為實時圖像處理任務提供專門的硬件加速。 這種配置使得CPU能專注于特別復雜的算法,其中它們可以快速切換線程和上下文,并將重復性任務分配給一個FPGA,以充當可配置的硬件加速器/協處理器/卸載引擎。 即使將FPGA和CPU作為分立器件使用,系統也可以提高整體效率,因為這些技術不會發生沖突,而是像將手套戴在手上一樣來配合在一起。

例如,從魚眼鏡頭獲得的圖像遭受嚴重失真之苦,因而基于多個相機視頻生成的拼接操作是高度計算密集型的任務,其原因為它是點像素操作。這種拼接需要大量的實時圖像處理和高度并行化的架構。但是,這種下一代的應用超過了FPGA可不斷接續實現的性能,主要是由于芯片吞吐數據的延遲。這反過來會影響整個系統的整體延遲、吞吐速度和性能。

在一個SoC中加入可與CPU一起嵌入的eFPGA半導體知識產權(IP)。與一個獨立的FPGA芯片加CPU解決方案相比,嵌入式FPGA陣列結構具有獨特的優勢,主要優勢在于性能更強。一個eFPGA可通過一個寬的并行接口直接連接到ASIC(無I/O緩沖器)上,提供顯著提高的吞吐量,以及以個位數時鐘周期來計數的延遲。低延遲是復雜的圖像實時處理過程的關鍵,例如糾正魚眼鏡頭的失真這樣的處理。

利用Speedcore eFPGA IP,客戶可以定義其邏輯、內存和DSP資源需求,然后Achronix可配置其IP以滿足他們的需求。查找表(LUTs)、RAM單元塊和DSP64單元塊可以像積木一樣進行組合,為任何給定的應用創建最佳的可編程結構。

除了標準邏輯、嵌入式存儲器和DSP單元模塊之外,客戶還可以在Speedcore eFPGA結構里面定義他們自己的功能塊。通過把這些定制功能模塊與傳統構建模塊一起集成到邏輯陣列結構中,可添加優化過的功能來減少面積和提高目標應用的性能,可使eFPGA的性能得到極大的提高,特別是對嵌入式視覺和圖像處理算法非常有效。

用自定義單元塊來成功地解決高性能圖像處理就是一個很好的例子,在實現您只看一次(YOLO)這一種使用了神經網絡的、最先進的、實時對象檢測算法時,可以優于早期的方法大大提高性能。該算法依賴于大量的矩陣乘法器,而在FPGA中實現時,這些矩陣乘法器需要使用DSP和RAM模塊來構建;YOLO所需要的DSP和RAM模塊之間的最佳配置,與一個典型的FPGA陣列結構中發現的不匹配之處就會出現問題。例如,FPGA陣列結構可能提供18×27乘法/累加單元塊和32×128 RAM的DSP單元塊,而此時的最佳解決方案可能是帶有48×1024 RAM的16×8 DSP單元塊。通過創建實現最佳DSP和RAM模塊配置的定制單元塊,所得到的Speedcore陣列結構所使用的芯片面積就會減少40%,來實現相同的功能并且能獲得更高級別的系統性能。

在SoC中嵌入FPGA陣列結構提供了兩個額外的系統級好處:

更低的功耗 - 可編程I/O電路占獨立FPGA芯片總功耗的一半,而一個eFPGA可以與主控SoC中的其他模塊直接內部線路連接,完全不需要大型可編程I/O緩沖器。

更低的系統成本 - 由于eFPGA只需實現特定功能,eFPGA的裸片尺寸遠小于等效的獨立FPGA芯片,這是因為eFPGA不再需要可編程的I/O緩沖器和不必要的接口邏輯。

借助超低延遲和實時處理功能,可以有效實現基于360°視域的視覺系統,具有定制單元塊的Speedcore eFPGA與同一主控SoC中的一個CPU配合使用,非常適合去實現專用功能,如目標檢測和圖像識別、變形和失真校正、以及最后將最終圖像拼接在一起。在SoC中嵌入FPGA陣列結構是超深亞微米時代系統集成的一個自然發展過程。

審核編輯:符乾江
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 傳感器
    +關注

    關注

    2564

    文章

    52668

    瀏覽量

    764304
  • 視覺系統
    +關注

    關注

    3

    文章

    345

    瀏覽量

    31175
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    嵌入式開發入門指南:從零開始學習嵌入式

    特定功能的計算機系統,廣泛應用于智能家居、工業控制、醫療設備、車載系統等領域。 2. 學習嵌入式開發的前置知識熟悉C語言編程掌握基本的數據結構與算法了解數字電路與微控制器原理熟悉Lin
    發表于 05-15 09:29

    使用Lattice mVision打造嵌入式視覺系統解決方案

    嵌入式視覺嵌入式系統與機器視覺技術的集合,嵌入式視覺系統
    的頭像 發表于 03-06 16:09 ?722次閱讀

    什么是嵌入式人工智能

    嵌入式人工智能是指人工智能技術應用于嵌入式系統中的一種技術。嵌入式
    的頭像 發表于 12-11 09:23 ?896次閱讀
    什么是<b class='flag-5'>嵌入式</b>人工智能

    【「嵌入式系統設計與實現」閱讀體驗】+ 學習一個STM32的案例

    說明意法半導體在高校中推廣是很成功的,很多學生一談到嵌入式就想到STM32。今天學習的案例是“基于STM32的水果無損檢測及分揀系統”。這個作品的技術難點其實不大,很容易想到它就是用視覺做檢測,再加上
    發表于 12-06 22:22

    Achronix Speedcore eFPGA的特性和功能

    Speedcore嵌入式FPGA(embedded FPGAeFPGA)知識產權(IP)產品是Achronix公司于2016年推出的顛覆性技術,并于當年開始向最終客戶交付,目前出貨量
    的頭像 發表于 11-15 14:28 ?955次閱讀
    Achronix Speedcore <b class='flag-5'>eFPGA</b>的特性和功能

    嵌入式和人工智能究竟是什么關系?

    、連接主義和深度學習等不同的階段。目前,人工智能已經廣泛應用于各種領域,如自然語言處理、計算機視覺、智能推薦等。 嵌入式系統和人工智能在許多方面都存在密切的關聯性。首先,
    發表于 11-14 16:39

    安森美機器視覺系統解決方案

    ,它還用于驗證數據矩陣碼、檢查食品包裝和讀取條形碼。機器視覺系統方案指南全面介紹機器視覺系統方案及市場趨勢,本文為第二部分,重點介紹
    的頭像 發表于 11-14 09:53 ?663次閱讀
    安森美機器<b class='flag-5'>視覺系統</b>解決方案

    嵌入式系統與物聯網的結合

    隨著科技的飛速發展,嵌入式系統和物聯網(IoT)已經成為現代技術領域的重要組成部分。嵌入式系統是指嵌入到設備或
    的頭像 發表于 11-06 10:23 ?993次閱讀

    FPGA應用于人工智能的趨勢

    高速和低功耗 : FPGA通過優化硬件結構和算法實現,能夠在處理復雜的人工智能任務時保持高速和低功耗,這對于資源有限的嵌入式系統和移動設備尤為重要。 靈活性 : FPGA的可編程性使
    的頭像 發表于 10-25 09:20 ?1833次閱讀

    ARMxy嵌入式計算機在機器視覺中的卓越表現

    處理系統和輸出顯示系統三部分組成。嵌入式視覺系統硬件集成攝像頭模組和處理板,圖像捕獲和圖像處理功能結合在一臺設備中。設備支持邊緣計算,接收
    的頭像 發表于 10-10 14:47 ?503次閱讀
    ARMxy<b class='flag-5'>嵌入式</b>計算機在機器<b class='flag-5'>視覺</b>中的卓越表現

    Primemas選擇Achronix eFPGA技術用于Chiplet平臺

    高性能 FPGA嵌入式FPGAeFPGA) IP 的領導者 Achronix Semiconductor Corporation 和使用Chiplet 技術開發創新 SoC H
    的頭像 發表于 09-18 16:16 ?861次閱讀

    嵌入式系統的未來趨勢有哪些?

    嵌入式系統是指將我們的操作系統和功能軟件集成于計算機硬件系統之中,形成一個專用的計算機系統。那么
    發表于 09-12 15:42

    機器視覺系統用途與實現及市場趨勢

    ,它還用于驗證數據矩陣碼、檢查食品包裝和讀取條形碼。機器視覺白皮書全面介紹機器視覺系統及市場,本文為第一部分,重點介紹
    的頭像 發表于 07-26 09:22 ?1300次閱讀

    機器視覺嵌入式中的應用

    機器視覺嵌入式系統中的應用是一個廣泛而深入的話題,涉及到許多不同的領域和技術。 機器視覺嵌入式系統
    的頭像 發表于 07-16 10:30 ?910次閱讀

    嵌入式熱門領域有哪些?

    另一個備受關注的領域,已經在汽車行業展現出革命性的影響。在自動駕駛領域,嵌入式系統的重要性日益突出,它們被廣泛應用于與傳感器和控制系統配合,實現車輛的自主運行。自動駕駛技術的急速發展為
    發表于 07-16 09:23
    主站蜘蛛池模板: 午夜国产 | 天天搞天天干 | 精品免费视在线视频观看 | 免费在线一区二区三区 | 亚洲四虎影院 | 视频免费黄色 | 免费h视频在线观看 | 成年男人午夜片免费观看 | 欧美69色| 中国一级特黄真人毛片 | 色成人综合网 | 最新激情网 | 五月情视频在线观看 | 四虎国产精品免费入口 | 男女视频在线观看免费高清观看 | 色色色色网站 | 国产1卡2卡三卡四卡网站 | 国产自在自线午夜精品视频在 | 国产一级毛片国语版 | 91精品国产免费久久久久久青草 | 毛片毛| 人人草人人插 | 视频在线观看高清免费看 | 黄色美女免费网站 | 久久精品在 | 欧美成人午夜精品一区二区 | 亚洲午夜顶级嘿嘿嘿影院 | 影音先锋午夜资源网站 | 色播在线永久免费视频网站 | 成人精品第一区二区三区 | 亚洲区在线播放 | 国产精品你懂的在线播放 | 日韩成人免费观看 | 亚洲国产成a人v在线观看 | 高清国产下药迷倒美女 | 一区二区3区免费视频 | 免费视频不卡一区二区三区 | 日本69sexmovies | 久久精品午夜视频 | 日日噜噜噜夜夜爽爽狠狠视频 | 日韩精品在线一区二区 |