在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

恩智浦Maivin AI Vision工具包加快基于視覺的工業(yè)設(shè)計(jì)

NXP客棧 ? 來源:NXP客棧 ? 作者:NXP客棧 ? 2022-08-26 09:09 ? 次閱讀

恩智浦敢為人先,敢于引領(lǐng)和創(chuàng)新。恩智浦一直致力于為i.MX應(yīng)用處理器的攝像頭模塊接口提供支持。恩智浦也在許多SoC上實(shí)現(xiàn)了CPUGPU等共享資源的機(jī)器學(xué)習(xí)。這一功能仍然運(yùn)行良好 (根據(jù)應(yīng)用的需求而異),這篇文章將闡述恩智浦為何決定對其進(jìn)行升級,并在i.MX 8M Plus中添加圖像信號處理器 (ISP) 和機(jī)器學(xué)習(xí) (ML) 加速器。

機(jī)器學(xué)習(xí)的重要性與日俱增

在云端進(jìn)行機(jī)器學(xué)習(xí)是支持人們使用智能手機(jī)語音助手或智能揚(yáng)聲器語音助手的關(guān)鍵技術(shù),它還支持社交媒體甚至手機(jī)對包含特定人員的照片進(jìn)行分組。但這些用例都依賴在云端服務(wù)器上運(yùn)行的機(jī)器學(xué)習(xí)。

恩智浦解決的真正挑戰(zhàn)是邊緣機(jī)器學(xué)習(xí)。所有機(jī)器學(xué)習(xí)推理在i.MX 8M Plus等邊緣處理器進(jìn)行本地運(yùn)行。在邊緣運(yùn)行ML推理意味著,即使網(wǎng)絡(luò)訪問中斷,應(yīng)用也能夠繼續(xù)運(yùn)行——這對于監(jiān)控或異常檢測等應(yīng)用至關(guān)重要,對在沒有網(wǎng)絡(luò)接入的偏遠(yuǎn)地區(qū)運(yùn)行也非常重要。與必須將數(shù)據(jù)發(fā)送到服務(wù)器進(jìn)行處理并將結(jié)果發(fā)回的情況相比,在邊緣運(yùn)行ML推理還降低了決策延遲。例如,當(dāng)執(zhí)行工業(yè)工廠現(xiàn)場目視檢查時,或需要決定是接受還是拒絕一掠而過的產(chǎn)品時,低延遲至關(guān)重要。

邊緣機(jī)器學(xué)習(xí)的另一個關(guān)鍵優(yōu)勢是保護(hù)數(shù)據(jù)安全。收集的專有數(shù)據(jù)(如邊緣設(shè)備捕獲的員工、生產(chǎn)和物流數(shù)據(jù))將在邊緣進(jìn)行處理并保存在本地。系統(tǒng)不會把信息發(fā)送到云端進(jìn)行處理,僅在云端進(jìn)行記錄和跟蹤。企業(yè)的隱私不會受到損害,企業(yè)可自行決定是否在云端共享信息。

需要什么程度的邊緣機(jī)器學(xué)習(xí)?

現(xiàn)在,考慮到對邊緣機(jī)器學(xué)習(xí)的需求較大,問題變成了需要什么程度的機(jī)器學(xué)習(xí)。衡量機(jī)器學(xué)習(xí)加速器的一種方法是每秒的運(yùn)算次數(shù) (通常是8位整數(shù)相乘或累加),通常稱為TOPS(即每秒萬億次運(yùn)算)。這是基本基準(zhǔn),因?yàn)檎w系統(tǒng)性能也受許多其他因素影響,但TOPS是使用最多的機(jī)器學(xué)習(xí)測量方法之一。

事實(shí)證明,在邊緣進(jìn)行完整的語音識別 (不只是關(guān)鍵字識別) 需要大約1-2個TOPS (具體取決于算法,如果希望了解用戶想表達(dá)的意思,而不僅僅是將語音轉(zhuǎn)換為文本,則需要更多運(yùn)算次數(shù))。以60fps執(zhí)行目標(biāo)檢測 (使用Yolov3等算法) 也需要大約2-3個TOPS。因此,機(jī)器學(xué)習(xí)加速 (如i.MX 8M Plus的2.3 TOPS) 是這類應(yīng)用的最佳選擇。

下一步:圖像信號處理器 (ISP)

所有基于攝像頭的系統(tǒng)中都具有ISP功能,盡管有時可以集成到攝像頭模塊或嵌入到應(yīng)用處理器中,并且可能對用戶隱藏。ISP通常會進(jìn)行多種類型的圖像增強(qiáng),其主要目的是將原始圖像傳感器的每像素輸出的單色分量轉(zhuǎn)換為系統(tǒng)中其他部分更常用的RGB或YUV圖像。

當(dāng)攝像頭輸入來自網(wǎng)絡(luò)或網(wǎng)絡(luò)攝像頭 (一般通過以太網(wǎng)USB連接到應(yīng)用處理器) 時,沒有ISP的應(yīng)用處理器在基于視覺的系統(tǒng)中運(yùn)行良好。對于這些應(yīng)用,攝像頭可以與處理器保持一定距離,甚至可以達(dá)到100米左右。攝像頭本身內(nèi)置了ISP和處理器,可轉(zhuǎn)換圖像傳感器信息并對視頻流進(jìn)行編碼,然后再通過網(wǎng)絡(luò)發(fā)送。

沒有ISP的應(yīng)用處理器也適用于分辨率相對較低的攝像頭。在100萬像素或更低的分辨率下,圖像傳感器通常內(nèi)置了ISP,可將RGB或YUV圖像輸出到應(yīng)用處理器,處理器內(nèi)不需要ISP。

但在約200萬像素 (1080p) 或更高的分辨率下,大多數(shù)圖像傳感器沒有內(nèi)置ISP,而是依賴系統(tǒng)中其他部件的ISP。可能依賴獨(dú)立的ISP芯片 (可以運(yùn)行,但會增加系統(tǒng)的功率和成本),也可能依賴集成在應(yīng)用處理器中的ISP。正因如此,恩智浦選擇采用i.MX 8M Plus的解決方案——提供高質(zhì)量的成像,同時也是優(yōu)化的成像解決方案,特別是在200萬像素和更高分辨率的情況下。

借助基于智能視覺的系統(tǒng),智能工廠可以提高生產(chǎn)率、質(zhì)量和安全性。

推動智能邊緣設(shè)備的發(fā)展

綜上所述,i.MX 8M Plus應(yīng)用處理器集2.3 TOPS機(jī)器學(xué)習(xí)加速器和ISP于一身,無論是用于智能樓宇、智慧城市還是工業(yè)物聯(lián)網(wǎng)應(yīng)用,都將成為邊緣嵌入式視覺系統(tǒng)的關(guān)鍵元件。

借助嵌入式ISP,它可以打造直連到本地圖像傳感器的高質(zhì)量圖像優(yōu)化系統(tǒng),甚至可以將這些圖像數(shù)據(jù)提供給較新的機(jī)器學(xué)習(xí)算法,所有這些都可以減輕本地機(jī)器學(xué)習(xí)加速器的負(fù)擔(dān)。

采用為機(jī)器學(xué)習(xí)和視覺系統(tǒng)而優(yōu)化的i.MX 8M Plus架構(gòu),邊緣設(shè)備設(shè)計(jì)人員能夠像恩智浦一樣敢為人先,敢于引領(lǐng)和創(chuàng)新。他們擁有強(qiáng)大的機(jī)器學(xué)習(xí)能力,配合高清攝像頭系統(tǒng),能夠讓設(shè)備看得更清晰、更遠(yuǎn)。嵌入式領(lǐng)域不斷涌現(xiàn)新的創(chuàng)新機(jī)遇。

審核編輯:彭靜
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19819

    瀏覽量

    233675
  • 恩智浦
    +關(guān)注

    關(guān)注

    14

    文章

    5952

    瀏覽量

    113503
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8493

    瀏覽量

    134145
  • 工具包
    +關(guān)注

    關(guān)注

    0

    文章

    47

    瀏覽量

    9678

原文標(biāo)題:硬核解讀:i.MX 8M應(yīng)用處理器為何要添加ISP和機(jī)器學(xué)習(xí)加速器?

文章出處:【微信號:NXP客棧,微信公眾號:NXP客棧】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    「2025創(chuàng)新技術(shù)峰會」飛凌嵌入式亮相上海首站

    2025年5月14日,【2025年創(chuàng)新技術(shù)峰會】首站登陸上海,飛凌嵌入式作為(NXP)金牌合作伙伴受邀參會,聚焦“工業(yè)與物聯(lián)網(wǎng)”
    的頭像 發(fā)表于 05-15 13:38 ?525次閱讀
    「2025<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>創(chuàng)新技術(shù)峰會」飛凌嵌入式亮相上海首站

    智能家電創(chuàng)新方案一文看盡 智能家電技術(shù)日給你答案

    ? 科技賦能,將會讓我們?nèi)粘5募揖由钭兊枚嘀悄埽孔屛覀円黄鸬?“智能家電技術(shù)日” 中找答案—— 在日前舉辦的“智能家電技術(shù)日”活動中,
    的頭像 發(fā)表于 03-28 11:46 ?3083次閱讀
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>智能家電創(chuàng)新方案一文看盡  <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>智能家電技術(shù)日給你答案

    擬收購邊緣AI企業(yè)Kinara

    半導(dǎo)體宣布已達(dá)成最終協(xié)議收購Kinara, Inc.——高性能、低功耗且可編程的分立神經(jīng)處理單元(NPU)行業(yè)的領(lǐng)先企業(yè)。該公司產(chǎn)品支持廣泛的邊緣AI應(yīng)用,包括多模態(tài)生成式AI
    的頭像 發(fā)表于 02-21 14:15 ?632次閱讀

    云計(jì)算開發(fā)工具包的功能

    隨著云計(jì)算技術(shù)的不斷成熟,越來越多的企業(yè)開始將應(yīng)用和服務(wù)遷移到云端,以享受彈性計(jì)算資源、高可用性和成本效益等優(yōu)勢。為了加速這一進(jìn)程,云計(jì)算服務(wù)提供商推出了各種開發(fā)工具包。下面,AI部落小編帶您了解云計(jì)算開發(fā)工具包的主要功能。
    的頭像 發(fā)表于 02-21 11:02 ?258次閱讀

    宣布收購NPU廠商Kinara

    半導(dǎo)體公司近日宣布,已正式簽署最終協(xié)議,將收購高性能、低功耗且可編程離散神經(jīng)處理單元(NPU)供應(yīng)商Kinara。此次收購將顯著增強(qiáng)在邊緣人工智能(
    的頭像 發(fā)表于 02-18 14:29 ?565次閱讀

    3.07億美元收購Kinara,強(qiáng)化邊緣AI布局

    近日,半導(dǎo)體公司(NXP Semiconductors)宣布了一項(xiàng)重大收購計(jì)劃,將以3.07億美元(約合22.44億元人民幣)現(xiàn)金收購邊緣AI NPU(神經(jīng)處理單元)公司Kinara。這一戰(zhàn)略收購旨在進(jìn)一步加強(qiáng)
    的頭像 發(fā)表于 02-12 17:02 ?653次閱讀

    攜手RT-Thread全力賦能智能工業(yè)與物聯(lián)網(wǎng)新時代

    今天,邊緣AI的發(fā)展正在推動工業(yè)與物聯(lián)網(wǎng)應(yīng)用進(jìn)入一個新時代。如何整合各方面的技術(shù)資源,營造一個完善的開發(fā)生態(tài),打造創(chuàng)新而多樣化的解決方案,是嵌入式開發(fā)社區(qū)面對的新課題。 在這方面,
    的頭像 發(fā)表于 01-10 11:55 ?963次閱讀
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>攜手RT-Thread全力賦能智能<b class='flag-5'>工業(yè)</b>與物聯(lián)網(wǎng)新時代

    Labview聲音和振動工具包示例文件Sound Level

    Labview 聲音和振動工具包示例文件,聲壓測試,有模擬和DAQ兩個文件。
    發(fā)表于 01-05 09:15 ?0次下載

    最新Simplicity SDK軟件開發(fā)工具包發(fā)布

    最新的SimplicitySDK軟件開發(fā)工具包已經(jīng)發(fā)布!此次更新針對SiliconLabs(芯科科技)第二代無線開發(fā)平臺帶來了包括藍(lán)牙6.0的信道探測(Channel Sounding
    的頭像 發(fā)表于 12-24 09:47 ?778次閱讀

    eIQ Time Series Studio 工具使用全攻略

    ? 基本介紹 eIQ Time Series Studio(簡稱eIQ TSS)是半導(dǎo)體推出的一款專為嵌入式微控制器設(shè)計(jì)的基于時間序列的AI和機(jī)器學(xué)習(xí)開發(fā)套件。它集成了自動機(jī)器學(xué)習(xí)功能,旨在
    的頭像 發(fā)表于 12-12 09:37 ?1539次閱讀
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>eIQ Time Series Studio <b class='flag-5'>工具</b>使用全攻略

    基于EasyGo Vs工具包和Nl veristand軟件進(jìn)行的永磁同步電機(jī)實(shí)時仿真

    EasyGo Vs Addon是一款領(lǐng)先的FPGA仿真工具包軟件,它強(qiáng)大地連接了VeriStand軟件與Matlab/Simulink,為實(shí)時測試和驗(yàn)證領(lǐng)域帶來了前所未有的便利和效率,特別適用于汽車
    的頭像 發(fā)表于 11-27 11:28 ?924次閱讀
    基于EasyGo Vs<b class='flag-5'>工具包</b>和Nl veristand軟件進(jìn)行的永磁同步電機(jī)實(shí)時仿真

    eIQ AI和機(jī)器學(xué)習(xí)開發(fā)軟件增加兩款新工具

    在eIQ AI和機(jī)器學(xué)習(xí)開發(fā)軟件中增加了帶有檢索增強(qiáng)生成(RAG)與微調(diào)的生成式人工智能(GenAI)流程和eIQ Time Series Studio,以便在小型微控制器(MCU)、功能更強(qiáng)大的大型應(yīng)用處理器(MPU)等
    的頭像 發(fā)表于 11-01 11:39 ?948次閱讀

    基于MCX N系列MCU的應(yīng)用示例

    全新MCX微控制器系列,為新一代工業(yè)與物聯(lián)網(wǎng)廣泛的應(yīng)用賦能,受到廣大邊緣智能開發(fā)者的青睞。
    的頭像 發(fā)表于 10-25 14:26 ?1503次閱讀

    FPGA仿真工具包軟件EasyGo Vs Addon介紹

    EasyGo Vs Addon是一款領(lǐng)先的FPGA仿真工具包軟件,它強(qiáng)大地連接了VeriStand軟件與Matlab/Simulink,為實(shí)時測試和驗(yàn)證領(lǐng)域帶來了前所未有的便利和效率,特別適用于汽車、航空航天和能源電力等實(shí)時測試和驗(yàn)證至關(guān)重要的行業(yè)。
    的頭像 發(fā)表于 10-24 15:55 ?973次閱讀
    FPGA仿真<b class='flag-5'>工具包</b>軟件EasyGo Vs Addon介紹

    采用德州儀器 (TI) 工具包進(jìn)行模擬前端設(shè)計(jì)應(yīng)用說明

    電子發(fā)燒友網(wǎng)站提供《采用德州儀器 (TI) 工具包進(jìn)行模擬前端設(shè)計(jì)應(yīng)用說明.pdf》資料免費(fèi)下載
    發(fā)表于 09-09 11:21 ?0次下載
    采用德州儀器 (TI) <b class='flag-5'>工具包</b>進(jìn)行模擬前端設(shè)計(jì)應(yīng)用說明
    主站蜘蛛池模板: 美女扒尿口给男人桶到爽 | 又粗又大撑满了好爽 | 欧美一级特黄乱妇高清视频 | 亚洲国产综合视频 | 色综合天天综合网站中国 | 色婷婷色99国产综合精品 | 性欧美f| 一级片免费在线观看 | 特黄特黄一级高清免费大片 | 中国黄色一级毛片 | 亚洲最新黄色网址 | 国产黄网站在线观看 | 视频一区二区免费 | 日韩三级免费 | 亚洲狠狠婷婷综合久久久久图片 | 天天爱天天做久久天天狠狼 | 久久精品亚洲精品国产色婷 | 伊人网大香| ts人妖国产一区 | 999精品国产 | 国产欧美综合在线 | 免费看污黄视频软件 | 濑亚美莉iptd619在线观看 | 午夜影视啪啪免费体验区入口 | 国产精品久久久久久久久 | 六月婷婷综合 | 国产在线播放一区 | 狠狠色狠狠色综合网 | 天天噜噜日日噜噜久久综合网 | 激情五月婷婷基地 | 成人欧美一区二区三区小说 | 初恋视频黄色 | 国产在线美女 | 午夜精品免费 | 午夜精品久久久久久91 | 有坂深雪在线 | 日本女人啪啪 | 日本全黄视频 | jizz免费一区二区三区 | 天天爱添天天爱添天天爱添 | 日不卡在线|