在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

TinyML音頻識別應用及在Cortex-M4開發板上的入門

冬至配餃子 ? 來源:Mary Bennion ? 作者:Mary Bennion ? 2022-07-27 16:27 ? 次閱讀

TinyML很強大是因為它幫助微型設備基于大量數據采集制定決策方法,而不會浪費時間和精力傳輸數據。假設你正在追蹤非洲大草原的動物行為,你想知道獅子在一天中不同時間咆哮的頻率。

你可以選擇以下方法收集數據:

?躲在草叢中,用記事本和鉛筆記錄每次聽到的吼聲。

?用設置好的帶電池的錄音機記錄,每隔幾星期去更換存儲卡。

?通過數據連接(如蜂窩網絡)傳輸音頻。

以上所有方法都有以下缺點:

?將人員留在現場是非常昂貴的,同時還需考慮他們的安全問題

?駕車去收集存儲卡需要耗費時間和錢,而且每隔幾周才可以獲得新數據。

?傳輸數據會消耗大量能量和錢,并且大部分地區的網絡帶寬也受到限制。這種方法可能會更快地獲得數據,但仍需定期開車去更換電池。

除了這些缺點以外,在錄音中數出獅子的吼聲真的很無聊,而且還需要花費寶貴的資金。訓練機器學習模型來識別錄音中的獅子吼聲并自動計數可以減輕這一煩惱。為此需要先收集一組帶標簽的數據輸入到算法中,然后創建一個模型來識別音頻中的吼叫聲。

pYYBAGLg9a-ASp4CAAB912YTxu4827.png

這將解決需要花費數小時收聽Savanna音頻的問題。但是這樣仍然保留了上述缺點。

在過去,機器學習模型只能存在于強大的大型硬件上,導致它們大多數時候只能在實驗室的服務器上運行。但是近年來機器學習算法和低功耗硬件已經發展到可以在嵌入式設備上運行復雜模型的階段。

如果我們采用獅吼計數模型應用在嵌入式設備中并部署到野外,我們會獲得以下優勢:

?我們的設備無需通過昂貴的高帶寬網絡來發送記錄到的音頻,而是可以當場計算聽到的吼聲數量,并發送極低功率的遠程無線電,像LoRa那樣。

?獲得咆哮聲的數量就夠了,所以不需要存儲音頻以及收集存儲卡。

?此設備很便宜且功耗極低,僅用一個電池即可運行數年。

?沒有人需要聽100小時的野生動植物混合錄音帶了。

這聽起來是一個很好的解決方案。我們解決了一些實際問題,并獲得了比以前更便宜更可靠的解決方案。

但是機器學習是一個令人生畏的主題。它技術性很強并涉及許多新概念,它也存在很多陷阱,可以很容易地訓練一個看似有用但無法工作的模型。

更重要的是,在嵌入式設備上運行機器學習代碼非常困難。除了需要了解機器學習和信號處理算法的知識外,通常還會受制于硬件性能的限制,可能要運用書中的所有技巧才能發揮給定類型芯片的全部性能。

當我們寫《TinyML》這本書時,我意識到盡管任何人都可以輕松地開始學習基于嵌入式設備的機器學習。但想要構建出可用于生產的東西卻會困難得多。對于專注解決實際問題的普通工程師來說,一天中沒有足夠的時間來學習機器學習,更不用說要為特定的微控制器架構優化底層ML代碼了。機器學習聽起來是一個不錯的解決方案,但是它需要大量的投入來學習和使用。

這就是為什么我對Edge Impulse感到非常感興趣的原因(事實上我因為太感興趣而加入了這個團隊)。它是一組用于處理機器學習中繁瑣部分的工具,使開發人員可以專注于他們要解決的問題。Edge Impulse讓收集數據集,選擇正確的機器學習算法,訓練生產級模型以及測試的過程變得容易。然后它將整個內容導出為可以輕松放入項目中的高效,高度優化的C ++庫。

使用Edge Impulse創建咆哮計數模型的步驟很簡單:

1.收集少量音頻數據,給他們標記為“吼”或“非吼”,整個過程只需幾分鐘就可以完成。
2.使用Edge Impulse CLI將數據上傳到Edge Impulse。
3.按照說明訓練簡單模型。
4.添加更多數據并調整模型的設置直到獲得所需的精準度。
5.將模型導出為C ++庫,并將其添加到嵌入式項目中去。

整個過程可以在幾分鐘內完成,你不必親自參觀非洲大草原。

由于現實中沒有獅子,所以本教程訓練了一個可以識別家庭聲音的模型:即水龍頭發出的自來水聲。 要訓練的模型大小約為18Kb并且體積小巧,卻可以運用在復雜應用的同時為應用程序代碼留出大量空間。

如果你有一個基于Arm Cortex-M4的STM32 IoT Node Discovery Kit套件開發板,就可以通過WiFi或串行捕獲自己的數據集。如果你沒有或者正在等待一個板子,可以下載我從Sunnyvale公寓收集的數據集。Edge Impulse構建了一個可以內置到任何Cortex-M或Cortex-A設備中緊湊獨立的C ++庫。我們自動使用FPU,矢量擴展,CMSIS-DSP和CMSIS-NN來優化性能,并最大程度地減少RAM和閃存的使用。

除獅子和水龍頭外,TinyML還有很多不同應用。想象一下可以識別語音命令的微型設備:當機器出現故障時進行識別,根據周圍的聲音了解房屋中發生的活動。它最大的優點是借助設備上的推理功能可以保護用戶隱私-無需將任何音頻發送到云上。

通過使用Edge Impulse任何開發人員都可以輕松構建ML應用程序,Edge Impulse為所有想把驚人想法應用在硬件領域的人實現了夢想。我們隨著技術的發展不斷改進我們的平臺,因此每個人都將從最新的算法和技術中受益。

審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 微控制器
    +關注

    關注

    48

    文章

    7923

    瀏覽量

    153801
  • RAM
    RAM
    +關注

    關注

    8

    文章

    1391

    瀏覽量

    116886
  • Cortex-M4
    +關注

    關注

    6

    文章

    98

    瀏覽量

    47076
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    【新品】遠距離圖傳數傳模塊開發板、藍牙模塊開發板、無線模塊開發板

    新品上市圖傳數傳模塊開發板藍牙模塊開發板國產無線模塊開發板部分型號參與送樣文末了解詳情↓↓↓EWT611-900NW20S遠距離圖傳數傳模塊開發板EWT611-900NW20S是一款
    的頭像 發表于 06-12 19:33 ?61次閱讀
    【新品】遠距離圖傳數傳模塊<b class='flag-5'>開發板</b>、藍牙模塊<b class='flag-5'>開發板</b>、無線模塊<b class='flag-5'>開發板</b>

    STM32F3系列、STM32F4系列、STM32L4系列和STM32L4+系列Cortex-M4編程手冊

    電子發燒友網站提供《STM32F3系列、STM32F4系列、STM32L4系列和STM32L4+系列Cortex-M4編程手冊.pdf》資料免費下載
    發表于 06-06 17:06 ?4次下載

    藍牙音頻串口透傳開發板音頻接收方案

    物聯網與智能硬件爆發的時代,開發者急需一款能同時攻克音頻處理與數據通信痛點的全能工具。ANS-DB003M的出現,或許正是答案。今天,我們就來深度測評一款備受矚目的產品—ANS-DB
    的頭像 發表于 06-06 16:48 ?105次閱讀
    藍牙<b class='flag-5'>音頻</b>串口透傳<b class='flag-5'>開發板</b><b class='flag-5'>音頻</b>接收方案

    PPEC新品發布丨圖形化編程數字電源專用 ARM Cortex-M4 MCU

    痛點。該芯片基于120MHz主頻Cortex-M4內核,集成高精度PWM、多協議通信接口等豐富資源。硬件設計,采用LQFP64封裝,兼容主流ARM芯片引腳布局
    的頭像 發表于 05-22 17:30 ?355次閱讀
    PPEC新品發布丨圖形化編程數字電源專用 ARM <b class='flag-5'>Cortex-M4</b> MCU

    米爾基于瑞芯微RK3506核心開發板

    MYC-YR3506核心開發板新一代入門級國產工業處理器RK3506,3核A7+單核M0多核異構RK3506B:3*Cortex-A7@
    發表于 05-15 16:00 ?1次下載

    基于RK3576開發板的人臉識別算法

    RK3576開發板展示人臉識別算法例程和API說明
    的頭像 發表于 05-07 16:48 ?1845次閱讀
    基于RK3576<b class='flag-5'>開發板</b>的人臉<b class='flag-5'>識別</b>算法

    i.MX8MMini中的Cortex-M4不支持SDIO嗎?

    我們正在嘗試使用 i.MX8MMini (Cortex-A53/-M4) 并考慮 Cortex-M4 協處理器中實現無線模塊 (SDIO I/F)。 關于
    發表于 04-03 06:45

    東芝推出七款基于Arm Cortex-M4內核的32位微控制器

    東芝電子元件及存儲裝置株式會社(“東芝”)宣布,最新推出七款配備Cortex-M4內核的32位微控制器,進一步擴大其電機控制微控制器產品線。其中,六款產品組成新的產品組合——M4K組(1)[1],另外一款產品加入M470組。
    的頭像 發表于 01-22 18:05 ?724次閱讀
    東芝推出七款基于Arm <b class='flag-5'>Cortex-M4</b>內核的32位微控制器

    正點原子fpga開發板不同型號

    ZYNQ-7000系列 ZYNQ-7000系列是正點原子的入門級FPGA開發板,適合初學者和教育用途。這些開發板搭載了Xilinx的Zynq-7000系列SoC芯片,集成了ARM Corte
    的頭像 發表于 11-13 09:30 ?3319次閱讀

    航順 HK32F407ZGT7 芯片的開發板:多功能外設助力多領域應用

    HK32F407ZGT7開發板 1.開發板簡介 開發板是基于航順芯片公司F4系列HK32F407ZGT7開發的一款
    的頭像 發表于 11-08 14:43 ?614次閱讀
    航順 HK32F407ZGT7 芯片的<b class='flag-5'>開發板</b>:多功能外設助力多領域應用

    【干貨】有了這份HK32F407ZGT7開發板介紹,1萬個項目輕松拿捏!

    2024-11-0811:39·航順HK32MCUHK32F407ZGT7開發板開發板簡介開發板是基于航順芯片公司F4系列HK32F407ZGT7
    的頭像 發表于 11-08 13:28 ?725次閱讀
    【干貨】有了這份HK32F407ZGT7<b class='flag-5'>開發板</b>介紹,1萬個項目輕松拿捏!

    【干貨】性價比拉滿!HK32F407VG開發板介紹

    開發板簡介開發板是基于航順芯片公司F4系列HK32F407VGT7芯片的一款開發板Cortex-M4內核,最高主頻168MHz,內置1MK
    的頭像 發表于 11-08 13:27 ?705次閱讀
    【干貨】性價比拉滿!HK32F407VG<b class='flag-5'>開發板</b>介紹

    ARM開發板與樹莓派的比較

    處理器 ARM開發板通常采用不同的ARM處理器,如Cortex-A系列、Cortex-M系列等,而樹莓派則主要使用博通的ARM處理器。樹莓派的處理器性能相對較高,尤其是最新的樹莓派
    的頭像 發表于 11-05 11:11 ?1280次閱讀

    TI開發板啟用Android Automotive

    電子發燒友網站提供《TI開發板啟用Android Automotive.pdf》資料免費下載
    發表于 09-18 14:52 ?0次下載
    <b class='flag-5'>在</b>TI<b class='flag-5'>開發板</b><b class='flag-5'>上</b>啟用Android Automotive

    新唐MA35D1核心-米爾開發板-原生支持17路UART和4路CAN FD

    MYC-LMA35核心開發板多核異構的新唐MA35D1核心,賦能邊緣計算新唐MA35D1,雙核Cortex-A35和Cortex-M4
    發表于 08-15 16:03 ?9次下載
    主站蜘蛛池模板: 五月天六月丁香 | 国产性老妇女做爰在线 | 天天插天天操天天射 | 欧美一级www片免费观看 | 一级一片免费播放 | 国产午夜久久精品 | 五月婷婷丁香六月 | 日本免费在线视频 | 啪啪日韩 | 黄网站色视频免费看无下截 | 女女同免费播放毛片 | 免费看片aⅴ免费大片 | 足控免费视频xxav | 色综合天天 | 色综久久 | 海棠高h粗暴调教双性男男 韩国韩宝贝2020vip福利视频 | 黄色a级免费 | 人与牲动交bbbbxxxx | 日韩免费无砖专区2020狼 | 天天操天天操天天操 | 六月综合激情 | 一级特色黄色片 | 免费色视频| 国产精品天天看 | 欧美性极品高清 | 国产一区中文字幕 | 网站大全黄免费 | 天天做天天爱夜夜爽 | 国产在线色视频 | 欲色淫香| 久久99久久99精品免观看 | 亚洲三级电影 | 国内精品99 | 清朝荒淫牲艳史在线播放 | 青草青草视频2免费观看 | 午夜免费观看福利片一区二区三区 | 免费视频一区 | 日韩免费一级毛片 | 亚洲综合成人在线 | aaa一级片| 美女视频一区二区 |