99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

TinyML音頻識別應(yīng)用及在Cortex-M4開發(fā)板上的入門

冬至配餃子 ? 來源:Mary Bennion ? 作者:Mary Bennion ? 2022-07-27 16:27 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

TinyML很強(qiáng)大是因為它幫助微型設(shè)備基于大量數(shù)據(jù)采集制定決策方法,而不會浪費(fèi)時間和精力傳輸數(shù)據(jù)。假設(shè)你正在追蹤非洲大草原的動物行為,你想知道獅子在一天中不同時間咆哮的頻率。

你可以選擇以下方法收集數(shù)據(jù):

?躲在草叢中,用記事本和鉛筆記錄每次聽到的吼聲。

?用設(shè)置好的帶電池的錄音機(jī)記錄,每隔幾星期去更換存儲卡。

?通過數(shù)據(jù)連接(如蜂窩網(wǎng)絡(luò))傳輸音頻。

以上所有方法都有以下缺點:

?將人員留在現(xiàn)場是非常昂貴的,同時還需考慮他們的安全問題

?駕車去收集存儲卡需要耗費(fèi)時間和錢,而且每隔幾周才可以獲得新數(shù)據(jù)。

?傳輸數(shù)據(jù)會消耗大量能量和錢,并且大部分地區(qū)的網(wǎng)絡(luò)帶寬也受到限制。這種方法可能會更快地獲得數(shù)據(jù),但仍需定期開車去更換電池。

除了這些缺點以外,在錄音中數(shù)出獅子的吼聲真的很無聊,而且還需要花費(fèi)寶貴的資金。訓(xùn)練機(jī)器學(xué)習(xí)模型來識別錄音中的獅子吼聲并自動計數(shù)可以減輕這一煩惱。為此需要先收集一組帶標(biāo)簽的數(shù)據(jù)輸入到算法中,然后創(chuàng)建一個模型來識別音頻中的吼叫聲。

pYYBAGLg9a-ASp4CAAB912YTxu4827.png

這將解決需要花費(fèi)數(shù)小時收聽Savanna音頻的問題。但是這樣仍然保留了上述缺點。

在過去,機(jī)器學(xué)習(xí)模型只能存在于強(qiáng)大的大型硬件上,導(dǎo)致它們大多數(shù)時候只能在實驗室的服務(wù)器上運(yùn)行。但是近年來機(jī)器學(xué)習(xí)算法和低功耗硬件已經(jīng)發(fā)展到可以在嵌入式設(shè)備上運(yùn)行復(fù)雜模型的階段。

如果我們采用獅吼計數(shù)模型應(yīng)用在嵌入式設(shè)備中并部署到野外,我們會獲得以下優(yōu)勢:

?我們的設(shè)備無需通過昂貴的高帶寬網(wǎng)絡(luò)來發(fā)送記錄到的音頻,而是可以當(dāng)場計算聽到的吼聲數(shù)量,并發(fā)送極低功率的遠(yuǎn)程無線電,像LoRa那樣。

?獲得咆哮聲的數(shù)量就夠了,所以不需要存儲音頻以及收集存儲卡。

?此設(shè)備很便宜且功耗極低,僅用一個電池即可運(yùn)行數(shù)年。

?沒有人需要聽100小時的野生動植物混合錄音帶了。

這聽起來是一個很好的解決方案。我們解決了一些實際問題,并獲得了比以前更便宜更可靠的解決方案。

但是機(jī)器學(xué)習(xí)是一個令人生畏的主題。它技術(shù)性很強(qiáng)并涉及許多新概念,它也存在很多陷阱,可以很容易地訓(xùn)練一個看似有用但無法工作的模型。

更重要的是,在嵌入式設(shè)備上運(yùn)行機(jī)器學(xué)習(xí)代碼非常困難。除了需要了解機(jī)器學(xué)習(xí)和信號處理算法的知識外,通常還會受制于硬件性能的限制,可能要運(yùn)用書中的所有技巧才能發(fā)揮給定類型芯片的全部性能。

當(dāng)我們寫《TinyML》這本書時,我意識到盡管任何人都可以輕松地開始學(xué)習(xí)基于嵌入式設(shè)備的機(jī)器學(xué)習(xí)。但想要構(gòu)建出可用于生產(chǎn)的東西卻會困難得多。對于專注解決實際問題的普通工程師來說,一天中沒有足夠的時間來學(xué)習(xí)機(jī)器學(xué)習(xí),更不用說要為特定的微控制器架構(gòu)優(yōu)化底層ML代碼了。機(jī)器學(xué)習(xí)聽起來是一個不錯的解決方案,但是它需要大量的投入來學(xué)習(xí)和使用。

這就是為什么我對Edge Impulse感到非常感興趣的原因(事實上我因為太感興趣而加入了這個團(tuán)隊)。它是一組用于處理機(jī)器學(xué)習(xí)中繁瑣部分的工具,使開發(fā)人員可以專注于他們要解決的問題。Edge Impulse讓收集數(shù)據(jù)集,選擇正確的機(jī)器學(xué)習(xí)算法,訓(xùn)練生產(chǎn)級模型以及測試的過程變得容易。然后它將整個內(nèi)容導(dǎo)出為可以輕松放入項目中的高效,高度優(yōu)化的C ++庫。

使用Edge Impulse創(chuàng)建咆哮計數(shù)模型的步驟很簡單:

1.收集少量音頻數(shù)據(jù),給他們標(biāo)記為“吼”或“非吼”,整個過程只需幾分鐘就可以完成。
2.使用Edge Impulse CLI將數(shù)據(jù)上傳到Edge Impulse。
3.按照說明訓(xùn)練簡單模型。
4.添加更多數(shù)據(jù)并調(diào)整模型的設(shè)置直到獲得所需的精準(zhǔn)度。
5.將模型導(dǎo)出為C ++庫,并將其添加到嵌入式項目中去。

整個過程可以在幾分鐘內(nèi)完成,你不必親自參觀非洲大草原。

由于現(xiàn)實中沒有獅子,所以本教程訓(xùn)練了一個可以識別家庭聲音的模型:即水龍頭發(fā)出的自來水聲。 要訓(xùn)練的模型大小約為18Kb并且體積小巧,卻可以運(yùn)用在復(fù)雜應(yīng)用的同時為應(yīng)用程序代碼留出大量空間。

如果你有一個基于Arm Cortex-M4的STM32 IoT Node Discovery Kit套件開發(fā)板,就可以通過WiFi或串行捕獲自己的數(shù)據(jù)集。如果你沒有或者正在等待一個板子,可以下載我從Sunnyvale公寓收集的數(shù)據(jù)集。Edge Impulse構(gòu)建了一個可以內(nèi)置到任何Cortex-M或Cortex-A設(shè)備中緊湊獨(dú)立的C ++庫。我們自動使用FPU,矢量擴(kuò)展,CMSIS-DSP和CMSIS-NN來優(yōu)化性能,并最大程度地減少RAM和閃存的使用。

除獅子和水龍頭外,TinyML還有很多不同應(yīng)用。想象一下可以識別語音命令的微型設(shè)備:當(dāng)機(jī)器出現(xiàn)故障時進(jìn)行識別,根據(jù)周圍的聲音了解房屋中發(fā)生的活動。它最大的優(yōu)點是借助設(shè)備上的推理功能可以保護(hù)用戶隱私-無需將任何音頻發(fā)送到云上。

通過使用Edge Impulse任何開發(fā)人員都可以輕松構(gòu)建ML應(yīng)用程序,Edge Impulse為所有想把驚人想法應(yīng)用在硬件領(lǐng)域的人實現(xiàn)了夢想。我們隨著技術(shù)的發(fā)展不斷改進(jìn)我們的平臺,因此每個人都將從最新的算法和技術(shù)中受益。

審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 微控制器
    +關(guān)注

    關(guān)注

    48

    文章

    7953

    瀏覽量

    155065
  • RAM
    RAM
    +關(guān)注

    關(guān)注

    8

    文章

    1392

    瀏覽量

    117535
  • Cortex-M4
    +關(guān)注

    關(guān)注

    6

    文章

    99

    瀏覽量

    47194
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    【RA-Eco-RA6M4開發(fā)板評測】+初識篇

    RA-Eco-RA6M4開發(fā)板是一款基于 Arm? Cortex?-M33 內(nèi)核的開發(fā)工具,且具有1MB 閃存、192kB支持奇偶校驗 SR
    發(fā)表于 07-16 19:06

    【新品】遠(yuǎn)距離圖傳數(shù)傳模塊開發(fā)板、藍(lán)牙模塊開發(fā)板、無線模塊開發(fā)板

    新品上市圖傳數(shù)傳模塊開發(fā)板藍(lán)牙模塊開發(fā)板國產(chǎn)無線模塊開發(fā)板部分型號參與送樣文末了解詳情↓↓↓EWT611-900NW20S遠(yuǎn)距離圖傳數(shù)傳模塊開發(fā)板EWT611-900NW20S是一款
    的頭像 發(fā)表于 06-12 19:33 ?347次閱讀
    【新品】遠(yuǎn)距離圖傳數(shù)傳模塊<b class='flag-5'>開發(fā)板</b>、藍(lán)牙模塊<b class='flag-5'>開發(fā)板</b>、無線模塊<b class='flag-5'>開發(fā)板</b>

    STM32F3系列、STM32F4系列、STM32L4系列和STM32L4+系列Cortex-M4編程手冊

    電子發(fā)燒友網(wǎng)站提供《STM32F3系列、STM32F4系列、STM32L4系列和STM32L4+系列Cortex-M4編程手冊.pdf》資料免費(fèi)下載
    發(fā)表于 06-06 17:06 ?5次下載

    藍(lán)牙音頻串口透傳開發(fā)板音頻接收方案

    物聯(lián)網(wǎng)與智能硬件爆發(fā)的時代,開發(fā)者急需一款能同時攻克音頻處理與數(shù)據(jù)通信痛點的全能工具。ANS-DB003M的出現(xiàn),或許正是答案。今天,我們就來深度測評一款備受矚目的產(chǎn)品—ANS-DB
    的頭像 發(fā)表于 06-06 16:48 ?228次閱讀
    藍(lán)牙<b class='flag-5'>音頻</b>串口透傳<b class='flag-5'>開發(fā)板</b><b class='flag-5'>音頻</b>接收方案

    PPEC新品發(fā)布丨圖形化編程數(shù)字電源專用 ARM Cortex-M4 MCU

    痛點。該芯片基于120MHz主頻Cortex-M4內(nèi)核,集成高精度PWM、多協(xié)議通信接口等豐富資源。硬件設(shè)計,采用LQFP64封裝,兼容主流ARM芯片引腳布局
    的頭像 發(fā)表于 05-22 17:30 ?483次閱讀
    PPEC新品發(fā)布丨圖形化編程數(shù)字電源專用 ARM <b class='flag-5'>Cortex-M4</b> MCU

    米爾基于瑞芯微RK3506核心開發(fā)板

    MYC-YR3506核心開發(fā)板新一代入門級國產(chǎn)工業(yè)處理器RK3506,3核A7+單核M0多核異構(gòu)RK3506B:3*Cortex-A7@
    發(fā)表于 05-15 16:00 ?5次下載

    基于RK3576開發(fā)板的人臉識別算法

    RK3576開發(fā)板展示人臉識別算法例程和API說明
    的頭像 發(fā)表于 05-07 16:48 ?1938次閱讀
    基于RK3576<b class='flag-5'>開發(fā)板</b>的人臉<b class='flag-5'>識別</b>算法

    i.MX8MMini中的Cortex-M4不支持SDIO嗎?

    我們正在嘗試使用 i.MX8MMini (Cortex-A53/-M4) 并考慮 Cortex-M4 協(xié)處理器中實現(xiàn)無線模塊 (SDIO I/F)。 關(guān)于
    發(fā)表于 04-03 06:45

    東芝推出七款基于Arm Cortex-M4內(nèi)核的32位微控制器

    東芝電子元件及存儲裝置株式會社(“東芝”)宣布,最新推出七款配備Cortex-M4內(nèi)核的32位微控制器,進(jìn)一步擴(kuò)大其電機(jī)控制微控制器產(chǎn)品線。其中,六款產(chǎn)品組成新的產(chǎn)品組合——M4K組(1)[1],另外一款產(chǎn)品加入M470組。
    的頭像 發(fā)表于 01-22 18:05 ?848次閱讀
    東芝推出七款基于Arm <b class='flag-5'>Cortex-M4</b>內(nèi)核的32位微控制器

    正點原子fpga開發(fā)板不同型號

    ZYNQ-7000系列 ZYNQ-7000系列是正點原子的入門級FPGA開發(fā)板,適合初學(xué)者和教育用途。這些開發(fā)板搭載了Xilinx的Zynq-7000系列SoC芯片,集成了ARM Corte
    的頭像 發(fā)表于 11-13 09:30 ?3714次閱讀

    航順 HK32F407ZGT7 芯片的開發(fā)板:多功能外設(shè)助力多領(lǐng)域應(yīng)用

    HK32F407ZGT7開發(fā)板 1.開發(fā)板簡介 開發(fā)板是基于航順芯片公司F4系列HK32F407ZGT7開發(fā)的一款
    的頭像 發(fā)表于 11-08 14:43 ?676次閱讀
    航順 HK32F407ZGT7 芯片的<b class='flag-5'>開發(fā)板</b>:多功能外設(shè)助力多領(lǐng)域應(yīng)用

    【干貨】有了這份HK32F407ZGT7開發(fā)板介紹,1萬個項目輕松拿捏!

    2024-11-0811:39·航順HK32MCUHK32F407ZGT7開發(fā)板開發(fā)板簡介開發(fā)板是基于航順芯片公司F4系列HK32F407ZGT7
    的頭像 發(fā)表于 11-08 13:28 ?809次閱讀
    【干貨】有了這份HK32F407ZGT7<b class='flag-5'>開發(fā)板</b>介紹,1萬個項目輕松拿捏!

    【干貨】性價比拉滿!HK32F407VG開發(fā)板介紹

    開發(fā)板簡介開發(fā)板是基于航順芯片公司F4系列HK32F407VGT7芯片的一款開發(fā)板,Cortex-M4內(nèi)核,最高主頻168MHz,內(nèi)置1MK
    的頭像 發(fā)表于 11-08 13:27 ?781次閱讀
    【干貨】性價比拉滿!HK32F407VG<b class='flag-5'>開發(fā)板</b>介紹

    ARM開發(fā)板與樹莓派的比較

    處理器 ARM開發(fā)板通常采用不同的ARM處理器,如Cortex-A系列、Cortex-M系列等,而樹莓派則主要使用博通的ARM處理器。樹莓派的處理器性能相對較高,尤其是最新的樹莓派
    的頭像 發(fā)表于 11-05 11:11 ?1394次閱讀

    TI開發(fā)板啟用Android Automotive

    電子發(fā)燒友網(wǎng)站提供《TI開發(fā)板啟用Android Automotive.pdf》資料免費(fèi)下載
    發(fā)表于 09-18 14:52 ?0次下載
    <b class='flag-5'>在</b>TI<b class='flag-5'>開發(fā)板</b><b class='flag-5'>上</b>啟用Android Automotive