在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

共熵服務中心 ? 來源:未知 ? 2022-12-02 20:10 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

原文引自:51CTO 開源基礎軟件社區 #DAYU200體驗官 《DAYU200運行自閉癥早期篩查聲紋特征濾波識別系統

1. 項目背景

根據《孤獨癥教育康復行業發展狀況報告》,在全世界范圍內每 54 個兒童就有一個兒童患有自閉癥譜系障礙,目前中國的自閉癥譜系障礙患者已經超過了 1300萬,并且這個數量以每年近20萬的速度增長。

a4238694-7239-11ed-8abf-dac502259ad0.jpg

我們通過調研發現我國關于自閉癥譜系障礙方面的確診缺乏統一的診斷標準,各大醫院與醫療機構的主流診斷方案還是依托于量表等工具,誤診率高。但目前在確診方面缺乏科學精準的檢測儀器,導致被確診為自閉癥的患者平均年齡為4到5歲,遠遠滯后于18到24個月的最佳早期篩查診斷時機,使得患兒錯過最佳康復治療期。

我們團隊基于以上痛點,以兒童說話聲音作為原始數據,利用深度學習訓練出的高精度模型對比分析自閉癥譜系障礙兒童和正常兒童在聲學特征上的差異,使用音頻分析技術提取聲學特征參數進行分析,基于潤和大禹DAYU200從聲學角度指導醫生對待測兒童進行早期篩查,可將自閉癥患者實際篩查確診年齡提前至1到2歲,讓自閉癥譜系障礙兒童能極早地得到確診,從而能夠盡早進行干預治療,最大限度地減少天生發育障礙對患者及整個家庭的影響。

2. 我們是誰?守望星光團隊于2021年6月在鄭州輕工業大學梅科爾工作室成立,是一家專注于自閉癥譜系障礙診斷技術研發的在校創新創業團隊。梅科爾工作室的老師和同學們還必須在極為有限的條件下讓價值最大化,工作室在老齡化、老年人康復、特殊人群關愛方向的漫漫征途。從拿著一封封介紹信去醫院聯系合作,一點點走訪患者開始。如今,梅科爾工作室總計參與到60余個醫療項目的聯合創新開發中,其中40多個是特殊人群關愛類項目。在腦卒中、自閉癥和帕金森等領域完成了超過2000人次的病患數據樣本收集,沉淀出300多個可用醫療案例。

a44e3a38-7239-11ed-8abf-dac502259ad0.png

3. 設計思路

本項目通過神經網絡和音頻分析技術提取自閉癥譜系障礙兒童的聲學特征參數進行分析,篩選出最具有代表性的聲學特征和分類識別性能最優的模型,從聲學角度輔助醫生對自閉癥譜系障礙兒童進行早期診斷,并設計機器學習模型進行分類。構建模型,最終網絡的準確性達到 93.8%。醫生可在DAYU200端、網頁Web端、桌面exe程序端、手機鴻蒙APP查看結果,預測出自閉癥譜系障礙準確率超過 70%,推薦可能患有自閉癥譜系障礙孩子接受干預訓練,避免錯過最佳干預期。

3.1 開發技術設計框架

a47125c0-7239-11ed-8abf-dac502259ad0.jpg

3.2音頻數據采集

項目的音頻數據采集模塊主要由三部分組成,分別是揚聲器、三麥克風陣列數字信號處理器Esp32-Korvo音頻開發板。并通過回聲消除算法、語音增強算法、降噪算法和音頻自動增益算法收集音頻數據,以此來保證受測者的音頻數據質量。并通過藍牙或WLAN傳輸音頻數據至云服務器進行下一步處理。在內部布局上,通過精確測量開發板、揚聲器、可充電電池的尺寸,合理規劃設計了內部零件的位置,精準建模預留內部空間。效果圖如下:

a4951372-7239-11ed-8abf-dac502259ad0.png

3.3音頻數據預處理

我們將數據采集模塊得到的音頻數據上傳至我們的華為云服務器上,利用利用我們自主開發的降噪算法對收集到的聲音進行二次降噪,除去高斯噪聲、白噪聲等等的一 些噪音,然后利用 OpenSmile 提取聲學特征,得到的處理過后的數據會進行 Librosa 庫繪制MFCC 圖像。

首先在音頻轉圖像之前,通過 Berouti 譜減法對采樣的自閉癥患者語音中自帶的加性噪聲(背景噪聲)得到噪聲的頻譜信息,并將其從頻率空間中減去。同時為了避免提取困難,采用預加重技術將預加重濾波器加在原始音頻上,強化高頻部分,再通過分幀加窗使分析對象的信號變化不會突然消失。接著將連續的模擬信號轉化為數字信號,通過快速傅里葉變化對分幀加窗后的各幀信號進行快速傅里葉變換得到各幀的頻譜。并對語音信號的頻譜取模平方得到語音信號的功率譜。接著利用三角帶通濾波器對頻譜進行平滑化,并消除諧波的作用,突顯原先語音的共振峰。因此一段語音的音調或音高,是不會呈現在梅爾倒譜系數內。換言之,以梅爾倒譜系數為特征的聲學特征濾波識別診斷系統,并不會受到輸入語音的音調不同而有所影響。此外,還可以降低運算量。

最后,經離散余弦變換(DCT)得到 MFCC 系數。

音頻轉圖像具體流程展示圖如下:

a4bb267a-7239-11ed-8abf-dac502259ad0.jpg

提取聲學特征并繪制出的 MFCC 圖像如下:

a4eaff58-7239-11ed-8abf-dac502259ad0.png

3.4圖像數據分析

在深度學習模型預測程序中預測待測者自閉癥譜系障礙的患病概率,采用CNN卷積神經網絡來進行圖像識別,包含4個卷積層和3個全連接層,每個卷積層后面有一個LeakyRelu (激活函數)增強非線性,每兩個卷積層分別緊跟一個最大值池化層縮小特征圖組成一個卷積組模塊,卷積層的輸出通道數按順序分別是64, 32, 128, 64,卷積層的輸出特征圖進入全連接層前平鋪成向量,然后進入三個線性變換層逐層降低向量的維度,每個線性變換緊跟一個Dropout層防止過擬合,線性變換的輸出長度分別是128, 64, 1,最后輸出的一維向量用于二分類,輸出自閉癥譜系障礙兒童的概率和正常兒童的概率?;谏疃壬窠浘W絡的算法,通過計算機較強的學習能力來學習自閉癥患者與正常人的聲學特征,以此達到對自閉癥患者語音數據的有效識別。

4. 方案效果

a518b2cc-7239-11ed-8abf-dac502259ad0.png

a553913a-7239-11ed-8abf-dac502259ad0.jpg

a580ab0c-7239-11ed-8abf-dac502259ad0.jpg

a5a123be-7239-11ed-8abf-dac502259ad0.jpg

a5cf888a-7239-11ed-8abf-dac502259ad0.jpg

a5fde374-7239-11ed-8abf-dac502259ad0.jpg

a632d480-7239-11ed-8abf-dac502259ad0.jpg

a65d1844-7239-11ed-8abf-dac502259ad0.jpg

a689f7ba-7239-11ed-8abf-dac502259ad0.jpg

a6b6bdea-7239-11ed-8abf-dac502259ad0.jpg

5. 開發環境
  • DevEco Studio for OpenHarmony3.0.0.900

  • OpenHarmony版本:3.1_Release

  • 開發板:DAYU200

a6d28d86-7239-11ed-8abf-dac502259ad0.pnga7db5352-7239-11ed-8abf-dac502259ad0.gif 本文完寫在最后我們最近正帶著大家玩嗨OpenHarmony。如果你有好玩的東東,歡迎投稿,讓我們一起嗨起來!有點子,有想法,有Demo,立刻聯系我們:合作郵箱:zzliang@atomsource.org
a7ebb0e4-7239-11ed-8abf-dac502259ad0.gif

a8013e3c-7239-11ed-8abf-dac502259ad0.png

a8345592-7239-11ed-8abf-dac502259ad0.pnga8972c62-7239-11ed-8abf-dac502259ad0.pnga8c0682a-7239-11ed-8abf-dac502259ad0.png

a8d21d5e-7239-11ed-8abf-dac502259ad0.png

a8ec8612-7239-11ed-8abf-dac502259ad0.png

a90bd1ca-7239-11ed-8abf-dac502259ad0.png

a924ce6e-7239-11ed-8abf-dac502259ad0.png

a93ba3fa-7239-11ed-8abf-dac502259ad0.png

a96f818e-7239-11ed-8abf-dac502259ad0.png

a990dec4-7239-11ed-8abf-dac502259ad0.png

a9ad6f12-7239-11ed-8abf-dac502259ad0.png

a9df71e2-7239-11ed-8abf-dac502259ad0.png

aa16ee88-7239-11ed-8abf-dac502259ad0.png

aa310ce6-7239-11ed-8abf-dac502259ad0.png

aa4b446c-7239-11ed-8abf-dac502259ad0.png

aa66dc68-7239-11ed-8abf-dac502259ad0.png

aa7eecb8-7239-11ed-8abf-dac502259ad0.png

aa94907c-7239-11ed-8abf-dac502259ad0.png

aabb8948-7239-11ed-8abf-dac502259ad0.png


原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

文章出處:【微信公眾號:開源技術服務中心】歡迎添加關注!文章轉載請注明出處。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 開源技術
    +關注

    關注

    0

    文章

    389

    瀏覽量

    8164
  • OpenHarmony
    +關注

    關注

    29

    文章

    3848

    瀏覽量

    18518

原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

文章出處:【微信號:開源技術服務中心,微信公眾號:共熵服務中心】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    全球首個胃癌影像AI模型發布

    浙江省腫瘤醫院聯合阿里巴巴達摩院,發布了全球首個胃癌影像AI模型DAMO GRAPE,首次利用平掃CT影像識別早期胃癌病灶,并聯合全國20家醫院,在近10萬人的大規模臨床研究中大幅
    的頭像 發表于 06-30 14:37 ?745次閱讀

    電網運維動態聲紋特征分析系統:聆聽設備“心跳”的智能守護者

    文章由山東華科信息技術有限公司提供在電網智能化轉型的浪潮中,設備運維模式正經歷深刻變革。傳統人工巡檢依賴經驗判斷,難以捕捉設備早期隱性故障。動態聲紋特征分析系統通過解析設備運行
    的頭像 發表于 05-13 09:44 ?187次閱讀
    電網運維動態<b class='flag-5'>聲紋</b><b class='flag-5'>特征</b>分析<b class='flag-5'>系統</b>:聆聽設備“心跳”的智能守護者

    工地AI行為識別系統作用

    工地AI行為識別系統作用 工地AI行為識別系統是什么? 工地AI行為識別系統是一種基于人工智能技術的智能監控方案,通過攝像頭+AI算法,實時分析工地人員行為,自動識別安全隱患(如未戴安
    的頭像 發表于 05-08 12:00 ?253次閱讀

    景區AI行為識別系統作用

    景區AI行為識別系統作用 景區AI行為識別系統是什么? 景區AI行為識別系統是利用人工智能技術(如視頻分析、人臉識別)構建的智能管理方案。通過部署攝像頭+AI算法,實時監控游客行為,自
    的頭像 發表于 05-07 15:32 ?284次閱讀
    景區AI行為<b class='flag-5'>識別系統</b>作用

    鐵路車號自動識別系統工作原理#鐵路火車車號識別 #鐵路車號識別系統

    識別系統
    jf_60141436
    發布于 :2025年04月08日 10:05:01

    岸橋箱號識別系統的工作原理 #人工智能 #識別系統

    識別系統
    jf_60141436
    發布于 :2025年03月24日 09:28:11

    蜂鳥板上Openharmony系統跑QT程序

    將QT程序放到Openharmony系統上跑,可以運行,但是會被覆蓋掉。(用的網盤里面的install,支持QT組件的版本)。 運行情況是,在終端運行QT程序,可以正常運行出來,但是觸摸屏幕后,會被Openharmony操作界面
    發表于 02-26 13:04

    RFID識別系統

    隨著信息技術的快速發展,RFID(射頻識別)技術在各行各業的應用日益廣泛,其中RFID識別系統作為核心應用,已經成為智能化管理不可或缺的基石。通過無線射頻信號的非接觸式識別與數據傳輸,RFID
    的頭像 發表于 12-06 17:57 ?1054次閱讀
    RFID<b class='flag-5'>識別系統</b>

    可穿戴壓電傳感器在肌少的應用

    響應的壓電薄膜,并構建了可穿戴下肢運動監測系統,用于肌少群體的運動監測與早期。相關成果已發表在《Advanced Materials
    的頭像 發表于 11-05 11:50 ?1w次閱讀
    可穿戴壓電傳感器在肌少<b class='flag-5'>癥</b><b class='flag-5'>篩</b><b class='flag-5'>查</b>的應用

    第三屆OpenHarmony技術大會星光璀璨、致謝OpenHarmony社區貢獻者

    操作系統,OpenAtom OpenHarmony(以下簡稱“OpenHarmony”)的進步與發展離不開產業界、學術界及生態伙伴們的協力共建。OpenHarmony項目群技術指導委員
    的頭像 發表于 10-21 14:10 ?538次閱讀

    基于ArkTS語言的OpenHarmony APP應用開發:HelloOpenharmony

    1、程序簡介該程序是基于OpenHarmony標準系統編寫的UI應用類:HelloOpenHarmony。本案例是基于API9接口開發。本案例已在OpenHarmony凌蒙派-RK35
    的頭像 發表于 09-15 08:09 ?854次閱讀
    基于ArkTS語言的<b class='flag-5'>OpenHarmony</b> APP應用開發:Hello<b class='flag-5'>Openharmony</b>

    【開源鴻蒙】使用QEMU運行OpenHarmony輕量系統

    本文將會介紹如何從源碼安裝QEMU 6.2.0,以及如何使用QEMU運行OpenHarmony輕量系統。通過本文,你將會對QEMU和OpenHarmony輕量系統又一個初步的認知,并對
    的頭像 發表于 09-14 08:51 ?1322次閱讀
    【開源鴻蒙】使用QEMU運行<b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統</b>

    多目標智能識別系統

    。以下是關于多目標智能識別系統的詳細解析: 智慧華盛恒輝系統原理 多目標智能識別系統的核心原理基于圖像處理、機器學習和深度學習等技術。系統通過對輸入的圖像或視頻進行分析,提取其中的
    的頭像 發表于 07-16 10:42 ?3.3w次閱讀

    開源鴻蒙 編譯OpenHarmony輕量系統QEMU RISC-V版本

    本文將介紹如何為QEMU RISC-V虛擬平臺構建OpenHarmony輕量系統。得益于QEMU的CPU指令集模擬執行能力,該方法可以在沒有開發板的情況下調試和運行OpenHarmony系統
    的頭像 發表于 07-15 10:36 ?1768次閱讀
    開源鴻蒙 編譯<b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統</b>QEMU RISC-V版本
    主站蜘蛛池模板: 天天插综合网 | 奇米四色777亚洲图 奇米影视四色首页手机在线 | 日本黄页网址 | 国产精品成人va在线观看入口 | 国产小视频免费观看 | 国产香蕉精品视频在 | 伊人婷婷色香五月综合缴激情 | 热久久最新地址 | 人人添人人澡人人澡人人人爽 | 天堂a| 久久久久综合 | 色综合亚洲天天综合网站 | 欧美人与z0zoxxxx特 | 日韩福利一区 | 天天插日日干 | 天天操天天干天天爱 | 日本亚洲黄色 | 四虎影院在线播放 | 亚洲第一黄色网 | 大量国产后进翘臀视频 | 在线播放国产一区 | 精品热99 | 免费观看a毛片一区二区不卡 | 男人j进女人j视频 | 四虎国产精品高清在线观看 | 亚洲天堂电影在线观看 | 久久semm亚洲国产 | 色婷婷在线观看视频 | 黄色免费小视频 | 91精品国产91久久久久久青草 | a欧美视频 | 日日夜夜天天操 | 大美女久久久久久j久久 | 久久精品在 | 久久精品国产夜色 | 亚洲第一网站 | 成人国产一区二区 | 成人夜色香网站在线观看 | 久久国产免费福利永久 | 色多多免费观看 | 五月婷婷在线播放 |