在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統(tǒng)

共熵服務中心 ? 來源:未知 ? 2022-12-02 20:10 ? 次閱讀
原文引自:51CTO 開源基礎軟件社區(qū) #DAYU200體驗官 《DAYU200運行自閉癥早期篩查聲紋特征濾波識別系統(tǒng)

1. 項目背景

根據(jù)《孤獨癥教育康復行業(yè)發(fā)展狀況報告》,在全世界范圍內(nèi)每 54 個兒童就有一個兒童患有自閉癥譜系障礙,目前中國的自閉癥譜系障礙患者已經(jīng)超過了 1300萬,并且這個數(shù)量以每年近20萬的速度增長。

a4238694-7239-11ed-8abf-dac502259ad0.jpg

我們通過調(diào)研發(fā)現(xiàn)我國關于自閉癥譜系障礙方面的確診缺乏統(tǒng)一的診斷標準,各大醫(yī)院與醫(yī)療機構的主流診斷方案還是依托于量表等工具,誤診率高。但目前在確診方面缺乏科學精準的檢測儀器,導致被確診為自閉癥的患者平均年齡為4到5歲,遠遠滯后于18到24個月的最佳早期篩查診斷時機,使得患兒錯過最佳康復治療期。

我們團隊基于以上痛點,以兒童說話聲音作為原始數(shù)據(jù),利用深度學習訓練出的高精度模型對比分析自閉癥譜系障礙兒童和正常兒童在聲學特征上的差異,使用音頻分析技術提取聲學特征參數(shù)進行分析,基于潤和大禹DAYU200從聲學角度指導醫(yī)生對待測兒童進行早期篩查,可將自閉癥患者實際篩查確診年齡提前至1到2歲,讓自閉癥譜系障礙兒童能極早地得到確診,從而能夠盡早進行干預治療,最大限度地減少天生發(fā)育障礙對患者及整個家庭的影響。

2. 我們是誰?守望星光團隊于2021年6月在鄭州輕工業(yè)大學梅科爾工作室成立,是一家專注于自閉癥譜系障礙診斷技術研發(fā)的在校創(chuàng)新創(chuàng)業(yè)團隊。梅科爾工作室的老師和同學們還必須在極為有限的條件下讓價值最大化,工作室在老齡化、老年人康復、特殊人群關愛方向的漫漫征途。從拿著一封封介紹信去醫(yī)院聯(lián)系合作,一點點走訪患者開始。如今,梅科爾工作室總計參與到60余個醫(yī)療項目的聯(lián)合創(chuàng)新開發(fā)中,其中40多個是特殊人群關愛類項目。在腦卒中、自閉癥和帕金森等領域完成了超過2000人次的病患數(shù)據(jù)樣本收集,沉淀出300多個可用醫(yī)療案例。

a44e3a38-7239-11ed-8abf-dac502259ad0.png

3. 設計思路

本項目通過神經(jīng)網(wǎng)絡和音頻分析技術提取自閉癥譜系障礙兒童的聲學特征參數(shù)進行分析,篩選出最具有代表性的聲學特征和分類識別性能最優(yōu)的模型,從聲學角度輔助醫(yī)生對自閉癥譜系障礙兒童進行早期診斷,并設計機器學習模型進行分類。構建模型,最終網(wǎng)絡的準確性達到 93.8%。醫(yī)生可在DAYU200端、網(wǎng)頁Web端、桌面exe程序端、手機鴻蒙APP查看結果,預測出自閉癥譜系障礙準確率超過 70%,推薦可能患有自閉癥譜系障礙孩子接受干預訓練,避免錯過最佳干預期。

3.1 開發(fā)技術設計框架

a47125c0-7239-11ed-8abf-dac502259ad0.jpg

3.2音頻數(shù)據(jù)采集

項目的音頻數(shù)據(jù)采集模塊主要由三部分組成,分別是揚聲器、三麥克風陣列數(shù)字信號處理器Esp32-Korvo音頻開發(fā)板。并通過回聲消除算法、語音增強算法、降噪算法和音頻自動增益算法收集音頻數(shù)據(jù),以此來保證受測者的音頻數(shù)據(jù)質(zhì)量。并通過藍牙或WLAN傳輸音頻數(shù)據(jù)至云服務器進行下一步處理。在內(nèi)部布局上,通過精確測量開發(fā)板、揚聲器、可充電電池的尺寸,合理規(guī)劃設計了內(nèi)部零件的位置,精準建模預留內(nèi)部空間。效果圖如下:

a4951372-7239-11ed-8abf-dac502259ad0.png

3.3音頻數(shù)據(jù)預處理

我們將數(shù)據(jù)采集模塊得到的音頻數(shù)據(jù)上傳至我們的華為云服務器上,利用利用我們自主開發(fā)的降噪算法對收集到的聲音進行二次降噪,除去高斯噪聲、白噪聲等等的一 些噪音,然后利用 OpenSmile 提取聲學特征,得到的處理過后的數(shù)據(jù)會進行 Librosa 庫繪制MFCC 圖像。

首先在音頻轉圖像之前,通過 Berouti 譜減法對采樣的自閉癥患者語音中自帶的加性噪聲(背景噪聲)得到噪聲的頻譜信息,并將其從頻率空間中減去。同時為了避免提取困難,采用預加重技術將預加重濾波器加在原始音頻上,強化高頻部分,再通過分幀加窗使分析對象的信號變化不會突然消失。接著將連續(xù)的模擬信號轉化為數(shù)字信號,通過快速傅里葉變化對分幀加窗后的各幀信號進行快速傅里葉變換得到各幀的頻譜。并對語音信號的頻譜取模平方得到語音信號的功率譜。接著利用三角帶通濾波器對頻譜進行平滑化,并消除諧波的作用,突顯原先語音的共振峰。因此一段語音的音調(diào)或音高,是不會呈現(xiàn)在梅爾倒譜系數(shù)內(nèi)。換言之,以梅爾倒譜系數(shù)為特征的聲學特征濾波識別診斷系統(tǒng),并不會受到輸入語音的音調(diào)不同而有所影響。此外,還可以降低運算量。

最后,經(jīng)離散余弦變換(DCT)得到 MFCC 系數(shù)。

音頻轉圖像具體流程展示圖如下:

a4bb267a-7239-11ed-8abf-dac502259ad0.jpg

提取聲學特征并繪制出的 MFCC 圖像如下:

a4eaff58-7239-11ed-8abf-dac502259ad0.png

3.4圖像數(shù)據(jù)分析

在深度學習模型預測程序中預測待測者自閉癥譜系障礙的患病概率,采用CNN卷積神經(jīng)網(wǎng)絡來進行圖像識別,包含4個卷積層和3個全連接層,每個卷積層后面有一個LeakyRelu (激活函數(shù))增強非線性,每兩個卷積層分別緊跟一個最大值池化層縮小特征圖組成一個卷積組模塊,卷積層的輸出通道數(shù)按順序分別是64, 32, 128, 64,卷積層的輸出特征圖進入全連接層前平鋪成向量,然后進入三個線性變換層逐層降低向量的維度,每個線性變換緊跟一個Dropout層防止過擬合,線性變換的輸出長度分別是128, 64, 1,最后輸出的一維向量用于二分類,輸出自閉癥譜系障礙兒童的概率和正常兒童的概率。基于深度神經(jīng)網(wǎng)絡的算法,通過計算機較強的學習能力來學習自閉癥患者與正常人的聲學特征,以此達到對自閉癥患者語音數(shù)據(jù)的有效識別。

4. 方案效果

a518b2cc-7239-11ed-8abf-dac502259ad0.png

a553913a-7239-11ed-8abf-dac502259ad0.jpg

a580ab0c-7239-11ed-8abf-dac502259ad0.jpg

a5a123be-7239-11ed-8abf-dac502259ad0.jpg

a5cf888a-7239-11ed-8abf-dac502259ad0.jpg

a5fde374-7239-11ed-8abf-dac502259ad0.jpg

a632d480-7239-11ed-8abf-dac502259ad0.jpg

a65d1844-7239-11ed-8abf-dac502259ad0.jpg

a689f7ba-7239-11ed-8abf-dac502259ad0.jpg

a6b6bdea-7239-11ed-8abf-dac502259ad0.jpg

5. 開發(fā)環(huán)境
  • DevEco Studio for OpenHarmony3.0.0.900

  • OpenHarmony版本:3.1_Release

  • 開發(fā)板:DAYU200

a6d28d86-7239-11ed-8abf-dac502259ad0.pnga7db5352-7239-11ed-8abf-dac502259ad0.gif 本文完寫在最后我們最近正帶著大家玩嗨OpenHarmony。如果你有好玩的東東,歡迎投稿,讓我們一起嗨起來!有點子,有想法,有Demo,立刻聯(lián)系我們:合作郵箱:zzliang@atomsource.org
a7ebb0e4-7239-11ed-8abf-dac502259ad0.gif

a8013e3c-7239-11ed-8abf-dac502259ad0.png

a8345592-7239-11ed-8abf-dac502259ad0.pnga8972c62-7239-11ed-8abf-dac502259ad0.pnga8c0682a-7239-11ed-8abf-dac502259ad0.png

a8d21d5e-7239-11ed-8abf-dac502259ad0.png

a8ec8612-7239-11ed-8abf-dac502259ad0.png

a90bd1ca-7239-11ed-8abf-dac502259ad0.png

a924ce6e-7239-11ed-8abf-dac502259ad0.png

a93ba3fa-7239-11ed-8abf-dac502259ad0.png

a96f818e-7239-11ed-8abf-dac502259ad0.png

a990dec4-7239-11ed-8abf-dac502259ad0.png

a9ad6f12-7239-11ed-8abf-dac502259ad0.png

a9df71e2-7239-11ed-8abf-dac502259ad0.png

aa16ee88-7239-11ed-8abf-dac502259ad0.png

aa310ce6-7239-11ed-8abf-dac502259ad0.png

aa4b446c-7239-11ed-8abf-dac502259ad0.png

aa66dc68-7239-11ed-8abf-dac502259ad0.png

aa7eecb8-7239-11ed-8abf-dac502259ad0.png

aa94907c-7239-11ed-8abf-dac502259ad0.png

aabb8948-7239-11ed-8abf-dac502259ad0.png


原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統(tǒng)

文章出處:【微信公眾號:開源技術服務中心】歡迎添加關注!文章轉載請注明出處。


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 開源技術
    +關注

    關注

    0

    文章

    389

    瀏覽量

    7946
  • OpenHarmony
    +關注

    關注

    25

    文章

    3724

    瀏覽量

    16350

原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統(tǒng)

文章出處:【微信號:開源技術服務中心,微信公眾號:共熵服務中心】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    RFID識別系統(tǒng)

    隨著信息技術的快速發(fā)展,RFID(射頻識別)技術在各行各業(yè)的應用日益廣泛,其中RFID識別系統(tǒng)作為核心應用,已經(jīng)成為智能化管理不可或缺的基石。通過無線射頻信號的非接觸式識別與數(shù)據(jù)傳輸,RFID
    的頭像 發(fā)表于 12-06 17:57 ?236次閱讀
    RFID<b class='flag-5'>識別系統(tǒng)</b>

    可穿戴壓電傳感器在肌少的應用

    響應的壓電薄膜,并構建了可穿戴下肢運動監(jiān)測系統(tǒng),用于肌少群體的運動監(jiān)測與早期。相關成果已發(fā)表在《Advanced Materials
    的頭像 發(fā)表于 11-05 11:50 ?413次閱讀
    可穿戴壓電傳感器在肌少<b class='flag-5'>癥</b><b class='flag-5'>篩</b><b class='flag-5'>查</b>的應用

    第三屆OpenHarmony技術大會星光璀璨、致謝OpenHarmony社區(qū)貢獻者

    操作系統(tǒng),OpenAtom OpenHarmony(以下簡稱“OpenHarmony”)的進步與發(fā)展離不開產(chǎn)業(yè)界、學術界及生態(tài)伙伴們的協(xié)力共建。OpenHarmony項目群技術指導委員
    的頭像 發(fā)表于 10-21 14:10 ?227次閱讀

    基于ArkTS語言的OpenHarmony APP應用開發(fā):HelloOpenharmony

    1、程序簡介該程序是基于OpenHarmony標準系統(tǒng)編寫的UI應用類:HelloOpenHarmony。本案例是基于API9接口開發(fā)。本案例已在OpenHarmony凌蒙派-RK35
    的頭像 發(fā)表于 09-15 08:09 ?406次閱讀
    基于ArkTS語言的<b class='flag-5'>OpenHarmony</b> APP應用開發(fā):Hello<b class='flag-5'>Openharmony</b>

    【開源鴻蒙】使用QEMU運行OpenHarmony輕量系統(tǒng)

    本文將會介紹如何從源碼安裝QEMU 6.2.0,以及如何使用QEMU運行OpenHarmony輕量系統(tǒng)。通過本文,你將會對QEMU和OpenHarmony輕量系統(tǒng)又一個初步的認知,并對
    的頭像 發(fā)表于 09-14 08:51 ?606次閱讀
    【開源鴻蒙】使用QEMU運行<b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統(tǒng)</b>

    多目標智能識別系統(tǒng)

    。以下是關于多目標智能識別系統(tǒng)的詳細解析: 智慧華盛恒輝系統(tǒng)原理 多目標智能識別系統(tǒng)的核心原理基于圖像處理、機器學習和深度學習等技術。系統(tǒng)通過對輸入的圖像或視頻進行分析,提取其中的
    的頭像 發(fā)表于 07-16 10:42 ?1.3w次閱讀

    開源鴻蒙 編譯OpenHarmony輕量系統(tǒng)QEMU RISC-V版本

    本文將介紹如何為QEMU RISC-V虛擬平臺構建OpenHarmony輕量系統(tǒng)。得益于QEMU的CPU指令集模擬執(zhí)行能力,該方法可以在沒有開發(fā)板的情況下調(diào)試和運行OpenHarmony系統(tǒng)
    的頭像 發(fā)表于 07-15 10:36 ?1098次閱讀
    開源鴻蒙 編譯<b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統(tǒng)</b>QEMU RISC-V版本

    OpenHarmony之開機優(yōu)化

    OpenHarmony已經(jīng)支持了Bootchart工具,我們可以直接使用Bootchart工具,Bootchart工具介紹如下: 概述 Bootchart是一個用于系統(tǒng)啟動過程性能分析的開源軟件工具
    發(fā)表于 07-01 16:39

    OpenHarmony 成功亮相國際學術會議 ASPLOS 2024

    舉行的ASPLOS 2024上成功舉辦。本次學術教程會以“OpenHarmony操作系統(tǒng)的關鍵特性與能力”為主題,聚焦“基于OpenHarmony的前沿學術探索機遇與挑戰(zhàn)“,詳細介紹了
    的頭像 發(fā)表于 05-16 09:28 ?444次閱讀
    <b class='flag-5'>OpenHarmony</b> 成功亮相國際學術會議 ASPLOS 2024

    OpenHarmony南向能力征集令

    1、適配過程中缺少哪些接口能力或者南向能力,需要OpenHarmony去補齊的?例如內(nèi)核、編譯、器件適配、單板適配等; 2、對標linux,需要OpenHarmony提供哪些能力?比如V4L2
    發(fā)表于 04-09 15:32

    OpenHarmony內(nèi)核編程實戰(zhàn)

    編程入門[Hello,OpenHarmony]在正式開始之前,對于剛接觸OpenHarmony的伙伴們,面對大篇幅的源碼可能無從下手,不知道怎么去編碼寫程序,下面用一個簡單的例子帶伙伴們?nèi)腴T。▍任務
    的頭像 發(fā)表于 03-27 08:31 ?849次閱讀
    <b class='flag-5'>OpenHarmony</b>內(nèi)核編程實戰(zhàn)

    OpenHarmony鴻蒙實戰(zhàn)】在RK3399開發(fā)板實現(xiàn)智能門禁人臉識別

    基于RK3399開發(fā)板,使用OpenHarmony3.0-LTS開發(fā)的應用。通過定時獲取攝像頭數(shù)據(jù),實現(xiàn)人臉識別比對等功能。
    的頭像 發(fā)表于 03-20 17:38 ?1394次閱讀
    【<b class='flag-5'>OpenHarmony</b>鴻蒙實戰(zhàn)】在RK3399開發(fā)板實現(xiàn)智能門禁人臉<b class='flag-5'>識別</b>

    介紹一種OpenAtom OpenHarmony輕量系統(tǒng)適配方案

    本文在不改變原有系統(tǒng)基礎框架的基礎上, 介紹了一種OpenAtom OpenHarmony(以下簡稱“OpenHarmony”)輕量系統(tǒng)適配方案。
    的頭像 發(fā)表于 03-05 09:24 ?1196次閱讀
    介紹一種OpenAtom <b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統(tǒng)</b>適配方案

    淺談兼容 OpenHarmony 的 Flutter

    OpenHarmony SIG 組織在 Gitee 開源了兼容 OpenHarmony 的 Flutter。該組織主要用于孵化 OpenHarmony 相關的開源生態(tài)項目。 ? ? ▲ 倉庫地址
    的頭像 發(fā)表于 02-02 15:22 ?617次閱讀
    淺談兼容 <b class='flag-5'>OpenHarmony</b> 的 Flutter

    廈門大學OpenHarmony技術俱樂部正式揭牌成立

    點擊藍字 ╳ 關注我們 開源項目 OpenHarmony 是每個人的 OpenHarmony 12月29日下午,由OpenAtom OpenHarmony(簡稱“OpenHarmony
    的頭像 發(fā)表于 01-04 21:15 ?577次閱讀
    廈門大學<b class='flag-5'>OpenHarmony</b>技術俱樂部正式揭牌成立
    主站蜘蛛池模板: 午夜三级影院| 免费观看欧美一级片| 一级特黄色片| 一级特黄aaa大片29| 伊人久久99| 五色网| 色多多免费视频| 欧美zooz人与禽交| 久久sp| 97国产影院| 人人看操| 四虎免费看黄| 欧美性aaa| 亚洲成人在线免费| 三级网站在线播放| 猛操女人| 成人网在线| 手机在线看福利| 在线黄色大片| 黄网站在线观看| 四虎国产精品永久免费网址| 欧美一区二区三区在线观看 | 亚洲1234区乱码| 美女黄网站人色视频免费国产| 一色屋精品免费视频 视频| 色婷婷色婷婷| 国产网站在线| 天天干天天爱天天射| 国产亚洲papapa| 午夜视频在线观看免费观看在线观看| 一个色在线视频| 欧美色吧视频在线观看| 成人网18免费下| 欧美日韩影院| 亚洲狼色专区| 婷婷春色| 国产视频一二三| 欧美一级特黄高清免费| 在线观看免费精品国产| 网络色综合久久| 国产区一区二区三区|