吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

共熵服務中心 ? 來源:未知 ? 2022-12-02 20:10 ? 次閱讀
原文引自:51CTO 開源基礎軟件社區(qū) #DAYU200體驗官 《DAYU200運行自閉癥早期篩查聲紋特征濾波識別系統

1. 項目背景

根據《孤獨癥教育康復行業(yè)發(fā)展狀況報告》,在全世界范圍內每 54 個兒童就有一個兒童患有自閉癥譜系障礙,目前中國的自閉癥譜系障礙患者已經超過了 1300萬,并且這個數量以每年近20萬的速度增長。

a4238694-7239-11ed-8abf-dac502259ad0.jpg

我們通過調研發(fā)現我國關于自閉癥譜系障礙方面的確診缺乏統一的診斷標準,各大醫(yī)院與醫(yī)療機構的主流診斷方案還是依托于量表等工具,誤診率高。但目前在確診方面缺乏科學精準的檢測儀器,導致被確診為自閉癥的患者平均年齡為4到5歲,遠遠滯后于18到24個月的最佳早期篩查診斷時機,使得患兒錯過最佳康復治療期。

我們團隊基于以上痛點,以兒童說話聲音作為原始數據,利用深度學習訓練出的高精度模型對比分析自閉癥譜系障礙兒童和正常兒童在聲學特征上的差異,使用音頻分析技術提取聲學特征參數進行分析,基于潤和大禹DAYU200從聲學角度指導醫(yī)生對待測兒童進行早期篩查,可將自閉癥患者實際篩查確診年齡提前至1到2歲,讓自閉癥譜系障礙兒童能極早地得到確診,從而能夠盡早進行干預治療,最大限度地減少天生發(fā)育障礙對患者及整個家庭的影響。

2. 我們是誰?守望星光團隊于2021年6月在鄭州輕工業(yè)大學梅科爾工作室成立,是一家專注于自閉癥譜系障礙診斷技術研發(fā)的在校創(chuàng)新創(chuàng)業(yè)團隊。梅科爾工作室的老師和同學們還必須在極為有限的條件下讓價值最大化,工作室在老齡化、老年人康復、特殊人群關愛方向的漫漫征途。從拿著一封封介紹信去醫(yī)院聯系合作,一點點走訪患者開始。如今,梅科爾工作室總計參與到60余個醫(yī)療項目的聯合創(chuàng)新開發(fā)中,其中40多個是特殊人群關愛類項目。在腦卒中、自閉癥和帕金森等領域完成了超過2000人次的病患數據樣本收集,沉淀出300多個可用醫(yī)療案例。

a44e3a38-7239-11ed-8abf-dac502259ad0.png

3. 設計思路

本項目通過神經網絡和音頻分析技術提取自閉癥譜系障礙兒童的聲學特征參數進行分析,篩選出最具有代表性的聲學特征和分類識別性能最優(yōu)的模型,從聲學角度輔助醫(yī)生對自閉癥譜系障礙兒童進行早期診斷,并設計機器學習模型進行分類。構建模型,最終網絡的準確性達到 93.8%。醫(yī)生可在DAYU200端、網頁Web端、桌面exe程序端、手機鴻蒙APP查看結果,預測出自閉癥譜系障礙準確率超過 70%,推薦可能患有自閉癥譜系障礙孩子接受干預訓練,避免錯過最佳干預期。

3.1 開發(fā)技術設計框架

a47125c0-7239-11ed-8abf-dac502259ad0.jpg

3.2音頻數據采集

項目的音頻數據采集模塊主要由三部分組成,分別是揚聲器、三麥克風陣列數字信號處理器Esp32-Korvo音頻開發(fā)板。并通過回聲消除算法、語音增強算法、降噪算法和音頻自動增益算法收集音頻數據,以此來保證受測者的音頻數據質量。并通過藍牙或WLAN傳輸音頻數據至云服務器進行下一步處理。在內部布局上,通過精確測量開發(fā)板、揚聲器、可充電電池的尺寸,合理規(guī)劃設計了內部零件的位置,精準建模預留內部空間。效果圖如下:

a4951372-7239-11ed-8abf-dac502259ad0.png

3.3音頻數據預處理

我們將數據采集模塊得到的音頻數據上傳至我們的華為云服務器上,利用利用我們自主開發(fā)的降噪算法對收集到的聲音進行二次降噪,除去高斯噪聲、白噪聲等等的一 些噪音,然后利用 OpenSmile 提取聲學特征,得到的處理過后的數據會進行 Librosa 庫繪制MFCC 圖像。

首先在音頻轉圖像之前,通過 Berouti 譜減法對采樣的自閉癥患者語音中自帶的加性噪聲(背景噪聲)得到噪聲的頻譜信息,并將其從頻率空間中減去。同時為了避免提取困難,采用預加重技術將預加重濾波器加在原始音頻上,強化高頻部分,再通過分幀加窗使分析對象的信號變化不會突然消失。接著將連續(xù)的模擬信號轉化為數字信號,通過快速傅里葉變化對分幀加窗后的各幀信號進行快速傅里葉變換得到各幀的頻譜。并對語音信號的頻譜取模平方得到語音信號的功率譜。接著利用三角帶通濾波器對頻譜進行平滑化,并消除諧波的作用,突顯原先語音的共振峰。因此一段語音的音調或音高,是不會呈現在梅爾倒譜系數內。換言之,以梅爾倒譜系數為特征的聲學特征濾波識別診斷系統,并不會受到輸入語音的音調不同而有所影響。此外,還可以降低運算量。

最后,經離散余弦變換(DCT)得到 MFCC 系數。

音頻轉圖像具體流程展示圖如下:

a4bb267a-7239-11ed-8abf-dac502259ad0.jpg

提取聲學特征并繪制出的 MFCC 圖像如下:

a4eaff58-7239-11ed-8abf-dac502259ad0.png

3.4圖像數據分析

在深度學習模型預測程序中預測待測者自閉癥譜系障礙的患病概率,采用CNN卷積神經網絡來進行圖像識別,包含4個卷積層和3個全連接層,每個卷積層后面有一個LeakyRelu (激活函數)增強非線性,每兩個卷積層分別緊跟一個最大值池化層縮小特征圖組成一個卷積組模塊,卷積層的輸出通道數按順序分別是64, 32, 128, 64,卷積層的輸出特征圖進入全連接層前平鋪成向量,然后進入三個線性變換層逐層降低向量的維度,每個線性變換緊跟一個Dropout層防止過擬合,線性變換的輸出長度分別是128, 64, 1,最后輸出的一維向量用于二分類,輸出自閉癥譜系障礙兒童的概率和正常兒童的概率。基于深度神經網絡的算法,通過計算機較強的學習能力來學習自閉癥患者與正常人的聲學特征,以此達到對自閉癥患者語音數據的有效識別。

4. 方案效果

a518b2cc-7239-11ed-8abf-dac502259ad0.png

a553913a-7239-11ed-8abf-dac502259ad0.jpg

a580ab0c-7239-11ed-8abf-dac502259ad0.jpg

a5a123be-7239-11ed-8abf-dac502259ad0.jpg

a5cf888a-7239-11ed-8abf-dac502259ad0.jpg

a5fde374-7239-11ed-8abf-dac502259ad0.jpg

a632d480-7239-11ed-8abf-dac502259ad0.jpg

a65d1844-7239-11ed-8abf-dac502259ad0.jpg

a689f7ba-7239-11ed-8abf-dac502259ad0.jpg

a6b6bdea-7239-11ed-8abf-dac502259ad0.jpg

5. 開發(fā)環(huán)境
  • DevEco Studio for OpenHarmony3.0.0.900

  • OpenHarmony版本:3.1_Release

  • 開發(fā)板:DAYU200

a6d28d86-7239-11ed-8abf-dac502259ad0.pnga7db5352-7239-11ed-8abf-dac502259ad0.gif 本文完寫在最后我們最近正帶著大家玩嗨OpenHarmony。如果你有好玩的東東,歡迎投稿,讓我們一起嗨起來!有點子,有想法,有Demo,立刻聯系我們:合作郵箱:zzliang@atomsource.org
a7ebb0e4-7239-11ed-8abf-dac502259ad0.gif

a8013e3c-7239-11ed-8abf-dac502259ad0.png

a8345592-7239-11ed-8abf-dac502259ad0.pnga8972c62-7239-11ed-8abf-dac502259ad0.pnga8c0682a-7239-11ed-8abf-dac502259ad0.png

a8d21d5e-7239-11ed-8abf-dac502259ad0.png

a8ec8612-7239-11ed-8abf-dac502259ad0.png

a90bd1ca-7239-11ed-8abf-dac502259ad0.png

a924ce6e-7239-11ed-8abf-dac502259ad0.png

a93ba3fa-7239-11ed-8abf-dac502259ad0.png

a96f818e-7239-11ed-8abf-dac502259ad0.png

a990dec4-7239-11ed-8abf-dac502259ad0.png

a9ad6f12-7239-11ed-8abf-dac502259ad0.png

a9df71e2-7239-11ed-8abf-dac502259ad0.png

aa16ee88-7239-11ed-8abf-dac502259ad0.png

aa310ce6-7239-11ed-8abf-dac502259ad0.png

aa4b446c-7239-11ed-8abf-dac502259ad0.png

aa66dc68-7239-11ed-8abf-dac502259ad0.png

aa7eecb8-7239-11ed-8abf-dac502259ad0.png

aa94907c-7239-11ed-8abf-dac502259ad0.png

aabb8948-7239-11ed-8abf-dac502259ad0.png


原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

文章出處:【微信公眾號:開源技術服務中心】歡迎添加關注!文章轉載請注明出處。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯系本站處理。 舉報投訴
  • 開源技術
    +關注

    關注

    0

    文章

    389

    瀏覽量

    7992
  • OpenHarmony
    +關注

    關注

    25

    文章

    3747

    瀏覽量

    16588

原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

文章出處:【微信號:開源技術服務中心,微信公眾號:共熵服務中心】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    RFID識別系統

    隨著信息技術的快速發(fā)展,RFID(射頻識別)技術在各行各業(yè)的應用日益廣泛,其中RFID識別系統作為核心應用,已經成為智能化管理不可或缺的基石。通過無線射頻信號的非接觸式識別與數據傳輸,RFID
    的頭像 發(fā)表于 12-06 17:57 ?344次閱讀
    RFID<b class='flag-5'>識別系統</b>

    可穿戴壓電傳感器在肌少的應用

    響應的壓電薄膜,并構建了可穿戴下肢運動監(jiān)測系統,用于肌少群體的運動監(jiān)測與早期。相關成果已發(fā)表在《Advanced Materials
    的頭像 發(fā)表于 11-05 11:50 ?494次閱讀
    可穿戴壓電傳感器在肌少<b class='flag-5'>癥</b><b class='flag-5'>篩</b><b class='flag-5'>查</b>的應用

    第三屆OpenHarmony技術大會星光璀璨、致謝OpenHarmony社區(qū)貢獻者

    操作系統,OpenAtom OpenHarmony(以下簡稱“OpenHarmony”)的進步與發(fā)展離不開產業(yè)界、學術界及生態(tài)伙伴們的協力共建。OpenHarmony項目群技術指導委員
    的頭像 發(fā)表于 10-21 14:10 ?255次閱讀

    基于ArkTS語言的OpenHarmony APP應用開發(fā):HelloOpenharmony

    1、程序簡介該程序是基于OpenHarmony標準系統編寫的UI應用類:HelloOpenHarmony。本案例是基于API9接口開發(fā)。本案例已在OpenHarmony凌蒙派-RK35
    的頭像 發(fā)表于 09-15 08:09 ?480次閱讀
    基于ArkTS語言的<b class='flag-5'>OpenHarmony</b> APP應用開發(fā):Hello<b class='flag-5'>Openharmony</b>

    【開源鴻蒙】使用QEMU運行OpenHarmony輕量系統

    本文將會介紹如何從源碼安裝QEMU 6.2.0,以及如何使用QEMU運行OpenHarmony輕量系統。通過本文,你將會對QEMU和OpenHarmony輕量系統又一個初步的認知,并對
    的頭像 發(fā)表于 09-14 08:51 ?769次閱讀
    【開源鴻蒙】使用QEMU運行<b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統</b>

    [2K300適配OpenharmonyV4.1]根文件系統制作請教

    的文件系統rootfs.img燒錄到2k300上,燒錄失敗。對比2k300開源資料中的Openharmony 文件系統,該文件系統為ext4格式,但是2k500編譯出來的為Ubifs
    發(fā)表于 09-11 11:18

    多目標智能識別系統

    。以下是關于多目標智能識別系統的詳細解析: 智慧華盛恒輝系統原理 多目標智能識別系統的核心原理基于圖像處理、機器學習和深度學習等技術。系統通過對輸入的圖像或視頻進行分析,提取其中的
    的頭像 發(fā)表于 07-16 10:42 ?1.6w次閱讀

    開源鴻蒙 編譯OpenHarmony輕量系統QEMU RISC-V版本

    本文將介紹如何為QEMU RISC-V虛擬平臺構建OpenHarmony輕量系統。得益于QEMU的CPU指令集模擬執(zhí)行能力,該方法可以在沒有開發(fā)板的情況下調試和運行OpenHarmony系統
    的頭像 發(fā)表于 07-15 10:36 ?1168次閱讀
    開源鴻蒙 編譯<b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統</b>QEMU RISC-V版本

    OpenHarmony之開機優(yōu)化

    OpenHarmony已經支持了Bootchart工具,我們可以直接使用Bootchart工具,Bootchart工具介紹如下: 概述 Bootchart是一個用于系統啟動過程性能分析的開源軟件工具
    發(fā)表于 07-01 16:39

    OpenHarmony 成功亮相國際學術會議 ASPLOS 2024

    舉行的ASPLOS 2024上成功舉辦。本次學術教程會以“OpenHarmony操作系統的關鍵特性與能力”為主題,聚焦“基于OpenHarmony的前沿學術探索機遇與挑戰(zhàn)“,詳細介紹了
    的頭像 發(fā)表于 05-16 09:28 ?496次閱讀
    <b class='flag-5'>OpenHarmony</b> 成功亮相國際學術會議 ASPLOS 2024

    OpenHarmony南向能力征集令

    1、適配過程中缺少哪些接口能力或者南向能力,需要OpenHarmony去補齊的?例如內核、編譯、器件適配、單板適配等; 2、對標linux,需要OpenHarmony提供哪些能力?比如V4L2
    發(fā)表于 04-09 15:32

    OpenHarmony內核編程實戰(zhàn)

    編程入門[Hello,OpenHarmony]在正式開始之前,對于剛接觸OpenHarmony的伙伴們,面對大篇幅的源碼可能無從下手,不知道怎么去編碼寫程序,下面用一個簡單的例子帶伙伴們入門。▍任務
    的頭像 發(fā)表于 03-27 08:31 ?943次閱讀
    <b class='flag-5'>OpenHarmony</b>內核編程實戰(zhàn)

    OpenHarmony鴻蒙實戰(zhàn)】在RK3399開發(fā)板實現智能門禁人臉識別

    基于RK3399開發(fā)板,使用OpenHarmony3.0-LTS開發(fā)的應用。通過定時獲取攝像頭數據,實現人臉識別比對等功能。
    的頭像 發(fā)表于 03-20 17:38 ?1572次閱讀
    【<b class='flag-5'>OpenHarmony</b>鴻蒙實戰(zhàn)】在RK3399開發(fā)板實現智能門禁人臉<b class='flag-5'>識別</b>

    介紹一種OpenAtom OpenHarmony輕量系統適配方案

    本文在不改變原有系統基礎框架的基礎上, 介紹了一種OpenAtom OpenHarmony(以下簡稱“OpenHarmony”)輕量系統適配方案。
    的頭像 發(fā)表于 03-05 09:24 ?1273次閱讀
    介紹一種OpenAtom <b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統</b>適配方案

    【工作準備】OpenHarmony鴻蒙操作系統開發(fā)——基礎必備軟件

    前言 在下根據多年 OpenHarmony 內核及多個子系統的開發(fā)經驗,將用到的必備工具軟件列出一張清單,供新同學參考。如何精進?請自行搜索專業(yè)手冊進行學習,我是碰到什么問題、需要什么小功能然后去
    的頭像 發(fā)表于 02-23 15:51 ?2041次閱讀
    【工作準備】<b class='flag-5'>OpenHarmony</b>鴻蒙操作<b class='flag-5'>系統</b>開發(fā)——基礎必備軟件
    百家乐走势图研究| 澳门百家乐海洋阿强| 百家博彩网| 神话百家乐的玩法技巧和规则| 真人百家乐官网蓝盾娱乐网| 516棋牌游戏中心| 百家乐那个平台信誉高| 百家乐官网投注程式| 大赢家即时比分网| 大都会百家乐的玩法技巧和规则| 网上百家乐官网作| 百家乐官网自动下注| 足球改单| 深圳太阳城酒店| 百家乐大转轮| 百家乐官网平台| 百家乐官网计算法| 百家乐官网技巧论坛| 栾川县| 3U百家乐官网娱乐城| 百家乐网| 最新娱乐城送彩金| 大发888分享| 万龙百家乐的玩法技巧和规则| 单张百家乐论坛| 鑫鼎百家乐官网的玩法技巧和规则| 百家乐真钱| 彩票大赢家| 大发扑克网址| 大发888总结经验| 全讯网abckkk.com| 爱拼百家乐的玩法技巧和规则 | 百家乐官网美食坊| 百家乐官网怎么推算| 澳门百家乐官网论| 玩百家乐官网有何技巧| 百家乐官网人生信条漫谈| 百家乐官网信誉好的平台| 大发888新址| 大发888真钱游戏下载到桌面| 大发888 casino exe|