Acous&c ¡Environment ¡ Recogni&on ¡ Graduate ¡Student ¡Mentor: ¡Hedieh ¡Ekhlasi ¡ ¡Interns: ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡Reyna ¡Castellanos ¡ ¡ ¡Jesus ¡Flores ¡ ¡ ¡Jose ¡Chavez ¡ ¡ ¡ ¡Edgar ¡Rey ¡Libao ¡
What ¡Is ¡Acous&c ¡Recogni&on? ¡ Restaurant ¡ ¡
Average ¡Environment ¡Waveforms ¡ Low ¡ High ¡ Sound ¡Intensity ¡ Beach ¡ 20 ¡ Wave ¡Pressure ¡(kHz) ¡ ¡ 0 ¡ Restaurant ¡ 20 ¡ 0 ¡ Street ¡ 20 ¡ 0 ¡ Time ¡(sec) ¡ 10 ¡ 20 ¡ 0
How ¡Our ¡Research ¡Helps ¡Others ¡ Cochlear ¡Implants ¡ ¡ ¡ ¡ NIH ¡Medical ¡Arts ¡
Research ¡Plan ¡ • Collect ¡audio ¡samples ¡ ¡ • Process ¡the ¡samples ¡ ¡ • Build ¡a ¡model ¡for ¡each ¡environment ¡ • Test ¡the ¡models ¡for ¡accuracy ¡ • U&lize ¡HTK ¡
Data ¡Collec&on ¡ • 20 ¡audio ¡samples ¡for ¡each ¡environment. ¡ • 20 ¡second ¡samples ¡per ¡environment. ¡ ¡
Process ¡Data ¡and ¡Build ¡Models ¡ Ini&alized ¡ Feature ¡Extrac&on ¡ Model ¡ (15 ¡training ¡data) ¡ Update ¡ Model ¡ Acous&c ¡ Model ¡ Environment ¡ Feature ¡Extrac&on ¡ Recogni&on ¡ Decoder ¡ (5 ¡tes&ng ¡data) ¡ (end ¡result) ¡ Language ¡ Dic&onary ¡ Model ¡
Test ¡Models ¡for ¡Accuracy ¡ Recognized ¡Environments ¡ ¡ Street ¡ Feature ¡Extrac&on ¡ ¡ Decoder ¡ ¡ Beach ¡ (tes&ng ¡data) ¡ ¡ Restaurant ¡ Input ¡Environments ¡ Environments ¡ Recognized ¡ ¡
Environmental ¡Recogni&on: ¡ ¡ ¡A ¡New ¡and ¡Exci&ng ¡Process ¡ • Created ¡models ¡ • Analyzed ¡data ¡with ¡decoder ¡ ¡ • Found ¡how ¡accurately ¡our ¡system ¡works ¡ • It ¡is ¡s&ll ¡not ¡as ¡accurate ¡as ¡human ¡capabili&es ¡ ¡
Future ¡Plans ¡ • Create ¡new ¡smartphone ¡applica&ons ¡ • Improve ¡sound ¡quality ¡ ¡ • Refine ¡ear ¡implants ¡
Acknowledgements ¡ • Jack ¡Kent ¡Cooke ¡Founda&on ¡ • University ¡of ¡California, ¡Santa ¡Barbara ¡ • Center ¡for ¡Science ¡and ¡Engineering ¡Partnerships ¡ • CNSI-‑California ¡NanoSystems ¡Ins&tute ¡ • JKCB ¡Program ¡Director: ¡Maria ¡Teresa ¡Napoli ¡ • Coordinators: ¡Jens-‑Uwe ¡Kuhn, ¡Chrysafis ¡Andreou ¡ • Resident ¡Advisors: ¡Spencer ¡Igram, ¡Kori ¡Lay, ¡Sarah ¡Maxel, ¡ Stephanie ¡Mendes ¡
Recommend
More recommend
