دانلود پاورپوینت مدلسازی تولید گفتار

بنام خدا مدلسازی تولید گفتار مکانیزم تولید گفتار در انسان • مکانیزم تولید گفتار از چهار پروسه تشکیل شده است: -1پردازش زبان -2تولید فرمان های موتوری ( )motor commandsبه سمت اندام های صوتی (آرتیکوالتورها) -3حرکت هماهنگ آرتیکوالتورها -4انتشار هوای فرستاده شده از سمت ریه ها به صورت گفتار • گفتار از تعامل بین سه بخش زیر تشکیل شده است: آکوستیکی سوماتوسنسوری موتوری رهیافت های مدل سازی تولید گفتار -1مدل سازی عملگرهای سیستم گفتار سنتزکننده های گفتار -2مدل سازی سیستم عصبی گفتار ‏جنبه کیفی ‏جنبه محاسباتی مدل DIVA Related Papers  Bernd J. Kröger ,”Neural models of speech production and speech acquisition”,2006  Frank H. Guenther & Joseph S.Perkell,” A NEURAL MODEL OF SPEECH PRODUCTION AND SUPPORTING EXPERIMENTS”,2004  Frank H. Guenther & Satrajit S.Ghosh & Alfonso NietoCastanon,” A NEURAL MODEL OF SPEECH PRODUCTION”,2003  Frank H. GUENTHER and Joseph S. PERKELL,” A Neural Model of Speech Production and Its Application to Studies of the Role of Auditory Feedback in Speech”,2002 Main paper A Neural Network Model Of Speech Acquisition And Motor Equivalent Speech Production Running title: Speech acquisition and motor equivalence Frank H. Guenther Boston University Center for Adaptive Systems and Department of Cognitive and Neural Systems Biological Cybernetics (1994) vol. 72 , pp. 43-53 آناتومی تولید گفتار آرتیکوالتورهای مهم ‏Lips ‏Jaw ‏Tongue )Velum (soft palate در نهایت تولید گفتارتوسط حرکت آرتیکوالتورها صورت می گیرد. یک نوزاد چگونه مهارت موتوری الزم برای تولید آواهای مربوط به زبان خودش را کسب می کند؟ • در زمانی که نوزاد رشد می کند ،مشخصه های فیزیکی مانند اندازه و شکل آرتیکوالتورها تغییر می کند .همچنین ممکن است آرتیکوالتورها دچار آسیب موقت یا دائم شوند .این تغییرات بر روی سیگنال آکوستیکی که توسط یک سری فرمان های قشر موتوری مغز تولید شده است تاثیر می گذارد .برای اینکه ویژگی سیگنال آکوستیکی مورد نظر در شرایط متفاوت حفظ شود ،الزم است که چگونگی تعامل بین بخش های آکوستیکی و سنسوری و موتوری با گذشت زمان تغییر کند .این بدان معناست که سیستم تولید گفتار باید تطبیق پذیر(( adaptiveباشد. Motor Equivalence • در فرآیند تولید گفتار به طور ذاتی، فعالیت های متفاوت موتوری برای تولید یک صوت گفتار یکسان میتواند مورد استفاده قرار گیرد .به زبان ریاضی ،یک نگاشت چند به یک از قشر موتوری به تولید یک صوت وجود دارد. Main paper A Neural Network Model Of Speech Acquisition And Motor Equivalent Speech Production Running title: Speech acquisition and motor equivalence Frank H. Guenther Boston University Center for Adaptive Systems and Department of Cognitive and Neural Systems Biological Cybernetics (1994) vol. 72 , pp. 43-53 مدل محاسباتی که برای مدلسازی گفتار در . استDIVA ،اینجا ارائه می شود  Guenther FH (1993) A self-organizing neural model for motor equivalent phoneme production. In:Proceedings of the World Congress on Neural Networks, Portland. Erlbaum, Hillsdale NJ, pp. III-6-9  Guenther FH (1992) Neural models of adaptive sensory-motor control for flexible reaching and speaking.Ph.D. dissertation, Boston University DIVA model Directions Into Velocities of Articulators در این مدل از دو نوع متفاوت ساختار عصبی برای نشان دادن اطالعات استفاده می شود. سطوح اصلی مدل  Sound (auditory) level  Orosensory (somatosensory) level  Articulatory level یادگیری بین سطوح مدل دو نگاشت یادگیری وجود .دارد  Phonetic-to-orosensory mapping  Orosensory-to-articulatory mapping Articulator Velocity Vector (AVV) Go signal Speech Recognition System Speech Sound Map Orosensory Direction Vector (ODV) اکتساب مهارت های گفتاری در ‏DIVA • اکتساب مهارت های گفتاری در مدل DIVAبه معنای پیدا کردن پارامترها یا وزن های سیناپسی مناسب برای نگاشت های phonetic-to-orosensoryو orosensory-to-articulatoryدر طول فاز یادگیری می باشد. مثال مکانیزم یادگیری Vector Associative Map method Gaudiano P, Grossberg S (1991), Vector associative maps: Unsupervised real-time errorbased learning and control of movement trajectories. Neural Networks 4: 147-183 مدل سازی محاسباتی The activity of an orosensory direction vector cell d i  s j z ji  f i j d i the activity of the i th Orosensory Direction Vector cell f i the orosensory feedback signal s j the activity of the jth Speech Sound Map cell z ji is the synaptic weight of the pathway from the jth Speech Sound Map cell to the i th Orosensory Direction Vector cell  Learning law governing synaptic weights d z ji  1s j (1 z ji  [d i ] ) dt  1 and 1 are learning parameters [ x] 0 for x  0 [ x]  x for x 0 Articulator Velocity Vector cell activities ai  [d j ] w ji j ai Articulator Velocity Vector cell activities w ji synaptic weights governing the orosensory - to - articulatory mapping  Learning law governing synaptic weights d d w ji  2 ai (  2  d i ) dt dt  2 and  2 are learning parameters مراجع و منابع پايان نامه كارشناسي، ايوب دليری-1 مدلسازي عصبي عضالني،ارشد 1385 ، سيستم توليدگفتار 2- Masaaki Honda," Human Speech Production Mechanisms”, NTT Technical Review,2002 3- Frank H. Guenther,” A Neural Network Model Of Speech Acquisition And Motor Equivalent Speech Production”,1994 با تشکر از توجه شما ‏