a „hangok tanÁtÓl” a beszÉdtechnolÓgiÁig
DESCRIPTION
A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG. Gósy Mária MTA Nyelvtudományi Intézet, Kempelen Farkas Bes zédkutató Laboratórium. A FONETIKA TÖRTÉNETÉBŐL. Az első teljes magyar hangtan: Bél Mátyás (171 8 ) munkája, terjedelme: 7 oldal! Bél Mátyás „modern” megállapításai: - PowerPoint PPT PresentationTRANSCRIPT
![Page 1: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/1.jpg)
A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG
Gósy Mária
MTA Nyelvtudományi Intézet,
Kempelen Farkas Beszédkutató Laboratórium
![Page 2: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/2.jpg)
A FONETIKA TÖRTÉNETÉBŐL
Az első teljes magyar hangtan:
Bél Mátyás (1718) munkája,terjedelme: 7 oldal!
Bél Mátyás „modern” megállapításai:• a hangokat másként ejtjük a szó különböző
helyein;• a hangoknak stilisztikai sajátosságuk van;• némely mássalhangzónk összetett;• a kiejtés számos tényező függvénye.
![Page 3: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/3.jpg)
A FONETIKA TÖBB TUDOMÁNY HATÁRTERÜLETÉN
Agykutatás
Neurolingvisztika
Pszicholingvisztika
Neurológia
Pszichológia
Fizikai akusztika
Nyelvtudomány
FONETIKA
Fül-orr-gégészet
Foniátria
Audiológia
Pszichoakusztika
Fonológia
Agykutatás
Neurolingvisztika
Pszicholingvisztika
Neurológia
Pszichológia
Fizikai akusztika
Nyelvtudomány
FONETIKA
Fül-orr-gégészet
Foniátria
Audiológia
Pszichoakusztika
Fonológia
![Page 4: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/4.jpg)
A BESZÉD
![Page 5: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/5.jpg)
KÉT ALAPKÉRDÉS
1. MI A KAPCSOLAT A FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT?
2. MI A KAPCSOLAT AZ ALKALMAZOTT FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT?
![Page 6: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/6.jpg)
BESZÉD
fonológia
fonetika
beszédtechnológia
alkalmazottfonetika
beszédtechnikabeszédzavarok
beszéd-hallás
beszélő felismerése
FELHASZ-NÁLÁS
digitális jel-feldolgozás
beszéd-szintézis
beszédfelismerés
zajtisztításbeszélőazonosítás
(verifikálás)
![Page 7: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/7.jpg)
FONETIKA, BESZÉDTECHNOLÓGIA, ALKALMAZÁSOK
fonetika
beszédtechnológia
alkalmazottfonetika
beszéd-hallás
beszélő felismerése
beszéd-szintézis
![Page 8: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/8.jpg)
A MAGYAR BESZÉD-TECHNOLÓGIA KEZDETEI
• az első működő beszélőgép:
Kempelen Farkas (1791)
• kísérlet magánhangzók mesterséges felismerésére: Tarnóczy (1950-es évek)
• Kossuth hangjának „megtisztítása”
• analóg beszédjel digitális átalakítása:
az első számítógépek
![Page 9: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/9.jpg)
![Page 10: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/10.jpg)
![Page 11: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/11.jpg)
MAGÁNHANGZÓK HANGSZÍNKÉPEI
á a o ü e ö i u o a á i é e ü ö
Bal oldalon: Kempelen gépének hangjai
Jobb oldalon: ember ejtette hangok
![Page 12: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/12.jpg)
Egy magyar napilap Egy magyar napilap Tudomány és technika Tudomány és technika rovata hírt ad rovata hírt ad angol és német mérnökök angol és német mérnökök mesterségesbeszéd-előállításárólmesterségesbeszéd-előállításáról
rajzolt rezgésképből beszédrajzolt rezgésképből beszéd
„HANGFANTÓMOK”: 1939
![Page 13: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/13.jpg)
HANGELEMEK „FESTÉSE” A MEGSZÓLALTATÁSHOZ
![Page 14: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/14.jpg)
AZ ELSŐ MAGYARFORMÁNS-SZINTETIZÁTOR
(1983)
![Page 15: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/15.jpg)
A KORSZERŰ BESZÉD-SZINTÉZIS ALAPELVE
![Page 16: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/16.jpg)
A BESZÉDSZINTÉZIS EREDMÉNYEI
Jól érthető, azonnal megszólaltatható folyamatos beszéd.
A FELHASZNÁLÁS LEHETŐSÉGEIBŐL:
• oktatás• beszédrehabilitáció• vakok számítógép-használata• internetes kommunikáció• távközlési szolgáltatások• ipari alkalmazások
![Page 17: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/17.jpg)
A BESZÉDSZINTÉZIS A HALLÁS VIZSGÁLATÁBAN (1986–)
A beszédalapú hallásvizsgálat előnyei:
egyszerű, megbízható, gyors, gyermekek
szűrésére kiváló (8000 Hz-ig)
Természetes beszéddel nem megoldható,
a többletinformációk miatt
Megoldás:
célzottan fejlesztett mesterséges beszéd
![Page 18: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/18.jpg)
A GOH BESZÉDHALLÁS-SZŰRŐ
![Page 19: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/19.jpg)
A GOH-KÉSZÜLÉK
![Page 20: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/20.jpg)
A GOH EREDMÉNYEI
• a hallás zavarának jelzése• információt ad a gyermek általános
beszédészleléséről• a szűrést védőnő, óvónő, logopédus,
tanító végezheti• 3-10 éves gyerekek tömeges
szűrésének lehetősége• az országban több ezer készüléket
használnak
![Page 21: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/21.jpg)
A HALLÁSRA ÉPÜLŐ ÉSZLELÉSI FOLYAMATOK
FONOLÓGIAI SZINT
FONETIKAI SZINT
AKUSZTIKAI SZINT
hallástárolás
tárolás
tárolás
tárolás
![Page 22: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/22.jpg)
ÉSZLELÉS, MEGÉRTÉS
FUNKCIÓI:
• a beszéd értése • tiszta kiejtés• szókincsbővülés• olvasástanulás• írástanulás• helyesírás• összes tanulási
folyamat
GMP
Beszédészlelési és beszédmegértési diagnosztika
3-12 éveseknek
![Page 23: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/23.jpg)
KÉSŐN BESZÉLNI KEZDŐK
20
30
40
50
60
70
80
90
100
akusztikaiészlelés
fonetikaiészlelés
szeriálisészlelés
fonológiaiészlelés
7 év 9 év 10 év%
elvárt
![Page 24: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/24.jpg)
OLVASÁSI NEHÉZSÉGGEL KÜZDŐK
0102030405060708090
100
akusztikaiészlelés
fonológiaiészlelés
szeriálisészlelés
8 ÉVESEK 9 ÉVESEK 10 ÉVESEK%
elvárt
![Page 25: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/25.jpg)
ÉSZLELÉSI TELJESÍTMÉNY EGYOLDALI NAGYOTHALLÁS
ESETÉN
0
10
20
30
40
50
60
70
80
90
100
ENYHE HALLÁSZAVAR SÚLYOS HALLÁSZAVAR
BESZÉDÉSZLELÉSI SZINT%
elvárt
![Page 26: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/26.jpg)
AZ AJAKARTIKULÁCIÓ KÍSÉRLETI VIZSGÁLATÁNAK
KEZDETEI
Otto Jespersen: 1904
![Page 27: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/27.jpg)
PHANTOPHON: SIKETEK BESZÉDTANÍTÁSÁHOZ (1934)
![Page 28: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/28.jpg)
HALLÁSSÉRÜLTEK KORSZERŰ BESZÉDTANÍTÁSA
![Page 29: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/29.jpg)
HALLÁSSÉRÜLTEK BESZÉD-TANÍTÁSÁNAK EREDMÉNYEI
0
5
10
15
20
25
30
35
hagyományos módszerrel beszédkorrektorral
%
![Page 30: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/30.jpg)
19. SZÁZAD: A BESZÉD RÖGZÍTÉSÉNEK KEZDETEI
Edison első fonográfja
20. SZÁZAD: A BESZÉLŐ AZONOSÍTÁSA A RÖGZÍTETT BESZÉDE ALAPJÁN
![Page 31: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/31.jpg)
UJJLENYOMAT – HANGLENYOMAT?
A TUDOMÁNYOS KÉRDÉS:• A beszéd oly mértékben jellemző az
emberre, hogy a beszéde alapján azonosítható a beszélő személy?
ÁLTALÁNOS VÁLASZ:• Miért ne lenne? Felismerjük
barátainkat, ismerőseinket, például telefonon át is...
![Page 32: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/32.jpg)
ÉRDEKE AZ AZONOSÍTÁS BIZTONSÁGI RENDSZEREK,
LABORATÓRIUMOK, EGYES MUNKAHELYEK STB.
INFORMÁCIÓKÉRÉS: BANKSZÁMLÁK, TELEFONSZÁMOK, ADATSZOLGÁLTATÁS STB.
NEM ÉRDEKE AZ AZONOSÍTÁS BŰNÜGYEK
A BESZÉLŐ VISZONYULÁSA SZEMÉLYÉNEK
AZONOSÍTÁSÁHOZ
![Page 33: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/33.jpg)
A BESZÉLŐ SZEMÉLYAZONOSÍTÁSÁNAK
PROBLÉMÁJA
A beszéd akusztikai szerkezete beszélőnként változik:
„ún. beszélők közötti különbségek”.
Ugyanazon beszélő esetében is változik a helyzettől függően:
„egy beszélőn belüli különbségek”.
![Page 34: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/34.jpg)
HÁNY BESZÉLŐ BESZÉDÉRŐL KÉSZÜLTEK AZ ÁBRÁK?
Egy beszélő vagy Egy beszélő vagy
kettő? kettő?
![Page 35: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/35.jpg)
A BESZÉD FONETIKAI VIZSGÁLATA BESZÉLŐAZONOSÍTÁSKOR
• Beszédhangok összevetése
• Beszéddallam, hangsúly, beszédtempó,
szünetek
• Megakadásjelenségek
• Egyéni artikulációs sajátosságok
Műszeres és szubjektív elemzések
![Page 36: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/36.jpg)
![Page 37: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/37.jpg)
A BESZÉLŐAZONOSÍTÁS LEHETSÉGES EREDMÉNYEI
= AZONOS
~ NAGY VALÓSZÍNŰSÉGGEL AZONOS
? AZ AZONOSSÁG NEM BIZONYÍTOTT, DE NEM KIZÁRHATÓ
≠ AZ AZONOSSÁG KIZÁRHATÓ
AZ AZONOSÍTÁS ELVÉGZÉSE LEHETETLEN
![Page 38: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/38.jpg)
A JÖVŐ HÁROM MONDATBAN
1. BESZÉDÜNK TITKAI CSAKNEM VÉGTELENEK...
2. A BESZÉDTECHNOLÓGIA MIND TÖBB ISMERETET NYÚJT A GYAKORLATNAK.
3. A KUTATÁSI EREDMÉNYEK ALKALMAZÁSAI SZINTE KORLÁTLANOK...
![Page 39: A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG](https://reader034.vdocuments.net/reader034/viewer/2022051001/568157cf550346895dc555e5/html5/thumbnails/39.jpg)
KÖSZÖNÖM A FIGYELMÜKET!