Detail předmětu
Zpracování řečových signálů
ZRE Ak. rok 2023/2024 letní semestr 5 kreditů
Aplikace počítačového zpracování řeči, číslicové zpracování řečových signálů, tvorba a slyšení řeči, úvod do fonetiky, předzpracování a základní parametry, lineárně-prediktivní model, cepstrum, určování základního tónu hlasu, kódování - časová oblast a vokodéry, rozpoznávání - DTW a HMM, syntéza. Software a knihovny pro zpracování řeči.
Garant předmětu
Koordinátor předmětu
Jazyk výuky
Zakončení
Rozsah
- 26 hod. přednášky
- 2 hod. cvičení
- 12 hod. pc laboratoře
- 12 hod. projekty
Bodové hodnocení
- 51 bodů závěrečná zkouška (písemná část)
- 14 bodů půlsemestrální test (písemná část)
- 6 bodů laboratoře
- 29 bodů projekty
Zajišťuje ústav
Přednášející
Cvičící
Cíle předmětu
Seznámit studenty se základními charakteristikami řečového signálu v návaznosti na tvorbu a slyšení řeči lidmi. Popsat základní algoritmy analýzy řeči společné mnohým aplikacím. Podat přehled aplikací (rozpoznávání, syntéza, kódování) a informovat o praktických stránkách implementace řečových algoritmů.
Studenti se seznámí se základními charakteristikami řečového signálu v návaznosti na tvorbu a slyšení řeči lidmi. Pochopí základní algoritmy analýzy řeči společné mnohým aplikacím. Získají přehled o aplikacích (rozpoznávání, syntéza, kódování) a o praktických stránkách implementace řečových algoritmů. Budou schopni navrhnout jednoduchý systém pro zpracování řeči (detektor řečové aktivity, rozpoznávač několika izolovaných slov), včetně implementace do aplikačních programů.
Proč je předmět vyučován
Řeč je nejběžnější formou lidské komunikace a řečí přenášíme nejvíce informací. Automatické zpracování řeči je potřeba jak pro zpracování komunikace člověk-člověk (kódování, nebo třeba dolování informací z hovorů v call centru), tak pro komunikaci člověk-počítač (hlasové ovládání, hlasové vyhledávání, autentizace pomocí hlasu) i počítač-člověk (syntéza z textu). V kursu ZRE dostanete přehled toho, jak se řeč tvoří, jak se parametrizuje, a jak se s ní dále pracuje. Uvidíte, že se jedná o zajímavý mix měkkých věd", zpracování signálů, strojového učení a dalších ingrediencí. Znalosti získané v ZRE můžete ale aplikovat i jinde, např. problém rozpoznávání sekvencí dalece přesahuje rozpoznávání řeči. Kurs je učen lidmi ze skupiny BUT Speech@FIT, která je na špičce světového výzkumu v dolování informací z řeči.
Literatura studijní
- Gold, B., Morgan, N.: Speech and Audio Signal Processing, Wiley-Interscience; 2 edition.
- Yu, D., Deng, L., Automatic speech recognition, Springer, 2016.
- Rabiner, L. R., & Schafer, R. W. Theory and applications of digital speech processing, Pearson, 2011.
- Psutka, J., Müller, L., Matoušek, J., & Radová, V., Mluvíme s počítačem česky, Academia, 2006.
Literatura referenční
- Psutka, J.: Komunikace s počítačem mluvenou řečí. Academia, Praha, 1995, ISBN 80-200-0203-0
-
Gold, B., Morgan, N.: Speech and Audio Signal Processing, John Wiley & Sons, 2000, ISBN 0-471-35154-7
-
www stránka předmětu https://www.fit.vutbr.cz/study/courses/ZRE/public/
Osnova přednášek
- Úvod, aplikace zpracování řeči.
- Číslicové zpracování řečových signálů.
- Tvorba a řeči a její signálový model.
- Předzpracování a základní parametry, cepstrum.
- Lineárně-prediktivní model.
- Určování základního tónu hlasu
- Kódování řeči - základy.
- Kódování řeči CELP.
- Základy rozpoznávání řeči, DTW.
- Skryté Markovovy modely HMM.
- Systémy pro rozpoznávání řeči s velkým slovníkem (LVCSR).
- Rozpoznávání mluvčího a jazyka. Využití neuronových sítí ve zpracování řeči.
- Syntéza řeči z textu.
Osnova numerických cvičení
- Paramatrizace, DTW, HMM.
Osnova počítačových cvičení
- Úvod.
- Lineární predikce a vektorové kvantování.
- Určování základního tónu a kódování řeči.
- Základy klasifikace.
- Rozpoznávání - Dynamic time Warping (DTW).
- Rozpoznávání - skryté Markovovy modely (HTK).
Průběžná kontrola studia
- půlsemestrální test 14b
- projekt 29b
- presentace výsledků na poč. cvičeních 6b
Zařazení předmětu ve studijních plánech
- Program IT-MGR-2, obor MBI, libovolný ročník, povinně volitelný skupina S
- Program IT-MGR-2, obor MBS, MIS, MMM, libovolný ročník, volitelný
- Program IT-MGR-2, obor MGM, 1. ročník, povinný
- Program IT-MGR-2, obor MIN, libovolný ročník, povinně volitelný skupina C
- Program IT-MGR-2, obor MPV, libovolný ročník, povinně volitelný skupina G
- Program IT-MGR-2, obor MSK, 2. ročník, povinně volitelný skupina B
- Program MITAI, obor NADE, NBIO, NCPS, NEMB, NEMB do 2021/22, NGRI, NHPC, NIDE, NISD, NISY, NISY do 2020/21, NMAL, NMAT, NNET, NSEC, NSEN, NVER, NVIZ, libovolný ročník, volitelný
- Program MITAI, obor NSPE, libovolný ročník, povinný