Základy rozpoznávání a generování mluvené řeči - NPFL038

• Anglický název: Fundamentals of Speech Recognition and Generation
• Zajišťuje: Ústav formální a aplikované lingvistiky (32-UFAL)
• Fakulta: Matematicko-fyzikální fakulta
• Platnost: od 2014 do 2014
• Semestr: zimní
• E-Kredity: 6
• Rozsah, examinace: zimní s.:2/2, Z(+Zk) [HT]
• Počet míst: neomezen
• Minimální obsazenost: neomezen
• 4EU+: ne
• Virtuální mobilita / počet míst pro virtuální mobilitu: ne
• Stav předmětu: vyučován
• Jazyk výuky: čeština, angličtina
• Způsob výuky: prezenční
• Způsob výuky: prezenční
• Garant: Mgr. Nino Peterek, Ph.D.
• Třída: DS, matematická lingvistika; Informatika Mgr. - Matematická lingvistika
• Kategorizace předmětu: Informatika > Počítačová a formální lingvistika

Anotace

čeština

Poslední úprava: RNDr. Jiří Mírovský, Ph.D. (11.05.2022)

Tato přednáška se zabývá rozpoznáváním řeči, generováním řeči, extrakcí hlasových rysů a modelováním charakteristik výslovnosti. Zvláštní pozornost je věnována Skrytým Markovovým modelům použitým na řeč (FFT, n-dimenzionální klastrování, extrakci hodnot parametrů z dat, fonetické reprezentaci, prozodické analýze apod.). Součástí cvičení je natrénování vlastních modelů rozpoznávání a generování řeči.

angličtina

Poslední úprava: RNDr. Jiří Mírovský, Ph.D. (11.05.2022)

This course deals with speech recognition and generation tasks and feature extraction of voice and utterance characteristics. Of particular interest will be topics related to Hidden Markov Models as applied to speech (FFT, n- dimensional clustering, Gaussian mixtures, parameter value extraction from data, phonetic representation, prosodic analysis etc.). Preparation and training of own speech recognition models.

Literatura

čeština

Poslední úprava: Mgr. Nino Peterek, Ph.D. (13.10.2017)

Steve Young, Dan Kershaw, Julian Odell, Dave Ollason, Valtcho Valtchev, Phil Woodland, Cambridge, The HTK Book, Entropic Ltd. http://htk.eng.cam.ac.uk, 1995-2007

Zdena Palková, Fonetika a fonologie češtiny, Karolinum, Praha, 1997

NPFL038 Detaily a novinky

angličtina

Poslední úprava: Mgr. Nino Peterek, Ph.D. (13.10.2017)

Steve Young, Dan Kershaw, Julian Odell, Dave Ollason, Valtcho Valtchev, Phil Woodland, The HTK Book, Cambridge, Entropic Ltd. http://htk.eng.cam.ac.uk, 1995-2007

Zdena Palková, Fonetika a fonologie češtiny, Karolinum, Praha, 1997

NPFL038 Details and News

Požadavky ke zkoušce

čeština

Poslední úprava: Mgr. Nino Peterek, Ph.D. (13.10.2017)

Podmínkou zápočtu je příprava a natrénování vlastních modelů rozpoznávání řeči.

angličtina

Poslední úprava: Mgr. Nino Peterek, Ph.D. (13.10.2017)

Preparation and training of own speech recognition models.

Sylabus

čeština

Poslední úprava: Mgr. Nino Peterek, Ph.D. (13.10.2017)

Úvod do produkce a vnímání řeči.

Základní principy automatického zpracování řeči (HMM)

• rozpoznávání izolovaných slov,

• definice výstupních pravděpodobností,

• Baum-Welch trénovací algoritmus,

• rozpoznávání a Viterbi algoritmus,

• rozpoznávání plynulé řeči,

• adaptace modelů na mluvčího.

Popis softwarového nářadí HTK

• moduly pro přípravu dat,

• moduly pro trénování, rozpoznávání a testování.

Příprava dat

• gramatika úlohy,

• jazykový model,

• fonetický slovník,

• nahrání dat, jejich přepis a kódování.

Vytvoření HMM monofonémů

• vytvoření startovních modelů bez znalosti časových hranic fonémů,

• ošetření modelu ticha,

• automatické doladění přepisů.

Vytvoření HMM trifonémů

• převod monofonému na trifonémy,

• trifonémové sdílení stavů pomocí rozhodovacích stromů,

• zjemnění pravděpodobnostních funkcí.

Metody vyhodnocení úspešnosti rozpoznávače.

Základní principy automatického generování řeči

Analýza prosodie mluvené řeči.

angličtina

Poslední úprava: Mgr. Nino Peterek, Ph.D. (13.10.2017)

Introduction to Speech Production and Perception.

General Principles of Automatic Speech Recognition (HMM)

• Isolated Word Recognition,

• Output Probability Specification,

• Baum-Welch Re-Estimation,

• Recognition and Viterbi Decoding,

• Continuous Speech Recognition,

• Speaker Adaptation.

HTK Tools description

• Data Preparation Tools,

• Training Tools,

• Recognition Tools,

• Analysis Tool.

Data Preparation

• the Task Grammar,

• the Language Model,

• the Dictionary,

• Recording the Data, Creating the Transcription Files, Coding the Data.

Creating Monophone HMMs

• Creating Flat Start Monophones,

• Fixing the Silence Models,

• Realigning the Training Data.

Creating Triphones HMMs

• Making Triphones from Monophones,

• Making Tied-State Triphones,

• Splitting States.

Recogniser Evaluation.

General Principles of Automatic Speech Generation

Speech Prosody Analysis.