Řečové technologie pomáhají překonávat bariéry Luděk Müller, Jakub Kanis Oddělení umělé inteligence, Katedra kybernetiky, Fakulta aplikovaných věd, Západočeská univerzita v Plzni 18.1.2008 1
Obsah Pomoc sluchově postiženým divákům TV pořadů Pomoc při vyhledávání v audio/video archivech řeči Pomoc zrakově postiženým převod textu do mluvené řeči Audiovizuální syntéza Znaková řeč - automatický překlad Závěrečné ukázky (SL inf., SL dialog) 18.1.2008 2
Pomoc sluchově postiženým divákům TV pořadů 18.1.2008 3
Automatické titulkování TV pořadů Přímé titulkování Zvuková stopa TV pořadu Titulky ASR (Realtime LVCSR) Stínový mluvčí Zvuková stopa hlučného TV pořadu Titulky Čtení titulků počítačovou syntézou ASR (Realtime LVCSR) Titulky rušného TV pořadu Klidná řeč bez okolního ruchu TTS 18.1.2008 4
Titulkování - Parlament 18.1.2008 5
Pomoc při vyhledávání v audio/video archivech řeči 18.1.2008 6
Ukázka vyhledávání slov a informací ze zvukových archivů IR PARLAMENT OK IR HOKEJ OK 18.1.2008 7 O, A
Pomoc zrakově postiženým 18.1.2008 8
Převod textu do mluvené řeči - ukázky TTS český ženský hlas monotónní pravidlová prozodie datově řízená prozodie dynamický výběr jednotek TTS ALena speechtech_demo.exe OK český mužský hlas (dynamický výběr jednotek) slovenský ženský hlas (pravidlová prozodie) věty odstavce 18.1.2008 9 S
Screenreader 18.1.2008 10
Audiovizuální syntéza 18.1.2008 11
Audiovizuální syntéza Mluvící hlava: vizuální část: 3D model modelování pohybů rtů akustická část: TTS systém 18.1.2008 12
Audiovizuální syntéza - ukázka Mluvicí hlava - Kořen OK Mluvicí hlava - Alena OK 18.1.2008 13 L
Znaková řeč automatický překlad 18.1.2008 14
Znaková řeč (čeština) Znakovaná čeština umělý jazykový systém komunikace mezi slyšícími a neslyšícími podobná češtině Český znakový jazyk mateřský a přirozený jazyk neslyšících komunikace mezi neslyšícími navzájem odlišný od češtiny: simultánnost např. jeden znak pro člověk-běží užití prostoru do prostoru jsou umístěny objekty na něž se mluvčí odkazuje roli intonace zastupuje mimika obličeje komunikace, Člověk ovládající znakový jazyk nemusí umět česky (ani rozumět textu) 18.1.2008 15
znaková řeč -> text -> mluvená řeč dobrý_den = Signémový slovník znakové řeči Lip-tracking Lip-reading Detekce trajektorie pohybu Rozpoznávání posloupnosti znaků Překlad do textu češtiny Mluvená řeč TTS pohyb dobrý_den dobrý den 18.1.2008 16
znaková řeč -> text Detekce polohy rukou 18.1.2008 17
znaková řeč -> text Detekce polohy rukou 18.1.2008 18
znaková řeč -> text - Detekce polohy rukou 18.1.2008 19
znaková řeč -> text Liptracking (detekce rtů) 18.1.2008 20
Mluvená řeč -> text -> znaková řeč Rozpoznávání mluvené řeči Artikulace mluvidel Překlad do posloupnosti znaků zn.č. Konverze do řetězce signémů Převod na trajektorii pohybu dobrý den dobrý_den kinematický popis 18.1.2008 21
Mluvená řeč -> text -> znaková řeč Animační model postavy + Model mluvící hlavy 18.1.2008 22
Závěrečné ukázky SL Hlášení Hlášení OK SL Matematika Matematika TH OK Matematika SL OK 18.1.2008 23
DĚKUJI ZA POZORNOST 18.1.2008 24