Rečové interaktívne komunikačné systémy

Študijné programy

Informácie o výučbe

Vyučujúci

doc. Ing. Stanislav Ondáš, PhD. doc. Ing. Daniel Hládek, PhD.

Rozvrh

Výsledky vzdelávania

Predmet je zameraný na získanie teoretických vedomostí a nadobudnutie praktických zručností v oblasti návrhu interaktívnej komunikácie prostredníctvom mobilných telekomunikačných terminálov, ako sú smartfóny, tablety a pod. Študenti sa oboznámia s rečovými a multimodálnymi interakčnými systémami, s ich štruktúrou a s technológiami, ktoré umožňujú komunikáciu rečou a tiež pomocou ďalších modalít (gestá, dotyk, ...). Absolvovanie predmetu poskytne absolventovi základné poznatky o technológiách rozpoznávania a syntézy reči, riadenia interakcie, multimodálnej fúzie a fízie a o technológiach pre hlasovú interakciu cez web, sprostredkovanú cez mobilné telekomunikačné terminály. Študenti získajú praktické skúsenosti s návrhom interaktívnych služieb s hlasovou modalitou pre rečové interaktívne systémy a tiež pre aplikácie pre mobilné terminály s využitím technológií na rozpoznávanie a syntézu reči.

Stručná osnova predmetu

1. Základy multimodálnej interakcie medzi počítačmi a ľuďmi; 2. Rečové a multimodálne interaktívne systémy – definícia, klasifikácia, princípy a štruktúra; 3. Mobilné a webové interaktívne systémy a technológie (server-klient riešenia, dostupné realizácie technológií, štandardy, prostriedky na vytváranie mobilných webobých aplikácií s VUI); 4. Komunikačné modality (text, dotyk, reč, gestá, snímanie tváre, mozgové vlny); 5. Multimodálne technológie pre mobilné terminály; 6. Automatické rozpoznávanie reči a hovoriaceho; 7. Automatické rozpoznávanie tváre, giest a ďalších modalít; 8. Fúzia a fízia modalít; 9. Riadenie interakcie; 10. Syntéza reči; 11. Doménové dáta v interaktívných systémoch a ich službách; 12. Metódy evaluácie interaktívnych telekomunikačných aplikácií.

Podmienky na absolvovanie

Spôsob hodnotenia a skončenia štúdia predmetu: Zápočet a skúška Priebežné hodnotenie (PH): Študent prospeje v PH a získa zápočet, keď splní podmienku získať min. 21% z 40%. Zápočet Záverečné hodnotenie (ZH): Študent prospeje v ZH a úspešne vykoná skúšku, keď splní podmienku získať min. 31% z 60%. Skúška Celkové hodnotenie: CH je suma hodnotení získaných študentom za hodnotené obdobie. Celkový výsledok sa stanoví v súlade s vnútornými predpismi TUKE. (študijný poriadok, vnútorný predpis zásady doktorandského štúdia)

Odporúčaná literatúra

[1] Juhár, J. a kol.: Rečové technológie v telekomunikačných a informačných systémoch, Košice 2011, ISBN 978-80-89284-75-7 [2] J.-P. Thiran, F. Marqués, H. Bourlard, Eds., Multimodal Signal Processing Theory and Applications for ,Human–Computer Interaction, Elsevier Academic Press, 2010. [3] David Benyon, Designing Interactive Systems, 2ed., Pearson Academic Wesley, 2010. [4] Alan Dix et.al., Human-computer interaction, 3ed., Pearson Prentice Hall, 2004.

Poznámky

Pre úspešné absolvovanie predmetu je potrebné získať zápočet a úspešne absolvovať skúšku. To v sebe zahŕňa účasť študenta na vzdelávacích činnostiach priamej výučby, na prednáškach, cvičeniach, ako aj samostatné štúdium a aj samostatnú tvorivú činnosť študenta pri spracovaní semestrálneho zadania/zadaní, projektu na stanovenú tému, v stanovenom rozsahu, v stanovenom prevedení spolu 180 h časovej náročnosti práce študenta za semester.

Hodnotenie

Celkový počet hodnotených študentov: 81