http://www.techepdia.eu
Za obsah publikací odpovídá výlučně autor. Publikace (sdělení) nereprezentují názory Evropské komise a Evropská komise neodpovídá za použití informací, jež jsou jejich obsahem.
Juraj Kačur, Gregor Rozinaj, Renata Rybárová
Ivan Pravda
Multimodální rozhraní MMI (MultiModal Interface) se skládá z různých částí a modulů, které slouží pro přirozenou a intuitivní komunikaci s vlastním systémem. Všechny dohromady představují funkcionalitu MMI. Do základního souboru modulů, které mohou být součástí multimodálního rozhraní, mohou patřit např. rozeznání řečníka, rozeznání řeči a hlasových povelů, rozeznání obličejů, navigace pomocí gest, navigace pohybem očí a syntéza řeči.
Hlavním cílem tohoto výukového kurzu je seznámit studenty se základy multimodálního rozhraní a multimodálními aplikacemi. Studentovi jsou představeny základní principy rozeznávání tváří, identifikace mluvčího, navigace pomocí hlasových povelů a gest. Konec modulu je věnován možnému vyžití popsaných modalit v multimodální aplikaci.
Multimodální rozhraní, multimodální aplikace, identifikace mluvčího, 2D/3D rozeznávání obličejů, navigace pomocí gest, rozeznání řeči, identifikace uživatele
- [1] Probst, Michael; Schumann, Sebastian; Rozinaj, Gregor; Minarik, Ivan; Rybárová, Renata; Oravec, Miloš. EVALUATION: Final Multimodal Interface for User/Group-Aware Personalisation, Deliverable 5.5.1, available at http://www.hbb-next.eu/index.php/documents, Decmber 2013.
- [2] Vančo, Marek; Minárik, Ivan; Rybárová, Renata. Evolution of static gesture recognition. In: Redžúr 2014 proceedings; 8th International Workshop on Multimedia and Signal Processing; 13 May 2014, Dubrovnik, Croatia. Bratislava: Nakladateľstvo STU, 2014, p. 41-44. ISBN 978-80-227-4162-0.
- [3] Rautaray, Siddhart S., Agrawal, Anupam. Vision based hand gesture recognition for human computer interaction: a survey, Springer, 2012, pp 106-113. ISBN 978-3-642-27386-5
- [4] Kristensson, Per Ola; Denby, L.C. Continuous recognition and visualization of pen strokes and touch-screen gestures. In Proceedings of the Eighth Eurographics Symposium on Sketch-Based Interfaces and Modeling, 2011, pp. 95-102.
- [5] Gülbahar, Mark; Probst, Michael; Schumann, Sebastian; Rozinaj, Gregor; Minarik, Ivan; Rybárová, Renata; Oravec, Miloš. Design and Protocol: Intermediate Multimodal Interface and Context Aware Recommendation Engine, Deliverable 5.3.1, available at http://www.hbb-next.eu/index.php/documents, October 2012.
- [6] T. Kinnunen, H. Li, An overview of text-independent speaker recognition: from features to supervectors, Speech communication, Vol. 52, pp. 12-40, Elsevier, 2010
- [7] Benesty J., Sondhi M. M., Huang Y., Springer Handbook of Speech Processing, Springer-Verlag, ISBN 978-3-540-49125-5, 2008
- [8] Uhlíř, J. - Sovka, P. - Pollák, P. - Hanžl, V. - Čmejla, .: Technologie hlasových komunikací. Nakladatelství ČVUT, 2007.
- [9] Psutka, J. - Müller, L. - Matoušek, J. - Radová, V.: Mluvíme s počítačem česky. Academia 2006.