http://www.techepdia.eu
Esta publicación (comunicación) es responsabilidad exclusiva de su autor. La Comisión no es responsable del uso que pueda hacerse de la información aquí difundida.
Juraj Kačur, Gregor Rozinaj, Renata Rybárová
Miquel Soriano
La interfaz multimodal (MMI) consta de varios temas y módulos que sirven para una comunicación natural y fácil de usar con el sistema. En conjunto, estos módulos representan la funcionalidad de MMI. La lista de módulos que pueden ser parte de la interfaz multimodal es la siguiente: el reconocimiento del hablante, el reconocimiento de comandos y del habla, el reconocimiento multi facial, la navegación por gestos, la navegación con los ojos y la síntesis de voz. Este módulo introducirá algunos de ellos para ayudar a entender los principios básicos y los algoritmos que se nos presentan en nuestra vida cotidiana.
El objetivo principal del módulo es introducir al estudiante en lo fundamental de la interfaz multimodal y su aplicación. El estudiante se familiarizará con los principios básicos del reconocimiento facial, la identificación del hablante y la navegación por comandos de voz y por gesto. Al final, se describen las posibles aplicaciones multimodales de todas las modalidades mencionadas.
Interfaz multimodal, aplicación multimodal, identificación de usuario, reconocimiento facial 2D/3D, navegación por gestos, reconocimiento de voz, identificación del hablante.
- [1] Probst, Michael; Schumann, Sebastian; Rozinaj, Gregor; Minarik, Ivan; Rybárová, Renata; Oravec, Miloš. EVALUATION: Final Multimodal Interface for User/Group-Aware Personalisation, Deliverable 5.5.1, available at http://www.hbb-next.eu/index.php/documents, Decmber 2013.
- [2] Vančo, Marek; Minárik, Ivan; Rybárová, Renata. Evolution of static gesture recognition. In: Redžúr 2014 proceedings; 8th International Workshop on Multimedia and Signal Processing; 13 May 2014, Dubrovnik, Croatia. Bratislava: Nakladateľstvo STU, 2014, p. 41-44. ISBN 978-80-227-4162-0.
- [3] Rautaray, Siddhart S., Agrawal, Anupam. Vision based hand gesture recognition for human computer interaction: a survey, Springer, 2012, pp 106-113. ISBN 978-3-642-27386-5
- [4] Kristensson, Per Ola; Denby, L.C. Continuous recognition and visualization of pen strokes and touch-screen gestures. In Proceedings of the Eighth Eurographics Symposium on Sketch-Based Interfaces and Modeling, 2011, pp. 95-102.
- [5] Gülbahar, Mark; Probst, Michael; Schumann, Sebastian; Rozinaj, Gregor; Minarik, Ivan; Rybárová, Renata; Oravec, Miloš. Design and Protocol: Intermediate Multimodal Interface and Context Aware Recommendation Engine, Deliverable 5.3.1, available at http://www.hbb-next.eu/index.php/documents, October 2012.
- [6] T. Kinnunen, H. Li, An overview of text-independent speaker recognition: from features to supervectors, Speech communication, Vol. 52, pp. 12-40, Elsevier, 2010
- [7] Benesty J., Sondhi M. M., Huang Y., Springer Handbook of Speech Processing, Springer-Verlag, ISBN 978-3-540-49125-5, 2008