6MMI applikácie

Moderný aplikačný výskum je zameraný na čo najprirodzenejšie multimodálne rozhranie a jeho začlenenie do multimediálneho systému už používaného na dennej báze. Multimodálne rozhranie nie je obmedzené iba na televíziu, ale má využitie v rôznych aplikáciach. Vízia budúcich aplikácií a systémov nie je len ovládať TV a prístup k multimediálnemu obsahu, ale budovať systém, ktorý pozná zvyky svojich používateľov, ich preferencie a záujmy. Takýto systém sa môže stať inteligentnou súčasťou domácnosti a môže poskytovať pokročilé prepojenie pre rôzne služby (nákupy popri sledovaní TV, e-voľby alebo digitálny vrátnik).

Pre čo najefektívnejšie použitie multimodálneho rozhrania je dôležité vedieť, ktorá modalita je zviazaná s ktorým krokom a čo sa má vykonať. Pre rôzne druhy krokov, resp. akcií sú vhodné rôzne druhy modalít. Napríklad zadávanie textu by bolo zbytočne obtiažne, časovo náročné a nepohodlné cez gestá, oveľa lepšie by sa tu uplatnilo rozpoznávanie reči. S týmto vedomím je nevyhnutné pre multimodálny systém použiť integračnú platformu, ktorá bude poskytovať požadované údaje čiastkovým aplikáciám. Tieto aplikácie potom nepotrebujú poznať zdroj modality.

Jednoduchý modelový príklad: MMI aplikácia pre ovládania TV zobrazí používateľov, ktorí boli rozpoznaní prostredníctvom hlasu alebo rozpoznaním tváre pomocou príslušného modulu. Iba rozpoznaní používatelia v tomto zozname majú povolené ovládať TV pomocou gest, hlasom alebo inou modalitou. Keď používateľ opustí miestnosť, je zo zoznamu automaticky odstránený.

Ostatné časti aplikácie zobrazujú odporúčané kanály. V závislosti od spoločných preferencií rozpoznaných ľudí v miestnosti systém dokáže prispôsobiť ponuku týchto kanálov. Pomocou ťahových gest je možné prehrať položku zo zoznamu, prípadne prehrávanie zastaviť. Niektoré z odporúčaných kanálov môžu byť aj zamknuté, čo znamená, že používatelia bez oprávnenia si ich nemôžu prehrať bez zadania tajného vzoru. Tajný vzor predstavuje dynamické gesto.