6MMI aplikace

Moderní aplikační výzkum je zaměřen na vytvoření co nejpřirozenějšího multimodálního rozhraní a jeho začlenění do multimediálního systému již využívaného v každodenním životě. Multimodální rozhraní není omezeno pouze na televizi, ale má využití i v různých aplikacích. Vize budoucích aplikací a systémů není jen ovládat TV a mít přístup k multimediálnímu obsahu, ale budovat systém, který rozezná zvyky svých uživatelů, jejich preference a zájmy. Takový systém se pak může stát inteligentní součástí domácnosti, a může poskytovat pokročilé nástroje pro různé služby (např. nákupy při sledování TV, e-volby nebo digitální vrátný).

Z hlediska co nejefektivnějšího využití multimodálního rozhraní je důležité vědět, která modalita je svázána s konkrétní aktivitou, která se má vykonat. Pro různé druhy kroků, resp. aktivit jsou vhodné různé druhy modalit, například zadávání textu by bylo zbytečně obtížné, časově náročné a nepohodlné pomocí gest. Mnohem lépe by se zde uplatnilo rozeznávání řeči. S tímto vědomím je nevyhnutelné pro multimodální systém využít integrovanou platformu, která bude poskytovat požadované údaje dílčím aplikacím. Tyto aplikace potom nepotřebují znát zdroj modality.

Jednoduchý modelový příklad:

MMI aplikace pro ovládání TV zobrazí uživatele, kteří byli identifikováni prostřednictvím hlasu nebo rozeznáním tváře pomocí příslušného modulu. Pouze rozeznaní uživatelé v tomto seznamu mají povoleno ovládat TV pomocí gest, hlasem nebo jinou modalitou. Pokud uživatel opustí místnost, je ze seznamu automaticky odstraněn.

Ostatní části aplikace zobrazují dostupné TV kanály. V závislosti na společných preferencích rozeznaných lidí v místnosti dokáže systém přizpůsobit nabídku těchto kanálů. Pomocí tahových gest je také možné přehrát položku ze seznamu, případně přehrávání zastavit. Některé z dostupných kanálů mohou být i zamknuté, což znamená, že uživatelé bez oprávnění si je nemohou přehrát bez zadání tajného vzoru. Tajný vzor představuje dynamické gesto.