Fusion
multimodale pour les systèmes d’interaction
A. Wehbi
Les
chercheurs en informatique et en génie informatique consacrent une
partie importante de leurs efforts sur la communication et
l'interaction entre l'homme et la machine. En effet, avec l'avènement
du traitement multimodal et du multimédia en temps réel, l'ordinateur
n'est plus considéré seulement comme un outil de calcul, mais comme une
machine de traitement, de communication, de collection et de contrôle,
une machine qui accompagne, aide et favorise de nombreuses activités
dans la vie quotidienne. Une interface multimodale permet une
interaction plus flexible et naturelle entre l’homme et la machine, en
augmentant la capacité des systèmes multimodaux pour une meilleure
correspondance avec les besoin de l’homme. Dans ce type d’interaction,
un moteur de fusion est un composant fondamental qui interprète
plusieurs sources de communications, comme les commandes vocales, les
gestes, le stylet, etc. ce qui rend l’interaction homme-machine plus
riche et plus efficace.
Notre projet de recherche permettra une meilleure compréhension de la
fusion et de l'interaction multimodale, par la construction d'un moteur
de fusion en utilisant des technologies de Web sémantique. L'objectif
est de développer un système expert pour l'interaction multimodale
personne-machine qui mènera à la conception d'un outil de surveillance
pour personnes âgées, afin de leurs assurer une aide et une confiance
en soi, à domicile comme à l'extérieur.
Mots clés : Fusion, Interaction
multimodale, Ontologie, Modalités, Réseaux de Petri colorés.