Cyril Crocquesel sur la table tactile Diamond touch

Un article d’Émile Verdurand (doctorant), de Gilles Coppin (professeur), d’Olivier Grisvard (ingénieur de recherche) du département Lussi et de Franck Poirier. Lors des “Rencontres des jeunes chercheurs en intelligence artificielle” de mai 2009, plusieurs articles ont été présentés. Cet article a été sélectionné pour une publication en version étendue dans la “Revue d’intelligence artificielle”. Les recherches ont été effectuées au laboratoire Atol à Brest. (Voir l’article Lexians concernant le laboratoire Atol).

Résumé : Les travaux se situent dans le domaine de l’interaction homme-machine (IHM). Ils portent de façon large sur l’évaluation de l’adéquation fonctionnelle et des performances des IHM multimodales en regard des éléments mis en jeu dans une situation d’interaction. A savoir, une tâche à accomplir, un utilisateur et un contexte d’utilisation ou contraintes d’environnement (place disponible, luminosité, bruit, vibrations…). Il s’agit principalement de définir un cadre de modélisation de l’ensemble des paramètres à prendre en compte pour évaluer l’utilisabilité (ergonomie logicielle) d’une IHM multimodale (associant geste sur surface tactile et commande vocale, par exemple) et de définir des méthodes de mesure fondées sur la modélisation proposée qui permettent l’évaluation des performances de l’utilisateur avec une telle IHM. L’objectif est d’être en mesure de comparer formellement des modalités d’interaction ou combinaisons de modalités en fonction d’un contexte d’utilisation et d’une tâche opérateur, afin de prédire l’utilisabilité d’un choix de conception d’IHM multimodale et de démontrer la pertinence de ce choix. Un des intérêts d’une telle évaluation est de s’intéresser aux causes d’une mauvaise adéquation des modalités et non à leurs conséquences (temps de réalisation, nombre d’erreurs, par exemple)./–/ Des expérimentations avec utilisateurs ont été menées sur un cas d’application de surveillance maritime aéroportée développée par Thales. Un domaine dans lequel l’évaluation opérationnelle d’une IHM, même dans une démarche de prototypage rapide, coûte encore relativement cher étant donné la complexité des systèmes. Diverses interfaces ont été développées pour l’occasion utilisant entre autre une table tactile, un dispositif de suivi du regard, un système de détection gestuelle par infra-rouge (wiimote), de la reconnaissance vocale.

Mots-clés : Interaction multimodale, modélisation, évaluation, modalité, langage d’intéraction, adéquation au contexte.

Réference : Émile Verdurand, Gilles Coppin, Franck Poirier, Olivier Grisvard. Modélisation ét évaluation de l’interaction dans les systèmes multimodaux. Revue d’intelligence artificielle. Avril 2010. Vol. 24, n°2. Pages 227-255.

Voir la référence dans la base des publications de l’École ou sur Hal.