Interaction tactile et gestuelle

L'interaction tactile et gestuelle permet aux individus de contrôler des appareils en touchant une surface ou en déplaçant leurs mains et leur corps, constituant la base des smartphones, des tablettes et de nombreuses interfaces utilisateur naturelles.

Definition

L'interaction tactile est une entrée directe réalisée par contact avec une surface sensible, souvent avec plusieurs contacts simultanés, tandis que l'interaction gestuelle interprète le mouvement et la configuration des doigts, des mains ou du corps comme des commandes ; ensemble, elles permettent un contrôle direct, souvent naturel, des systèmes interactifs.

Scope

Ce sujet couvre les entrées tactiles directes et gestuelles : l'interaction mono- et multi-touch sur les écrans et les surfaces, les stratégies de dimensionnement et de précision des cibles tactiles, la conception et l'élicitation des vocabulaires gestuels, ainsi que les gestes en l'air et de forme libre. Il aborde les questions de performance humaine et de conception spécifiques à ces modalités. Il ne couvre pas le pointage avec des dispositifs indirects, traité sous le thème du pointage et de l'acquisition de cibles, ni la parole et les modalités combinées, traitées sous l'interaction multimodale et vocale.

Core questions

• Comment l'entrée tactile et le problème du « gros doigt » affectent-ils la taille et la précision des cibles ?
• Comment les vocabulaires gestuels sont-ils conçus pour que les gestes soient intuitifs et mémorisables ?
• Quelles sont les forces et les limites du multi-touch par rapport au pointage ?
• Comment le toucher direct modifie-t-il la conception du retour d'information et des commandes ?

Key concepts

• multi-touch
• taille de la cible tactile
• problème du gros doigt
• vocabulaire gestuel
• élicitation de gestes
• manipulation directe par le toucher
• geste en l'air
• interface utilisateur naturelle

Key theories

Précision tactile et dimensionnement des cibles

Le toucher direct est imprécis car le doigt masque la cible et entre en contact avec une large zone ; des stratégies telles que les curseurs décalés, la sélection au relâchement et des tailles de cible adéquates améliorent de manière mesurable la précision tactile.

Gestes définis par l'utilisateur

L'élicitation de gestes auprès des utilisateurs, plutôt que l'imposition de gestes inventés par les concepteurs, produit des vocabulaires plus intuitifs et consensuels, améliorant l'apprentissage des interfaces gestuelles.

Conception d'interfaces utilisateur naturelles

La conception pour le toucher et les gestes nécessite de repenser les conventions de l'ère de la souris ; les interfaces utilisateur naturelles efficaces exploitent la directivité et l'immédiateté tout en gérant le manque de précision et l'absence de survol et de clic droit.

Clinical relevance

L'interaction tactile et gestuelle est le mode dominant d'utilisation des smartphones, tablettes, bornes interactives et de nombreux appareils ; un bon dimensionnement des cibles tactiles et des gestes intuitifs sont essentiels à l'utilisabilité de ces dispositifs et à leur accessibilité pour les utilisateurs ayant des niveaux de dextérité variés.

History

La recherche sur les écrans tactiles remonte aux années 1980, incluant des travaux sur l'amélioration de la précision tactile. L'interaction multi-touch s'est généralisée avec les smartphones et les tablettes vers 2007, stimulant la recherche sur la conception des gestes, y compris les études d'élicitation auprès des utilisateurs, et sur les principes de conception des interfaces utilisateur naturelles qui exploitent le toucher direct et les gestes.

Key figures

• Jacob O. Wobbrock
• Ben Shneiderman
• Daniel Wigdor
• Dennis Wixon
• Bill Buxton

Seminal works

• wobbrock2009
• potter1988
• wigdor2011

Frequently asked questions

Pourquoi les cibles tactiles sont-elles souvent plus grandes que les cibles de souris ?

Un bout de doigt entre en contact avec une zone large et souple et masque la cible située en dessous, rendant la sélection précise plus difficile qu'avec un curseur au pixel près. Pour maintenir la fiabilité du toucher, les concepteurs agrandissent les cibles interactives et les espacent, et peuvent utiliser des techniques comme la sélection au relâchement pour améliorer la précision.

Pourquoi éliciter les gestes auprès des utilisateurs plutôt que de les concevoir ?

Les gestes inventés par les concepteurs sont souvent difficiles à deviner ou à mémoriser pour les utilisateurs. L'élicitation de gestes en demandant à de nombreux utilisateurs comment ils effectueraient des actions révèle des choix communs et intuitifs, conduisant à des ensembles de gestes que davantage de personnes peuvent découvrir et se rappeler sans instruction.