Responsables
Nous proposons de construire Finger-tracker, un dispositif de mesure du mouvement des doigts lors d’une tâche d’écriture au clavier par captation et traitement vidéo. Il s’agit d’un projet innovant qui mélange une approche de vision computationnelle et de psychologie cognitive.
Le projet comporte trois volets :
1) un modèle reconnaissance de texte à partir d’une image d’un clavier,
2) un modèle de détection du « squelette » (reconnaissance des articulations des mains sur une vidéo),
3) un script sous OpenSesame de détection des temps d’appui sur les touches d’un clavier. En combinant ces trois outils nous pourrons contrôler visuellement et mesurer automatiquement la conduite de la production d’écrits dans des tâches comportementales. Plus généralement, nous ferons un saut qualitatif et conceptuel dans l’étude des déterminants de la production de séquences.