De la trace au modèle : approches de modélisation de l’activité en réalité étendue (XR)

Les dispositifs de réalité étendue (XR) transforment les conditions dans lesquelles l'activité humaine se déploie. Ils articulent espaces physiques et numériques en favorisant l'interaction avec des objets et des acteurs distribués dans les deux environnements et en engagent l'utilisateur dans une expérience immersive. Modéliser cette activité soulève une question méthodologique : comment transformer les phénomènes observés en modèles pertinents sans réduire la complexité de l'activité en XR ? Notre recherche tire parti d'une spécificité majeure des dispositifs XR. Leur instrumentation native produit en continu des flux multimodaux de traces décrivant l'activité avec une finesse inédite. Cet article propose une typologie analytique des principales approches qui transforment ces traces en modèles, sans viser l'exhaustivité des outils existants. Trois logiques sont distinguées : le codage et l'annotation multimodale, la modélisation par variables mesurables, et la reconnaissance automatique de l'activité. Une discussion transversale en dégage les compromis méthodologiques et la division du travail entre le chercheur et les outils de modélisation. La typologie offre un cadre de positionnement permettant de clarifier les choix de modélisation au regard des spécificités de l'activité en XR et des finalités de la recherche.