14

RésuméCet article présente une plate-forme qui permet d’évaluer l’expérience utilisateur face à des concepts innovants dans des systèmes sociotechniques évolutifs. Développer un système nécessite d’effectuer des évaluations qui soient formatives (tout au long de la phase de conception) et sommatives (en fin de conception). Concevoir ou reconcevoir des systèmes, c’est créer de nouvelles interactions humain-humain et humain-système. Au travers d’innovations technologiques c’est aussi créer de nouveaux usages. Prévoir ces usages et évaluer ces interactions nécessite de mettre en place des expérimentations et des essais faisant appel à des méthodes et des outils permettant d’enregistrer, d’analyser et d’interpréter les activités mais aussi les comportements des personnes en interaction. Au-delà de l’usage (utilité, utilisabilité, sens), l’émotion ressentie au cours de l’action peut être un facteur déterminant de la conduite et de la performance d’un système. La plate-forme pepss réunit à la fois des prototypes, des méthodes et des outils associés. Dans cet article, nous présentons une méthode permettant d’évaluer les processus émotionnels d’opérateurs confrontés à des multisollicitations pendant la réalisation d’une tâche de surveillance. Le protocole utilisé se base sur un test attentionnel multisollicitation (dérivé de la MultiAttribute Task ou mat), où les sujets se voient détournés de leur tâche principale par des agents distracteurs/stresseurs. La plate-forme pepss et la méthode statistique associée que nous décrivons dans cet article soulignent l’importance de la synchronisation d’un maximum de moyens en temps réel, tout en effectuant des choix afin de limiter l’intrusivité des outils mis en œuvre.

Development of an adaptable and customizable evaluation platform for the study of emotional behavior in situations of multiple solicitationsThis paper presents a platform for the evaluation of user experience pertaining to innovative concepts in evolutionary socio-technical systems. Developing a system involves performing formative evaluations (during the design phase) and summative evaluations (at the end of the design phase).Designing or redesigning systems is creating new human-human interactions and human-system interactions through technological innovations, but also creating new uses. Anticipating these uses and evaluating these interactions requires setting up experiments and tests using methods and tools to capture, analyze, and interpret the activities and behaviors of individuals while they are interacting. Beyond the use (utility, usability, sense), the emotion of users may be a factor in the performance of a system. The platform combines prototype methods and tools. In this paper, we present a method for assessing the emotional processes of subjects faced with multiple solicitations during the performance of a monitoring task. Through a usage scenario, this paper also presents the evaluation protocol, and the methods chosen for their relevance to the situation. The protocol used is based on an attentional test based on the MultiAttribute Task ( mat), where subjects are being diverted from their main task by agents/stressors/distracters. With the exception of heart rate, the parameters used to characterize the subject’s behavior, both in terms of performance and in terms of emotional reactions, are sensitive to the effect of task complexity. This was also the case for subjective assessments (difficulty of the task, self-assessment of performance, emotions, etc.). Using multivariate analysis (Principal Component Analysis) it has been possible through the joint analysis of performance and verbalizations to identify individual strategies depending on the type of distractor that the subject should manage. The emotional response is evaluated from different angles with a gradient of difficulty. It can be interpreted according to the usage scenario, and it can be related to the level of performance.The platform and the associated method described in this paper highlight the importance of timing of a maximum means in real time, while making choices to limit the intrusiveness of the tools used, and to select appropriate methods for performing statistical analysis.