MÉTHODE :
3 DIMENSIONS ET KPI

Les trials DRIVER+ visent à évaluer des solutions sociotechniques innovantes dans un environnement aussi réaliste que possible, afin de combler un besoin capacitaire dans la gestion de crise. Cela conduit au fait qu’il existe trois dimensions différentes qu’il faut prendre en compte : La dimension gestion de crise, la dimension trial et la dimension solution.  

La plus importante est la dimension gestion de crise, car c’est là que nous recherchons de nouvelles solutions qui ont un impact sur nos besoins capacitaires. Ici, la base de référence (et la ligne d’innovation) peuvent être les plus utiles, car elles décrivent le processus de gestion de crise avec tous ses rôles, tâches, processus, etc.

La dimension suivante est la dimension trial, qui se rapporte à l’organisation du trial. Tout ce qui concerne le déroulement du trial d’un point de vue très « pratique » fait partie de cette dimension. Il peut s’agir de la connexion wifi, du nombre de participants, de tout problème technique ...  

La dernière est la dimension solution. Celle-ci aborde toutes les fonctionnalités, ainsi que l’utilisabilité etc. de chaque innovation sociotechnique. Chaque dimension peut être analysée seule et également en relation avec les autres. Comme le but consiste à évaluer une solution par rapport à un besoin capacitaire de gestion de crise, il est très important de voir comment cela a été influencé (peut-être même négativement) par la dimension trial ou solution. Par exemple : Il se pourrait qu’une solution soit tout à fait capable de combler le besoin capacitaire de gestion de crise, cependant, au cours du trial, une panne du système peut survenir en raison d’un problème technique sur le site du trial (dimension trial). Dans ce cas, les participants ne peuvent pas constater tout le potentiel de la solution. Il est très important de prendre cela en compte lors de l’analyse et de l’évaluation et de se demander dans quelle mesure ces perturbations ont influencé la configuration générale et la collecte des données.

Le principal défi ici est de configurer votre trial d’une manière qui vous permette de mesurer effectivement chaque dimension afin de pouvoir identifier les moments où elles s’influencent mutuellement. Cela permet d’interpréter chaque donnée dans son contexte légitime. Au sein de DRIVER+, la norme ISO 9241-11 a été identifiée comme très utile pour l’évaluation de la dimension solution. Cette norme comprend des aspects tels que l’utilisabilité, le caractère innovant, etc. Jusqu’à présent, ce type de données a été collecté par le biais de questionnaires spécifiques remplis par l’utilisateur final des solutions dans le cadre du trial. Ici, l’échelle de Likert a été utilisée et les participants ont pu ajouter leur opinion personnelle sous forme de texte libre.  

L’utilisation de questionnaires a également été choisie pour la dimension trial. Encore une fois, l’échelle de likert et le texte libre ont été appliqués. Les personnes qui ont répondu à ce questionnaire n’étaient pas seulement les utilisateurs finaux des solutions, mais toutes les personnes ayant participé au trial (personnel, observateurs, etc.). De plus, l’équipe de coopération externe a envoyé un questionnaire aux participants externes et aux prestataires de solutions pour recueillir des données spécifiques sur l’organisation du trial (qui fait également partie de la dimension trial).  

La configuration de la dimension gestion de crise est plus exigeante. En effet, une approche méthodologique mixte est recommandée : jusqu’à présent, la collecte de données par l’intermédiaire de la test-bed technical infrastructure, ainsi que de la solution (données enregistrées) et des fiches d’observateurs (observer support tool) s’est faite dans DRIVER+. N’oubliez pas que vous devez collecter des données à partir des outils déjà existants, mais aussi à partir des nouveaux outils - car votre but est de faire une étude comparative (cela n’est nécessaire que si vous ne disposez pas déjà de données valables provenant d’incidents ou de simulations passés). Sachez également qu’un observateur humain ne peut voir et noter qu’une certaine quantité d’informations dans un certain laps de temps. Il n’est pas recommandé de lui faire enregistrer des horodatages. Les observateurs doivent être sélectionnés en fonction de leurs connaissances spécifiques, puis utilisés pour observer des aspects spécifiques à la gestion de crise.