PHASE d’évaluation
in France
Cet exemple illustre un extrait des résultats obtenus lors du trial en France. Conformément aux exemples de ce trial présentés précédemment, seuls quelques aperçus du besoin capacitaire présenté auparavant, etc. seront fournis.
Les principaux résultats liés à la dimension trial ont confirmé que le nombre, les antécédents et l’engagement des participants étaient favorables au trial. Le scénario et l’environnement simulé ont été jugés suffisamment réalistes pour l’immersion des praticiens. Cependant, il est apparu clairement que, dans le domaine de l’apprentissage et de la formation, il existe encore une marge d’amélioration. Ce résultat de la dimension trial a été pris en compte en analysant les autres dimensions.
Les principaux résultats concernant la dimension Solutions ont été que la solution innovante proposait les fonctions attendues et était généralement considérée comme simple à utiliser. Cependant, le retour d’information formulé par les praticiens a montré que l’avantage perçu variait considérablement selon les différents types de crise et les conditions de déploiement. Ici, la norme ISO 9241-11 sur l’utilisabilité a été employée.
Les principaux résultats de la dimension gestion de crise ont été que les solutions testées ont contribué à faire gagner du temps sur des processus spécifiques (en particulier à l’étape de l’alerte), à améliorer la précision de certaines des informations échangées (en particulier les emplacements) et, par conséquent, à réduire les demandes d’informations générées à la suite de malentendus, qui à leur tour ont contribué à faire gagner du temps.
La solution évaluée ci-dessus était facile à utiliser et s’est révélée très appropriée pour les salles de contrôle (organisations stratégiques ou non premiers intervenants). La solution a été évaluée par neuf praticiens participant au trial. Bien que l’utilisabilité ait été jugée élevée par les praticiens, tous n’ont pas signalé d’avantages majeurs. Les diagrammes radar basés sur les moyennes des questionnaires des participants montrent des valeurs moyennes pour la plupart des dimensions, mais les notes réelles variaient considérablement entre les différents rôles au sein du trial. Par ex. le fait de doubler les messages radio par des entrées de journal de bord a diminué l’avantage pour des rôles plus opérationnels, tandis que d’autres rôles ont bénéficié d’une utilisation intensive des capacités de journalisation et de rapports de situation automatisés pour remplacer des dizaines d’e-mails. Cela doit bien sûr être replacé dans le contexte de la doctrine française, habituée à la radio. Placer l’évaluation dans le contexte socio-culturel des organisations participantes est essentiel pour tirer des conclusions valables.