Fase di valutazione
in Paesi Bassi
La valutazione del trial conteneva tre dimensioni: trial, soluzione e gestione della crisi. In base AI GAP e ai quesiti di ricerca identificati, sono stati definiti vari indicatori chiave di prestazione (KPI) e sono stati raccolti dati per la valutazione.
La dimensione della gestione della crisi è stata valutata per ciascuno dei quattro blocchi della fase di minaccia e impatto separatamente, mettendo a confronto la linea di riferimento e la Linea d'innovazione. Nessuna delle soluzioni selezionate ha colmato il gap 1 (sulla pianificazione delle risorse) come inizialmente previsto. Le soluzioni 3Di, SIM-CI e ATSA-ZKI, sebbene si siano dimostrate molto utili per affrontare la (possibile) inondazione, non sono riuscite a colmare il gap 2 (sulla condivisione di informazioni) come inizialmente previsto. La soluzione CrisisSuite si è tuttavia rivelata perfetta per il gap 2. Le esperienze nel trial hanno perfino portato a iniziative per collegare formalmente entrambe le soluzioni: il sistema tradizionale LCMS è attualmente utilizzato presso SRH e CrisisSuite. La soluzione HumLog si è rivelata idonea per l il gap 3, ma solo nella fase della minaccia. In tutti e quattro i blocchi, i professionisti erano più concentrati sullo svolgimento delle attività ad essi assegnate e hanno "dimenticato" di utilizzare le soluzioni. Il consiglio sarebbe quindi di utilizzare un approccio direttivo nella formulazione dei compiti e di specificare i risultati richiesti (come, quando e dove) ai partecipanti affinché siano "obbligati" a usare le soluzioni.
Nella prima parte della dimensione della soluzione sono stati impiegati degli indicatori generici derivati dallo standard internazionale ISO 924-11 (1), secondo cui l'usabilità è "composta di efficacia, efficienza e soddisfazione". La figura riporta i tassi medi delle funzionalità delle soluzioni valutate dai professionisti durante il trial 4. Le funzionalità incluse nel questionario compilato dai professionisti erano basate sullo standard ISO. Sono state inoltre create singole valutazioni di ciascuna soluzione prendendo in considerazione KPI specifici. Il grafico a destra mostra le valutazioni medie delle singole soluzioni in colori diversi. SIMCi ha ottenuto il punteggio migliore tra tutte le soluzioni in tutte le categorie, ricevendo, per esempio, il valore 1,5 (da -2: scarso a +2: ottimo).
Una parte del questionario sulla dimensione del trial era incentrata sulla percezione dell'organizzazione del trial stesso. Osservando la media di tutte le risposte, gli intervistati hanno dichiarato in modo concorde di essere soddisfatti dell'organizzazione. Il grafico a destra mostra il livello di soddisfazione dell'organizzazione del trial. La scala va da -2: pessima a +2: ottima. Per esempio, allo scenario è stato dato un punteggio medio di circa 0,6 e alla configurazione del trial un punteggio di oltre 1,0.
