Una singola misurazione ti dice dove ti trovi. Due misurazioni, separate da un intervallo di tempo significativo e da un intervento mirato, ti dicono se qualcosa è effettivamente cambiato, in che misura e perché. Questa distinzione non è semantica. È la differenza tra evidenza e supposizione, tra dimostrazione e convinzione. È il fondamento scientifico del modello a due fasi del PDA.
Questa affermazione sembra ovvia. Eppure la stragrande maggioranza dei programmi di formazione e sviluppo, dei percorsi di coaching e degli interventi organizzativi vengono progettati, realizzati e valutati senza un punto di partenza. Si organizza un workshop. I partecipanti compilano un questionario di soddisfazione. Il facilitatore riceve un feedback positivo. L'organizzazione conclude che il programma ha avuto successo. Nulla di tutto ciò costituisce una misurazione del cambiamento, perché senza un punto di partenza, non esiste un parametro di riferimento con cui confrontare la situazione post-intervento.
Il problema non è che le organizzazioni non si preoccupino dei risultati. La maggior parte sì. Il problema è che stabilire una base di riferimento valida richiede investimenti: in termini di tempo, metodologia e disciplina per misurare prima dell'intervento, anziché solo dopo. Storicamente, gli strumenti necessari per farlo rigorosamente erano costosi, lenti e specialistici. Il risultato: il settore della formazione e dello sviluppo ha creato un'intera cultura di valutazione dei programmi che misura la soddisfazione (facile) piuttosto che il cambiamento comportamentale (difficile).
Nel 1963, Donald Campbell e Julian Stanley pubblicarono "Experimental and Quasi-Experimental Designs for Research" , un articolo che divenne il testo fondamentale della metodologia di valutazione. Campbell e Stanley stabilirono una gerarchia dei disegni di ricerca basata sulla loro capacità di produrre inferenze causali valide: di determinare non solo se qualcosa è cambiato, ma anche se l'intervento ne ha causato il cambiamento.
Al vertice della loro gerarchia si trovava il vero disegno sperimentale: assegnazione casuale, gruppo di controllo, misurazione preliminare, misurazione successiva. Al di sotto di questo si collocava una serie di disegni quasi-sperimentali per contesti reali in cui una vera randomizzazione è impossibile. In fondo alla scala – ed esplicitamente identificato come incapace di supportare inferenze causali – si trovava il disegno post-test: misurare i risultati dopo un intervento senza una misurazione preliminare di base.
Il modello di valutazione basato esclusivamente su test post-intervento è, strutturalmente, quello che caratterizza la maggior parte delle valutazioni di apprendimento e sviluppo odierne. I partecipanti vengono valutati al termine del programma. I punteggi vengono interpretati come prova dell'impatto del programma. Campbell e Stanley hanno dimostrato, più di 60 anni fa, perché questa inferenza non sia valida: senza un punto di riferimento iniziale, il punteggio post-programma potrebbe riflettere capacità preesistenti, maturazione naturale, eventi passati o una serie di fattori non correlati al programma stesso.
"Il problema fondamentale della valutazione dei programmi non è la misurazione, bensì l'assenza di un punto di riferimento controfattuale. Senza sapere da dove partivano i partecipanti, non possiamo sapere dove li ha portati il programma."Campbell, DT e Stanley, JC (1963), Disegni sperimentali e quasi-sperimentali per la ricerca
Il modello di valutazione a quattro livelli di Donald Kirkpatrick, pubblicato per la prima volta nel 1959, rimane il quadro di riferimento più utilizzato al mondo per la valutazione della formazione e dello sviluppo. I quattro livelli misurano la reazione (soddisfazione dei partecipanti), l'apprendimento (acquisizione di conoscenze), il comportamento (trasferimento sul luogo di lavoro) e i risultati (impatto organizzativo).
I livelli 1 e 2 possono essere misurati in un singolo momento, immediatamente dopo un programma. I livelli 3 e 4, per definizione, non possono. Il cambiamento comportamentale richiede tempo per manifestarsi e necessita di un punto di riferimento. I risultati richiedono un parametro di confronto rispetto al quale misurare il miglioramento. La successiva metodologia ROI di Jack Phillips, che aggiunge un quinto livello (ritorno sull'investimento), richiede la stessa architettura pre-post dei livelli 3 e 4 di Kirkpatrick.
Il modello a due fasi del PDA rappresenta l'implementazione strutturale di questa solida base di evidenze, consolidata in 60 anni. La Fase 1 (IMPACT) stabilisce il punto di partenza, ovvero il valore quantificato di tutte le dimensioni diagnostiche. La Fase 2 (DELTA) misura le stesse dimensioni dopo interventi mirati e calcola la differenza statistica. Il risultato è quello richiesto dai livelli 3 e 4 del modello Kirkpatrick: una misurazione del cambiamento valida, temporalmente separata e comparabile.
Esiste una seconda ragione, meno nota, per cui le misurazioni a punto singolo possono essere fuorvianti: la regressione verso la media. Identificata per la prima volta da Francis Galton nel 1886 e formalizzata nella teoria statistica, la regressione verso la media descrive la tendenza delle misurazioni estreme a convergere verso la media nelle misurazioni successive, indipendentemente da qualsiasi intervento.
In termini pratici: se una squadra si trova in un periodo di forte stress al momento della misurazione, i suoi punteggi sugli indicatori di stress saranno elevati. Se la misurazione viene ripetuta sei mesi dopo, con o senza alcun intervento, i punteggi saranno in genere inferiori, semplicemente perché gli stati di stress acuto non si protraggono indefinitamente. Un allenatore che interviene dopo una misurazione di alto livello di stress e riporta un miglioramento sei mesi dopo potrebbe osservare una naturale regressione verso la media piuttosto che l'effetto del proprio intervento.
L'unico modo per distinguere i reali effetti di un intervento dalla naturale regressione verso la media è confrontare il tasso di cambiamento con una norma validata, oppure utilizzare un disegno sperimentale intra-soggetto che monitori l'andamento del cambiamento in più momenti. La metodologia a due fasi di PDA affronta questo problema stabilendo una linea di base aggiustata per la popolazione nella Fase 1 e misurando la variazione DELTA rispetto a tale riferimento aggiustato nella Fase 2, separando così il segnale di un miglioramento reale dal rumore delle fluttuazioni naturali.
L'intervallo di 4-6 mesi tra la Fase 1 e la Fase 2 non è casuale. Riflette la convergenza di diverse linee di ricerca indipendenti sulle tempistiche necessarie per un cambiamento comportamentale e organizzativo significativo.
Il periodo di 4-6 mesi ottimizza la maturazione dell'intervento, riducendo al minimo i fattori confondenti. È sufficientemente lungo perché si manifestino cambiamenti reali e sufficientemente breve da mantenere l'attribuzione causale al programma.
Le conseguenze dell'assenza di una misurazione nella Fase 2 non sono teoriche. Sono vissute quotidianamente da coach e professionisti delle risorse umane che offrono programmi eccellenti ma non possono giustificarne il valore al momento del rinnovo. Senza i dati della Fase 2, le seguenti domande rimangono senza risposta basata su dati concreti:
Non si tratta di domande supplementari. Sono le domande che si pongono i direttori finanziari, i consigli di amministrazione e gli uffici acquisti quando un programma è in scadenza. Senza i dati della Fase 2, la risposta a tutte queste domande è: "Riteniamo che il programma sia stato efficace". Con i dati della Fase 2, la risposta è: "Gli indicatori di stress sono diminuiti del 41%. Il coinvolgimento è aumentato del 28%. I punteggi relativi alla percezione della leadership sono migliorati di 0,8 deviazioni standard. Ecco le prove pronte per essere presentate al consiglio di amministrazione"
Per le organizzazioni e per i coach e consulenti che le assistono, la metodologia in due fasi si traduce in un vantaggio competitivo. Le organizzazioni in grado di misurare il ROI dei propri investimenti nelle risorse umane prendono decisioni migliori su dove investire in futuro. I coach e i consulenti che dimostrano un impatto misurabile ottengono rinnovi, referenze e la possibilità di richiedere compensi più elevati.
L'ironia sta nel fatto che la maggior parte degli ostacoli alla misurazione non sono di natura tecnica, bensì strutturale. Gli strumenti necessari per stabilire un rigoroso quadro di misurazione pre-post a livello di team sono stati storicamente costosi, complessi e specialistici. PDA Platform elimina questi ostacoli, rendendo la misurazione bifasica, pronta per essere presentata al consiglio di amministrazione, accessibile a qualsiasi team, di qualsiasi dimensione, e gestita da qualsiasi coach qualificato o professionista delle risorse umane.
Le basi scientifiche per comprendere l'importanza di questo fenomeno sono note da 60 anni. L'unica cosa che mancava erano i mezzi per metterle in pratica.