Livello dell'indicatore
Formulazione dell'indicatore
Scopo dell'indicatore
Come raccogliere e analizzare i dati richiesti
Determinare il valore dell'indicatore utilizzando la seguente metodologia:
1) Definire un numero limitato delle conoscenze e/o competenze più importanti che i partecipanti dovrebbero mettere in pratica al termine del sostegno al progetto. Assicurarsi che le conoscenze e/o competenze selezionate siano pertinenti a ciò che i partecipanti possono realisticamente mettere in pratica nel proprio contesto.
2) Stabilire il periodo di riferimento durante il quale si prevede che i partecipanti abbiano utilizzato le conoscenze e/o le competenze selezionate. Assicurarsi che i partecipanti abbiano avuto un’effettiva necessità o opportunità di utilizzarle durante tale periodo.
3) Decidete in che modo valuterete se i partecipanti abbiano utilizzato le conoscenze e/o le competenze predefinite durante il periodo di riferimento stabilito al punto 2. Esaminate i seguenti approcci e selezionate l’opzione o le opzioni più adatte al vostro contesto:
Interviste strutturate:
Condurre interviste con un campione rappresentativo di partecipanti. Chiedere : «Può indicarmi quali delle seguenti conoscenze o competenze, se ce ne sono, ha utilizzato durante [specificare il periodo di riferimento] a seguito di [specificare l’attività specifica del progetto]?»
Le opzioni di risposta dovrebbero corrispondere a quelle definite nel punto 1 sopra riportato. Descrivete le opzioni come azioni o decisioni specifiche, piuttosto che limitandovi a indicarle come argomenti di formazione. Consentite agli intervistati di indicare che non ne hanno utilizzata nessuna o che non se ne ricordano. Includete anche un’opzione “Altro – specificare: ……...”. Le risposte registrate nella voce “Altro” non dovrebbero essere conteggiate nel calcolo dell’indicatore, ma possono fornire utili informazioni aggiuntive.
Domanda: “Hai utilizzato altre conoscenze o competenze trattate nell’ambito di [specificare l’attività] durante questo periodo?”
Infine, verifica se i partecipanti sono in grado di fornire un esempio concreto dell’uso che dichiarano di aver fatto, chiedendo: «Potresti spiegarmi come e quando hai utilizzato [ specificare la conoscenza/abilità dichiarata]?»
Osservazione diretta: ove possibile, verificare se i partecipanti utilizzano correttamente le competenze oggetto di valutazione, avvalendosi, se del caso, di criteri prestabiliti. In alcuni contesti, è possibile esaminare la documentazione scritta che attesti l’utilizzo delle conoscenze e delle competenze fornite.
Altre testimonianze: In alcuni contesti, potrebbe essere possibile intervistare supervisori, colleghi o membri della comunità per chiedere se abbiano osservato il partecipante mettere in pratica le conoscenze o le competenze in questione.
4) Definire in anticipo uno standard minimo per stabilire quando si riterrà che un partecipante abbia messo in pratica le conoscenze e/o le competenze acquisite. A seconda dell’intervento, lo standard può specificare:
il numero minimo di conoscenze o competenze fondamentali che devono essere state messe in pratica;
la frequenza minima di utilizzo, ad esempio “almeno due volte nell’ultimo mese”; e/o
prova che una competenza sia stata applicata correttamente.
Assicurati che ogni obiettivo che stabilisci sia facilmente misurabile e realistico. Valuta la possibilità di coinvolgere un formatore o qualcun altro che comprenda bene cosa ci si aspettava che i partecipanti imparassero. Effettua un test preliminare e, se necessario, apporta le modifiche del caso.
5) Raccogliere i dati richiesti in un momento opportuno dopo lo svolgimento dell'attività del progetto, utilizzando il periodo di riferimento definito nella fase 2.
6) Per determinare il valore dell'indicatore:
calcolare il numero di partecipanti valutati che soddisfano lo standard minimo di utilizzo definito nella fase 4;
dividere tale valore per il numero totale dei partecipanti valutati per i quali è stato possibile stabilire se lo standard fosse stato soddisfatto; e
moltiplica il risultato per 100 per convertirlo in percentuale.
Registrare separatamente il numero di partecipanti per i quali non è stato possibile stabilire se le conoscenze o le competenze siano state utilizzate.
Disaggregare per
Questi dati possono essere disaggregati per genere e fascia d'età e, se pertinente e fattibile, anche per tipo di sostegno ricevuto, condizione di disabilità e altri criteri rilevanti.
Note importanti
1) Ove possibile, valutare le conoscenze e le competenze pertinenti prima e dopo l’attività del progetto. I dati di riferimento possono inoltre aiutare a definire le attività del progetto volte a rafforzare le conoscenze e le competenze.
2) Stabilire se l’indicatore misurerà l’utilizzo delle conoscenze/competenze derivanti da una singola attività del progetto (ad esempio, un corso di formazione) o l’effetto cumulativo di più attività del progetto. Applicare questa definizione in modo coerente sia nella selezione delle conoscenze/competenze da valutare sia nel chiedere ai partecipanti informazioni sul loro utilizzo.
3)Assicurarsi che i partecipanti abbiano avuto un’effettiva necessità o opportunità di mettere in pratica le conoscenze/competenze acquisite durante il periodo di riferimento. Se non hanno avuto tale opportunità, un valore basso dell’indicatore potrebbe non riflettere la loro disponibilità o capacità di applicare quanto appreso.
4) Assicurarsi che la raccolta dei dati valuti l’uso effettivo delle conoscenze/competenze, e non solo l’intenzione di utilizzarle. Chiedere ai partecipanti di fornire esempi concreti di come e quando le hanno utilizzate. Ove possibile, incrociare le informazioni fornite dai partecipanti con osservazioni, documenti o informazioni provenienti da altre persone, al fine di ridurre il bias di desiderabilità sociale.
5) Se possibile, ripetere la valutazione nel corso del tempo, ad esempio una volta poco dopo l’attività e poi di nuovo alcuni mesi dopo. Ciò può mostrare se l’utilizzo delle conoscenze e delle competenze è duraturo e non si limita solo al periodo immediatamente successivo all’attività.
6) Chiedete inoltre in che modo e per quali motivi i partecipanti abbiano utilizzato o meno le conoscenze e le competenze acquisite. Ciò può aiutare a individuare gli ostacoli e i fattori che favoriscono l’applicazione di tali conoscenze e competenze e a valutare se il sostegno offerto dal progetto fosse adeguato alle esigenze dei partecipanti.
Indicatori settoriali rilevanti
Si consiglia inoltre di utilizzare i seguenti indicatori:
Miglioramento delle conoscenze/competenze (valuta se l’apprendimento previsto si è verificato prima di verificare se viene applicato)
Prevalenza degli ostacoli al cambiamento (aiuta a spiegare perché i partecipanti, pur sapendo cosa fare, potrebbero non metterlo in pratica)