Parte 6: Strumento di monitoraggio e valutazione per le attività con i giovani
Strumento di monitoraggio e valutazione delle attività con i giovani
Introduzione
Il monitoraggio e la valutazione in itinere, così come la valutazione sommativa dei corsi di formazione, dei workshop e degli interventi per i giovani, sono indispensabili per diversi motivi. Abbiamo bisogno di monitoraggio e valutazione per poter adattare il processo ai partecipanti e alle loro esigenze, in modo da raggiungere i risultati desiderati. Abbiamo bisogno di una valutazione finale per misurare i risultati dell’iniziativa rispetto ai suoi obiettivi. Questo capitolo si concentra sulla comprensione del monitoraggio e della valutazione e sullo sviluppo delle competenze per applicarli. Inoltre, prepara gli operatori giovanili ad applicare il monitoraggio, la valutazione e l’analisi in modo specifico ai laboratori FABLE.
In dettaglio, ci concentriamo sui seguenti argomenti:
- Cosa sono il monitoraggio, la valutazione e l’assessment e perché sono importanti?
- La valutazione
- Monitoraggio e valutazione continui
- Metodi di monitoraggio, valutazione e verifica e loro utilizzo.
- Strumenti di valutazione FABLE
Al termine del modulo ci aspettiamo che gli operatori giovanili siano in grado di implementare la valutazione continua e la valutazione sommativa nelle loro formazioni e interventi. Inoltre, saranno preparati per la valutazione dei workshop FABLE G-Local Hub.
Cosa sono il monitoraggio, la valutazione e l'assessment e perché sono importanti?
Il monitoraggio e la valutazione costanti delle formazioni e degli interventi con i giovani sono un prerequisito per la loro efficacia. La valutazione continua, detta anche valutazione formativa, aumenta le possibilità di raggiungere gli obiettivi degli interventi con i giovani, come le formazioni, i laboratori e altro. Si tratta di raccogliere continuamente informazioni, che vengono poi utilizzate per adattare il processo di istruzione e di lavoro al fine di raggiungere gli obiettivi prefissati. La valutazione, invece, viene effettuata in un determinato momento per scoprire se gli obiettivi fissati all’inizio per la rispettiva unità o per l’intero intervento sono stati raggiunti.
Per capire meglio cosa sono la valutazione e l’assessment, vedere il video: Evaluation and Assessment, di Rebecca Burton (sottotitoli automatici disponibili in tutte le lingue).
La valutazione
Un ottimo modello di valutazione è il Modello di Kirkpatrick, che è stato uno standard per la valutazione della formazione negli ultimi cinquant’anni. È completamente applicabile anche agli interventi di animazione giovanile.
Il modello suggerisce che i risultati della formazione dovrebbero essere valutati a 4 livelli. Questi 4 livelli, applicati al lavoro con i giovani, sono:
Reazioni – impatto sul giovane. La misura in cui i giovani trovano la formazione o l’intervento utile, coinvolgente e rilevante per la loro situazione e i loro bisogni. Le reazioni sono solitamente valutate utilizzando questionari o interviste, condotte al termine della formazione o dell’intervento. Misurano la percezione soggettiva del giovane sul processo e sui risultati della formazione, ma non l’impatto sul comportamento o sulle prestazioni. Queste indagini possono raccogliere dati ricchi e qualitativi, ma possono anche orientare il programma verso ciò che è piacevole piuttosto che verso ciò che è più efficace.
Apprendimento – impatto sulle competenze che ci si aspetta di sviluppare. Le nuove conoscenze, abilità e attitudini desiderate sono state acquisite come risultato della partecipazione alla formazione o all’intervento? Il processo di apprendimento riguarda l’acquisizione di nuove competenze: conoscenze e abilità, attitudini, motivazione. La valutazione al livello 2 viene solitamente effettuata tramite confronto: prima/dopo e misurazione dei cambiamenti nelle competenze che possono essere direttamente attribuiti alla formazione, al workshop o ad altri interventi. Le valutazioni formali e gli esami sono esempi di valutazione al livello 2.
Comportamento – impatto sul comportamento dei giovani, ad esempio, per il programma FABLE, stanno applicando una maggiore creatività e migliori strategie di problem solving, si comportano in modo più sicuro e proattivo? Il comportamento si riferisce all’applicazione efficace delle nuove competenze acquisite. La valutazione di livello 3 può essere effettuata utilizzando una valutazione formale o attraverso approcci meno formali come l’osservazione.
Risultati – impatto sulla qualità della vita dei giovani. La misura in cui i risultati mirati sono stati raggiunti come risultato dell’intervento. I giovani riescono a trovare lavoro o ad avviare iniziative che migliorano il loro benessere? Si sentono più connessi, inclusi e significativi? Questo livello è il più difficile da misurare, poiché richiede una relazione a lungo termine con le persone che hanno partecipato all’iniziativa, ma d’altra parte, se è possibile attuarlo, è la misura definitiva dell’utilità e dell’efficacia dell’attività.
Per essere in grado di monitorare, valutare e valutare qualsiasi tipo di formazione o intervento, dobbiamo innanzitutto definirne gli obiettivi. Questi obiettivi sono definiti principalmente al Livello 2: Apprendimento e al Livello 3: Comportamento, ma possono anche includere obiettivi più a lungo termine al Livello 4: Risultati. Sulla base degli obiettivi, il formatore o l’animatore stabilisce una serie di indicatori che saranno utilizzati per valutare la qualità e l’efficacia della formazione/intervento.
Per comprendere meglio il Modello di Kirkpatrick, vedere il video The Kirkpatrick Model of Training Evaluation di Devlin Peck (sottotitoli automatici disponibili in tutte le lingue).
Monitoraggio e valutazione continui
Per garantire il raggiungimento degli obiettivi fissati per una formazione o un intervento con i giovani, attuiamo un monitoraggio e una valutazione continui durante il corso della formazione/intervento. Questa è anche chiamata valutazione formativa.
La valutazione continua mostra i progressi del giovane durante la formazione o l’intervento. Questo approccio richiede che l’operatore giovanile valuti l’impegno, la motivazione, il livello di comprensione e la partecipazione del partecipante nel corso delle attività. La valutazione continua è estremamente importante per gli interventi con i giovani, perché permette all’animatore di identificare come adattare il corso dell’intervento o della formazione al particolare gruppo di persone con cui sta lavorando per raggiungere gli obiettivi. Ad esempio, poniamo al gruppo una domanda per vedere se hanno capito di cosa stiamo parlando o il compito che devono svolgere. Se non capiscono, torniamo indietro e spieghiamo in un altro modo.
Un principio chiave dell’utilizzo della valutazione continua è quello di comunicare chiaramente gli obiettivi di apprendimento/intervento ai partecipanti. Questa comunicazione non solo stabilisce le aspettative per i partecipanti, ma permette loro di auto-monitorare i propri progressi di apprendimento. Un altro approccio all’uso della valutazione continua è quello di richiedere ai partecipanti di registrare le conclusioni (relazioni) sui loro compiti ed esercizi in un libro di lavoro o in un file elettronico. Questo approccio di autovalutazione permette al partecipante di concentrarsi su ciò che ha imparato.
su ciò che hanno imparato.
La valutazione continua richiede che il formatore o l’operatore giovanile fornisca un feedback chiaro ai partecipanti, per chiarire e correggere gli errori, per discutere le osservazioni e le conclusioni degli interventi partecipativi. Questo è un contributo importante all’acquisizione delle competenze e al cambiamento dei comportamenti.
Metodi di monitoraggio, valutazione e verifica e loro utilizzo
Si tratta di metodi più formali e individuali, che consentono al formatore/operatore giovanile di raccogliere alcune informazioni specifiche senza alcuna influenza sociale sul gruppo. Tuttavia, richiedono di sapere di che tipo di informazioni abbiamo bisogno e quali domande porteranno i giovani a fornircele.
Individuali o di gruppo, sono probabilmente il modo migliore per osservare l’evoluzione dei giovani durante la formazione o l’intervento.
Esse
- permettono ai giovani di esplorare e sperimentare le loro nuove conoscenze e competenze;
- danno alcuni aspetti concreti alla teoria appresa;
- mostrano ai giovani e agli operatori giovanili le competenze pratiche acquisite (o meno).
Molto simili al metodo precedente, le simulazioni mettono i giovani in una situazione che potrebbe realmente accadere nella loro vita, ad esempio quando cercano un lavoro o iniziano un nuovo lavoro/iniziativa. Permettono all’animatore di vedere quanto i partecipanti siano preparati per una o un’altra situazione particolare e di osservare il loro comportamento.
Informali e individuali, sono probabilmente il modo migliore per raccogliere tutte le informazioni necessarie perché offrono la possibilità di porre domande individuali. Tuttavia, sono più difficili da usare senza influenzare le risposte. Inoltre, richiedono un buon livello di fiducia tra le persone coinvolte per garantire l’onestà delle risposte.
I partecipanti sono probabilmente la migliore fonte di informazioni sull’andamento di una formazione o di un intervento. I feedback e i commenti possono essere raccolti intenzionalmente dall’animatore, in occasione di tappe importanti della formazione o dell’intervento, per sollecitare informazioni sui progressi e sulla comprensione. È anche importante suscitare commenti e feedback spontanei durante l’intera durata dell’intervento o della formazione.
Molte informazioni provengono dalla semplice osservazione dei giovani durante il laboratorio. L’animatore può preparare una lista/tabella di controllo che lo aiuti a qualificare il comportamento e le competenze dei partecipanti. L’osservazione dei giovani e dei risultati del loro lavoro può fornire informazioni su tutti e 4 i livelli del Modello di Kirkpatrick.
Leva 1: reazione. Ad esempio, se l’animatore osserva una reazione negativa al suo stile di facilitazione, può modificarlo. In generale, la motivazione e l’impegno sono buoni segnali di una relazione tra operatore giovanile e giovane che porterà a un cambiamento positivo.
Livello 2: apprendimento e livello 3: comportamento. L’animatore può preparare una scala, basata sugli obiettivi della formazione/intervento, che lo aiuti a valutare e analizzare il comportamento e le competenze del partecipante.
Livello 4: risultati. La valutazione al livello 4 richiede un impegno a lungo termine da parte dell’animatore o del giovane, idealmente da parte di entrambi. La parte più importante è quello di stabilire indicatori misurabili rispetto ai quali monitorare e valutare i risultati.
Esiste un gran numero di metodi che possono essere utilizzati per implementare la valutazione continua nelle attività faccia a faccia e online. Ecco alcuni video in cui potete trovare ispirazione.
FABLE strumenti di valutazione
Nell’ambito del progetto FABLE stiamo implementando la valutazione sommativa (valutazione alla fine del lavoro con i giovani) attraverso questionari per tutte le iniziative intraprese con i giovani. Qui forniamo gli obiettivi di queste iniziative (attività del G-Local Hub), gli indicatori per la valutazione e un questionario (Allegato 1) da utilizzare alla fine di ogni sessione con i giovani.
Per il monitoraggio e la valutazione formativa (in itinere) gli operatori giovanili sono liberi di applicare quanto appreso in questo capitolo e la loro creatività, scegliendo il metodo più appropriato in base alla situazione.
G-Local Hub Workshop
- promuovere l'acquisizione di competenze imprenditoriali giovanili attraverso la moda sostenibile;
- acquisizione di competenze trasversali come il pensiero critico e la creatività;
- promuovere il senso di appartenenza a una comunità;
- motivazione nell'acquisizione di competenze trasversali per il futuro;
- sensibilizzazione sul tema delle risorse dei rifiuti nella comunità locale e senso di iniziativa per creare insieme qualcosa che possa fare la differenza;
- stimolare un cambiamento di mentalità e di prospettiva verso la transizione verde e un approccio etico al mondo della moda;
- stimolare la curiosità dei giovani verso le tematiche sostenibili e proporre l'idea che le nuove carriere sulla transizione verde possano essere il futuro per tutti, soprattutto per i giovani;
- creare uno spazio sicuro e inclusivo per i giovani che vogliono costruire competenze e allo stesso tempo esplorare il loro potenziale futuro.
Indicatori su cui raccogliere feedback, alla fine dei workshop
- livello di soddisfazione dei giovani che hanno partecipato al workshop;
- hanno acquisito nuove competenze imprenditoriali;
- hanno acquisito nuove competenze trasversali come il pensiero critico e la creatività;
- misura in cui i partecipanti hanno sentito un senso di appartenenza e di comunità come risultato della loro partecipazione ai workshop di G-Local Hub;
- misura in cui i partecipanti si sono sentiti sicuri e inclusi, mentre cercavano di costruire nuove competenze durante i workshop;
- aumento della motivazione ad acquisire competenze trasversali in futuro;
- aumento della motivazione a orientarsi verso una transizione verde e un approccio etico al mondo della moda;
- acquisizione di curiosità verso temi sostenibili e carriere nella transizione verde;
- acquisizione di consapevolezza sul tema delle risorse di scarto nella comunità locale e senso di iniziativa per creare insieme qualcosa che possa fare la differenza.
ATTIVITà
Ora vi invitiamo a partecipare ad alcune attività che vi aiuteranno a comprendere e ad applicare il monitoraggio, la valutazione e l’assessment nelle vostre attività con i giovani.
Obiettivi
- Comprendere alcune ragioni aggiuntive per implementare la valutazione nel lavoro con i giovani e progettare un’attività di valutazione.
Preparazione
- Per questa attività sono necessari un computer e internet, l’accesso a YouTube.
Durata totale
45 min
Descrizione
- Guardate il video Processo di valutazione trasformativa di Youth Work: https://youtu.be/GJChoKMQCiw
- Ricercare ulteriori informazioni sul Processo di valutazione trasformativa
- Rispondete alle seguenti domande:
- Pensate che sia utile applicare il Processo di valutazione trasformativa a FABLE?
- Perché?
- Come lo applichereste se organizzaste un workshop FABLE?
- Progettate un’attività per selezionare le storie adatte e condividetela con noi.
Materiali
Computer, accesso a Internet, YouTube, programma di elaborazione testi, e-mail.
Obiettivi
- Comprendere meglio il modello di valutazione di Kirkpatrick e sviluppare le competenze per applicarlo.
Preparazione
- Per questa attività è necessario disporre di un computer e di un accesso a Internet.
Durata totale
1 hour
Descrizione
- Individuate 1 metodo di valutazione da applicare a un workshop FABLE per ogni livello del modello di Kirkpatrick.
- Descrivete brevemente i quattro metodi e il motivo della loro scelta.
- Condividete i metodi con noi.
Materiali
Computer, accesso a Internet, YouTube, programma di elaborazione testi, e-mail.
Obiettivi
- Comprendere meglio il monitoraggio e la valutazione in corso.
- Imparare ad applicare nuovi metodi di valutazione.
Preparazione
- Per questa attività è necessario disporre di un computer e di un accesso a Internet.
Durata totale
1 h
Descrizione
- Fate una ricerca sui diversi metodi di valutazione in corso.
- Trovatene almeno 5 che non avete mai provato prima e annotateli. Come vengono applicati? In quali circostanze è più opportuno applicarli?
- Sceglietene 2 che applichereste durante un workshop FABLE e condivideteli con noi.
- Perché avete scelto proprio questi due metodi?
Materiali
Computer, accesso a Internet, YouTube, programma di elaborazione testi, e-mail.
Materiale aggiuntivo
Kirkpatrick’s Four Levels of Training EvaluationJames D. Kirkpatrick and Wendy Kayser Kirkpatrick, Association for Talent Development; 1st edition (October 7, 2016)
Panadero, E., Andrade, H., & Brookhart, S. M. (2018). Fusing self-regulated learning and formative assessment: A roadmap of where we are, how we got here, and where we are going. The Australian Educational Researcher, 45(1), 13-31. doi:10.1007/s13384-018-0258-y
Formative Assessment, Making It Happen in the Classroom, Margaret Heritage, October 2021, Corwin
Formative Assessment for Teaching & Learning; Bill Boyle & Marie Charles, SAGE Publications Ltd, 2014 DOI: https://dx.doi.org/10.4135/9781526401861
Kirkpatrick’s Four Levels of Training EvaluationJames D. Kirkpatrick and Wendy Kayser Kirkpatrick, Association for Talent Development; 1st edition (October 7, 2016)
Parte 5: Integrazione delle metodologie
