Il ruolo del referente della valutazione

Transcript

1 Il ruolo del referente della valutazione prof. Ivan Graziani I.C. Santa Sofia (FC) Bolzano 29 ottobre 2015

2 Che ruolo ha il referente di valutazione? Un referente per la valutazione deve occuparsi nel proprio Istituto di due tipi di valutazione: Quella interna della quale si occupano, però, anche i vari Dipartimenti e pure i singoli docenti, cercando di assicurare tra l altro la massima equità tra le varie classi dell Istituto Quella esterna legata agli esiti delle Prove del Sistema Nazionale di Valutazione (SNV) di INVALSI, che, in ottemperanza alla Legge n. 53 del 28 marzo 2003, effettua verifiche periodiche e sistematiche sulle conoscenze e abilità degli studenti.

3 Che ruolo ha il referente di valutazione? Per quanto riguarda la valutazione interna, l aspetto principale è quello di assicurare a tutti i ragazzi una giusta equità di trattamento e di esiti. Per fare questo focalizzerei l attenzione principalmente su due strategie: Adottare griglie di valutazioni comuni tra le varie classi e per discipline sia per le prove scritte sia per quelle orali, in modo da uniformare la corrispondenza tra performance e voto. Effettuare prove standardizzate interne comuni per classi parallele iniziali, intermedie e finali, concordate tra i vari docenti sia come tipologia che come contenuti.

4 E bene in ogni caso ricordare che

5 Che ruolo ha il referente di valutazione? Deve quindi trasmettere il valore di una valutazione non solo limitata alle conoscenze acquisite, ma soprattutto alle competenze che ne derivano (consentendo di affrontare lo stesso concetto in situazioni differenti) e ai processi ad esse sottesi. Deve far conoscere ai colleghi i quadri di riferimento di Invalsi sia per matematica che per italiano, che contengono tra l altro i criteri con cui le prove sono state costruite. Deve far capire ai colleghi che non serve far esercitare gli alunni sulle prove degli anni precedenti, ma che serve piuttosto allenare i ragazzi nel leggere bene e comprendere i testi.

6

7 Per un quadro generale dell Istituto

8 Cosa analizzare principalmente: Punteggi generali Tavola 1A (Italiano) o Tavola 1B (Matematica) Grafici (correlati ai dati delle tavole: Risultato complessivo Incidenza della variabilità.

9 L indice di background socio economico culturale (ESCS) Le caratteristiche socio-culturali ed economiche degli studenti giocano un ruolo molto importante sui livelli di apprendimento conseguiti fin dai primi anni di scuola. E basato su 3 indicatori, dei quali ne è una sintesi : Status occupazionale dei genitori Livello di istruzione dei genitori Possesso di alcuni specifici beni materiali intesi come variabili di prossimità di un contesto economico e culturale favorevole all apprendimento

10 Punteggi generali, Italiano

11 Il cheating Il cheating ( imbrogliare) si riferisce a quei comportamenti impropri tenuti nel corso della somministrazione delle prove INVALSI tali per cui gli studenti forniscono risposte corrette, non in virtù delle loro conoscenze, ma perché copiate da altri studenti o da libri e altre fonti (student cheating) o, persino, suggerite più o meno esplicitamente dai docenti (teacher cheating). Punteggio corretto dal cheating Tramite una procedura statistica i punteggi di ogni studente vengono corretti in base alla probabilità che la classe, nella quale si trova lo studente, ha di aver attuato comportamenti opportunistici in fase di rilevazione.

12 Punteggi generali, Matematica

13 Punteggi generali: confronto tra classi Matematica Italiano Classi/Istituto Punteggio Differenza con 200 classi/scuole simili Tavola che si può Differenza costruire con 200 a partire Punteggio classi/scuole simili dai dati excel scaricabili e che permette un confronto tra classi: fornisce i risultati relativi in Italiano e Matematica, tra classi ,9-0,5 68,4 +5, ,5 +8,8 69,3 +6, ,8 +4,0 75,6 +12, ,0 +7,6 67,2 +4, ,1 +17,9 72,6 +9, ,3 +10,9 68,4 +5, ,4-1,1 63,5 +0, ,8-4,9 61,3-2, ,1-8,6 62,5-0,7 RMEE ,1 +3,8 67,3 +4,0

14 Punteggi generali, Italiano Grafico 1a Confronto con la media regionale, dell Area geografica e dell Italia Confronto tra le diverse classi Confronto con le 200 classi simili

15 Punteggi generali, Matematica Grafico 1b Confronto con la media regionale, dell Area geografica e dell Italia Confronto tra le diverse classi Confronto con le 200 classi simili

16 Incidenza della variabilità Il grafico che vedremo a breve mostra quanta parte della variabilità all interno della scuola è dovuta a differenze tra le classi, sia in termini di punteggio ottenuto alla prova sia rispetto all indice di background familiare ESCS.

17 Incidenza della variabilità, Italiano Grafico 2a Nella scuola presa ad esempio: 1. Le classi hanno caratteristiche degli studenti simili (in linea con la media nazionale) 2. Le classi hanno punteggi INVALSI più segmentati tra classi rispetto alla media nazionale

18 Incidenza della variabilità, Matematica Grafico 2b Nella scuola presa ad esempio: 1. L incidenza della variabilità nei punteggi è molto più elevata (in termini relativi) in matematica che in italiano

19 Livelli di apprendimento Sulla base della distribuzione dei punteggi su scala nazionale, l INVALSI ha costruito 5 livelli di apprendimento: Livello 1-2: punteggio minore o uguale al 95% della media nazionale Livello 3: punteggio maggiore del 95% e minore o uguale al 110% della media nazionale Livello 4-5: punteggio maggiore del 110% della media nazionale

20 Livelli di apprendimento, Italiano Tav. 4A Numero studenti livello 1 Numero studenti livello 2 Numero studenti livello 3 Numero studenti livello 4 Numero studenti livello Percentuale studenti livello 1 Percentuale studenti livello 2 Percentuale studenti livello 3 Percentuale studenti livello 4 Percentuale studenti livello 5 RMEE % 12% 23% 26% 27% LAZIO 16% 22% 17% 22% 20% Centro 17% 21% 16% 23% 22% Italia 20% 20% 17% 20% 20%

21 Livelli di apprendimento, Mate Tav 4B Numero studenti livello 1 Numero studenti livello 2 Numero studenti livello 3 Numero studenti livello 4 Numero studenti livello Percentuale studenti livello 1 Percentuale studenti livello 2 Percentuale studenti livello 3 Percentuale studenti livello 4 Percentuale studenti livello 5 RMEE % 15% 23% 23% 29% LAZIO 17% 23% 22% 20% 16% Centro 16% 22% 21% 20% 19% Italia 19% 21% 20% 19% 19%

22 Livelli di apprendimento Tavola 5 Quadro generale a livello di scuola in cui però non è possibile osservare la distribuzione tra classi Prova di Matematica Istituzione scolastica Numero studenti livello 1-2 Numero studenti livello 3 Numero studenti livello 4-5 Numero studenti livello Prova di Italiano Numero studenti livello Numero studenti livello

23 Risultati per tipologia di studenti E possibile analizzare i punteggi medi per diverse tipologie di studenti per vedere se ci sono differenze all interno della scuola: Cittadinanza Regolarità Genere e per porli a confronto con le stesse differenze nella regione, nell area geografica e nell Italia intera.

24 Risultati per tipologia di studenti Perché sono importanti? Per capire se alcune variabili individuali (es. la cittadinanza) esercitano un ruolo maggiore o minore nel determinare la prestazione scolastica rispetto ad altre scuole/ ambiti. Tali dati vanno letti insieme a informazioni già in possesso della scuola, come ad esempio quanti sono gli studenti per ciascuna tipologia.

25 Valutazione esterna vs interna Correlazioni voti/punteggi La correlazione rappresenta il livello di concordanza tra due misure messe a confronto: i risultati delle Rilevazioni Nazionali in Italiano e Matematica e il voto di classe delle stesse discipline, ottenuto dalla media tra voto scritto e orale al primo quadrimestre. Più la correlazione è alta, maggiore sarà la concordanza tra le due misure confrontate. I livelli di correlazione categorizzati sono i seguenti (in ordine crescente): scarsamente significativa; medio-bassa; media; medio-alta; forte.

26 Valutazione esterna vs interna Vi è coerenza tra punteggio ottenuto nelle prove Invalsi e : - Voto di ammissione all esame di terza media? (per Prova nazionale 3^Media) - Il voto assegnato nel primo quadrimestre dalla scuola nella specifica disciplina? (per gli altri gradi di scuola?)

27

28 Stesso punteggio INVALSI differente voto

29 Correlazioni voti: cosa osservare Il confronto tra la valutazione della materia (Italiano e Matematica) per i ragazzi che frequentano il terzo anno di secondaria di I grado e il risultato della prova INVALSI nella medesima disciplina può evidenziare casi in cui gli studenti abbiano ottenuto: Il medesimo voto interno ed esterno. Un voto migliore durante l anno (interna) rispetto a quello conseguito nella prova esterna d esame. Un voto migliore durante la prova esterna d esame rispetto alla valutazione interna. Sta poi a noi vedere se questo dato può segnalarci qualcosa d importante sui nostri studenti.

30 Per un analisi più dettagliata

31 Che cosa non ci dicono i dati sugli apprendimenti Skills non cognitivi Descrizione del processo educativo Qualità delle attività sottostanti ai processi di apprendimento Profilo della classe docente della scuola

32 Cosa si può osservare? Quante classi vanno meglio della media (nazionale, regionale, area territoriale ) Quanta distanza c è dalla media (nazionale, regionale, area territoriale ) Quante classi vanno meglio delle 200 classi simili in termini di background socioeconomico degli studenti Quanta differenza c è tra le classi della scuola in termini di apprendimenti e di ESCS Eventuale presenza di cheating Ruolo di alcune variabili individuali (es. la cittadinanza) nel determinare la prestazione scolastica rispetto ad altre scuole Correlazione tra valutazione interna ed esterna

33 Conclusioni Le prove Invalsi non valutano, ma misurano un livello di competenza raggiunta nei vari livelli scolastici. E come misurarsi la temperatura corporea con un termometro poi sta a noi vedere cosa fare. Curare il malanno o andare avanti considerandolo non importante?

34 GRAZIE E BUON LAVORO