Seminario Il Questionario Insegnante e il Questionario Scuola: teorie, strumenti e risultati

Transcript

1 Seminario Il Questionario Insegnante e il Questionario Scuola: teorie, strumenti e risultati IL QUESTIONARIO SCUOLA: I PRIMI RISULTATI Paola Giangiacomo INVALSI Formia, ottobre 2014

2 Il Campione Il Questionario Scuola è stato somministrato ai dirigenti scolastici delle scuole campionate per le Rilevazioni Nazionali INVALSI I rispondenti si suddividono in maniera abbastanza omogenea tra le diverse macroaree geografiche, una minore risposta si riscontra nell area Sud e isole. Iltassodirispostaperquest annoèstatodel52% Numerosità % Nord ovest ,5 Nord est ,7 Centro ,3 Sud ,3 Sud e isole ,2 Totale ,0

3 Il Campione Si tratta principalmente di donne con una laurea vecchio ordinamento. D24 -Genere Frequenza % Maschio ,4 Femmina ,6 Totale ,0

4 Il Campione D26 -Titolo di studio più elevato Frequenza % 1 Diploma magistrale 9,6 2 Laurea triennale o diploma universitario 15 1,0 3 Laurea specialistica o magistrale 68 4,4 4 Laurea vecchio ordinamento ,1 5 Master di secondo livello 137 8,8 6 Dottorato di ricerca 68 4,4 7 Scuola di specializzazione per l insegnamento 23 1,5 8 Altra scuola di specializzazione post lauream 85 5,4 Totale ,0

5 Giudizio sulle rilevazioni INVALSI Ai dirigenti scolastici, alla domanda D1, veniva chiesto di esprimere un opinione su alcuni aspetti delle Rilevazioni Nazionali INVALSI

6 Giudizio sulle rilevazioni INVALSI D1. Qual è il Suo giudizio riguardo ai seguenti aspetti delle Rilevazioni Nazionali INVALSI? (Segnare una risposta per ogni riga.) Negativo Parzialmente negativo Parzialmente positivo Positivo a) Reperibilità e fruibilità delle informazioni sul contenuto e sul significato delle prove (Quadri di Riferimento, Guide alla lettura, ecc.) b) Tempi di restituzione dei risultati delle prove alle singole scuole c) Chiarezza delle informazioni sui risultati delle prove restituiti alle singole scuole --

7 Giudizio sulle rilevazioni INVALSI

8 Giudizio sulle rilevazioni INVALSI Ilprimofattorespiegail38%dellavarianzatotaleedè costituito da item che esprimono un giudizio positivo sulle procedure adottate da parte dell'invalsi durante le prove. Il secondo fattore, che spiega il 14% della varianza totale, è caratterizzato da item maggiormente centrati sulla chiarezza dei risultati.

9 Giudizio sulle rilevazioni INVALSI Rotated Component Matrix xxxxx Component 1 2 D1_f -Chiarezza delle procedure di somministrazione delle prove comunicate dall INVALSI 0,769 0,055 D1_g -Modalità di gestione delle scadenze (consegna pacchi, invio pacchi, ecc.) 0,744 0,026 D1_e -Modalità di comunicazione alle scuole di dati e procedure da parte dell INVALSI 0,616 0,415 D1_h - Disponibilità da parte dell INVALSI a fornire chiarimenti 0,565 0,29 D1_a -Reperibilità e fruibilità delle informazioni sul contenuto e sul significato delle prove 0,529 0,338 D1_b -Tempi di restituzione dei risultati delle prove alle singole scuole 0,225 0,600 D1_d -Utilizzabilità dei risultati da parte dei singoli insegnanti e dei Consigli di classe 0,131 0,757 D1_c -Chiarezza delle informazioni sui risultati delle prove restituiti alle singole scuole 0,105 0,828

10 Giudizio sulle rilevazioni INVALSI Il primo fattore è stato denominato "Procedure" e il secondo "Risultati". Dopo aver effettuato una normalizzazione relativa dei punteggi del primo fattore (x-xmin)/(xmax-xmin)*100 si osserva che, in media, i dirigenti scolastici delle diverse macroaree esprimono giudizi positivi sulle procedure adottate dall'invalsi per la gestione delle scadenze, la somministrazione delle prove, la comunicazione con le scuole.

11 90 Giudizio sulle rilevazioni INVALSI Procedure Media indice Procedure Nord ovest Nord est Centro Sud Sud e isole Macroarea geografica

12 Giudizio sulle rilevazioni INVALSI Procedure Al fine di esplorare differenze ascrivibili alla macroarea di appartenenza è stata condotta un'analisi della varianza considerando come variabili indipendenti le macroaree geografiche e come variabile dipendente il punteggio ottenuto nel primo fattore emerso dall'analisi fattoriale. Nello specifico è emerso che rispetto al fattore "Procedure" i dirigenti del Sud esprimono un giudizio significativamente più positivo rispetto ai dirigenti del Centro e del Nord Ovest. Tra i dirigenti delle altre macroaree non si evidenziano differenze significative.

13 Giudizio sulle rilevazioni INVALSI Procedure (I) Area Geografica Differenza medie (I-J) E.S. Sig. Intervallo di Confidenza 95% Limite Limite Inferiore Superiore Nord ovest Nord est -1,5350 1,50329,903-6,1713 3,1013 Centro 1,0444 1,53778,977-3,6982 5,7871 Sud -5,3585* 1,49435,012-9,9672 -,7497 Sud e isole -4,5213 1,80540,180-10,0894 1,0468 Nord est Nord ovest 1,5350 1,50329,903-3,1013 6,1713 Centro 2,5794 1,54109,592-2,1735 7,3323 Sud -3,8235 1,49776,164-8,4428,7958 Sud e isole -2,9863 1,80822,605-8,5631 2,5905 Centro Nord ovest -1,0444 1,53778,977-5,7871 3,6982 Nord est -2,5794 1,54109,592-7,3323 2,1735 Sud -6,4029* 1,53237,002-11,1290-1,6769 Sud e isole -5,5657 1,83700,057-11,2313,0998 Sud Nord ovest 5,3585* 1,49435,012,7497 9,9672 Nord est 3,8235 1,49776,164 -,7958 8,4428 Centro 6,4029* 1,53237,002 1, ,1290 Sud e isole,8372 1,80080,995-4,7167 6,3911 Sud e isole Nord ovest 4,5213 1,80540,180-1, ,0894 Nord est 2,9863 1,80822,605-2,5905 8,5631 Centro 5,5657 1,83700,057 -, ,2313 Sud -,8372 1,80080,995-6,3911 4,7167

14 Giudizio sulle rilevazioni INVALSI Procedure

15 Giudizio sulle rilevazioni INVALSI Risultati Anche per quanto riguarda il secondo fattore"risultati", i dirigenti delle diverse macroaree geografiche esprimono un giudizio positivo relativamente alla chiarezza delle informazioni sui risultati, all'utilizzabilità degli stessi e alla loro reperibilità.

16 Giudizio sulle rilevazioni INVALSI 90 Risultati Media indice Risultati Nord ovest Nord est Centro Sud Sud e isole Macroarea geografica

17 Giudizio sulle rilevazioni INVALSI Risultati In questo caso però non ci sono differenze significative tra i dirigenti delle diverse macroaree geografiche Anche i dirigenti dell'area PON esprimono, in media, un giudizio positivo relativamente alla chiarezza delle informazioni (83) e alle procedure utilizzate dall INVALSI (89)

18 Possibile utilizzo dei risultati delle rilevazioni INVALSI Nella domanda D2 si richiede ai dirigenti scolastici un opinione sul possibile utilizzo dei risultati delle rilevazioni nazionali INVALSI

19 Possibile utilizzo dei risultati delle rilevazioni INVALSI D2. Quanto è d accordo con le seguenti affermazioni? (Segnare una risposta per ogni riga.) Per niente Poco Abbastanza Molto I risultati delle prove INVALSI dovrebbero essere usati dagli insegnanti per valutare i singoli studenti nel corso dell anno, contribuendo a definire il loro voto finale I risultati delle prove INVALSI dovrebbero essere utilizzati per confrontare i livelli di apprendimento nelle diverse classi all interno di una scuola I risultati delle prove INVALSI dovrebbero essere utilizzati dalle singole scuole per l autovalutazione di istituto I risultati delle prove INVALSI dovrebbero essere resi pubblici e utilizzati per confrontare i livelli di apprendimento tra scuole diverse --

20 Possibile utilizzo dei risultati delle rilevazioni INVALSI Inquestocasosièdecisodiraggrupparelealternativedi risposta in Disaccordo (Per niente e Poco) e Accordo (Abbastanza e Molto) e, attraverso la differenza nelle percentuali di risposta nelle due modalità, vedere se il grado di accordo dei dirigenti scolastici delle diverse macroaree geografiche sia maggiore o minore rispetto al grado di disaccordo.

21 Possibile utilizzo dei risultati delle rilevazioni INVALSI 100% Domanda 2: Quanto è d accordo con le seguenti affermazioni? 80% 60% 40% 20% 0% -20% Accordo >Disaccordo Accordo <Disaccordo Nord ovest Nord est Centro Sud Sud e isole I risultati delle prove INVALSI dovrebbero D2_a essere usati dagli insegnanti per valutare i singoli studenti nel corso dell anno, contribuendo a definire il loro voto finale D2_b essere utilizzati per confrontare i livelli di apprendimento nelle diverse classi all interno di una scuola D2_c essere utilizzati dalle singole scuole per l autovalutazione di istituto D2_d essere resi pubblici e utilizzati per confrontare i livelli di apprendimento tra scuole diverse

22 Possibile utilizzo dei risultati delle rilevazioni INVALSI PON Domanda 2: Quanto è d accordo con le seguenti affermazioni? I risultati delle prove INVALSI dovrebbero 80% Accordo >Disaccordo 60% 40% 20% 0% D2_a essere usati dagli insegnanti per valutare i singoli studenti nel corso dell anno, contribuendo a definire il loro voto finale D2_b essere utilizzati per confrontare i livelli di apprendimento nelle diverse classi all interno di una scuola D2_c essere utilizzati dalle singole scuole per l autovalutazione di istituto PON D2_d essere resi pubblici e utilizzati per confrontare i livelli di apprendimento tra scuole diverse

23 Uso dei risultati delle Rilevazioni Nazionali INVALSI Alla domanda D4 è chiesto qual è il principale uso effettivo dei risultati delle Rilevazioni Nazionali

24 Uso dei risultati delle Rilevazioni Nazionali INVALSI D4. Ora Le chiediamo informazioni sull uso che ha fatto questa scuola dei risultati delle Rilevazioni Nazionali INVALSI I risultati sono stati da Lei... ( Sono possibili più risposte.) a) discussi con i singoli insegnanti b) comunicati al Collegio dei Docenti c) commentati in una commissione apposita d) discussi con insegnanti della stessa disciplina e) discussi con il Presidente del Consiglio d'istituto f) presentati ai genitori durante le assemblee di istituto g) presentati ad altri soggetti esterni alla scuola h) altro (specificare)

25 Uso dei risultati delle Rilevazioni Nazionali INVALSI 40% D4. Uso dei risultati delle Rilevazioni INVALSI ,8% 30% 20% 14,9% 18,6% 15,1% 10% 7,4% 8,0% 2,2% 0% discussi con i singoli insegnanti comunicati al Collegio dei Docenti commentati in una commissione apposita discussi con insegnanti della stessa disciplina discussi con il Presidente del Consiglio d'istituto presentati ai genitori durante le assemblee di istituto presentati ad altri soggetti esterni alla scuola

26 Opinione nei confronti delle Rilevazioni Nazionali INVALSI In un altra domanda del questionario Scuola, la D5, i dirigenti scolastici dovevano descrivere l opinione nei confronti delle Rilevazioni Nazionali INVALSI da parte di alcuni soggetti

27 Opinione nei confronti delle Rilevazioni Nazionali INVALSI D5. Come descriverebbe l opinione nei confronti delle Rilevazioni Nazionali INVALSI, da parte dei seguenti soggetti nella Sua scuola... (Segnare una risposta per ogni riga.) Decisamente Abbastanza Abbastanza Decisamente critica critica favorevole favorevole a) studenti b) insegnanti c) genitori d) membri del Consiglio di Istituto -----

28 Opinione nei confronti delle Rilevazioni Nazionali INVALSI 70% 60% 50% D5. Come descriverebbe l opinione nei confronti delle Rilevazioni Nazionali INVALSI, da parte dei seguenti soggetti nella Sua scuola... Accordo >Disaccordo studenti 40% 30% 20% 10% 0% -10% -20% -30% -40% Accordo <Disaccordo Nord ovest Nord est Centro Sud Sud e isole insegnanti genitori membri del Consiglio di Istituto

29 Opinione nei confronti delle Rilevazioni Nazionali INVALSI - PON 50% 40% D5. Come descriverebbe l opinione nei confronti delle Rilevazioni Nazionali INVALSI, da parte dei seguenti soggetti nella Sua scuola... Accordo >Disaccordo 30% 20% 10% 0% -10% -20% -30% Accordo <Disaccordo studenti insegnanti genitori membri del Consiglio di Istituto PON resto del campione

30 Sviluppi futuri Diversificare le domande per plesso Riformulazione di alcune domande per ottenere maggiori informazioni

31 Sviluppi futuri Diversificare le domande per plesso Per ottenere informazioni più precise si potrebbe, per alcune domande, permettere al dirigente scolastico di rispondere in maniera differenziata rispetto ai diversi plessi da lui diretti. Questo potrebbe essere utile, ad esempio per le domande : -D14 opinione sui processi relazionali all interno della scuola -D22 strutture/infrastrutture funzionanti - D23 strumenti adeguati

32 Sviluppi futuri Riformulazione di alcune domande Dall analisi delle risposte date al questionario abbiamo potuto stabilire che sarebbe possibile, attraverso una riformulazione della domanda, ottenere un numero maggiore di informazioni. Ad esempio alla domanda D10 viene chiesto quanto Ad esempio alla domanda D10 viene chiesto quanto incidono alcuni soggetti sulle principali decisioni da prendere.

33 Sviluppi futuri Riformulazione di alcune domande D10. Sulla base della Sua esperienza, quanto incidono i seguenti soggetti sulle principali decisioni da prendere in questa scuola? Esprima un giudizio da 1 a 10, dove 1 = "per niente" e 10 = "moltissimo". (Segnare una risposta per ogni riga.) a) I funzionari del MIUR a) Il Dirigente Scolastico a) Il Vicario

34 Sviluppi futuri Riformulazione di alcune domande Se formulassimo la domanda specificando quali nel dettaglio sono le decisioni da prendere, e il dirigente indicasse a chi compete principalmente la responsabilità per ciascuna di esse otterremmo maggiori informazioni

35 Sviluppi futuri Riformulazione di alcune domande D10 Sulla base della Sua esperienza, quanto incidono i seguenti soggetti sulle principali decisioni da prendere in questa scuola? (Barrare tutte le caselle necessarie per ogni riga) a) scegliere i libri di testo da adottare? I funzionari del MIUR Il Dirigente Scolastico L Ufficio Scolastico Regionale Gli insegnanti della scuola I genitori degli alunni e i loro rappresentanti b) c) stabilire il regolamento interno per gli studenti? decidere quali corsi di insegnamento offrire?

36 Grazie per l attenzione