Assicurazione di Qualità: il modello italiano in prospettiva comparata. Roberto Torrini Direttore ANVUR

Transcript

1 Assicurazione di Qualità: il modello italiano in prospettiva comparata Roberto Torrini Direttore ANVUR

2 Modelli Nazionali di Agenzia I paesi europei aderenti al processo di Bologna presentano un elevato livello di eterogeneità già a livello di natura e funzioni delle agenzie di valutazione incaricate della valutazione esterna dei processi AQ Funzioni: solo valutazione della didattica (prevalente) valutazione di didattica e ricerca Natura: Agenzia pubblica o con riconoscimento pubblico nazionale, con eventuali agenzie regionali negli stati federali o con ampie autonomie regionali Agenzia pubblica nazionale e ricorso ad agenzie private Agenzie private

3 Modelli Nazionali di Agenzia Didattica e ricerca: Francia, HCERES (ex AERES): strumento principe le visite in loco sia per didattica che per ricerca; Italia (ANVUR): visite per la valutazione della didattica e in misura minore per la ricerca, e valutazione dei prodotti per la ricerca sul modello UK (eredità CNVSU e CIVR) In molti paesi la valutazione della ricerca, se presente, è affidata a entità diverse Natura: Agenzia «pubblica» nazionale: Francia, Spagna, Italia, UK Agenzia pubblica nazionale e ricorso parziale ad agenzie private: modello olandese Agenzie private accreditate da un organismo centrale: modello tedesco

4 Modelli Nazionali di Valutazione: livello dell accreditamento e valutazione A livello di corso (ancora prevalente) A livello di corso e di istituzione (in espansione, con tendenza a muovere verso l istituzione) Solo a livello di istituzione (modello inglese)

5 Modelli Nazionali di Valutazione: livello dell accreditamento e valutazione HCERES (AERES): organizza visite distinte alle istituzioni e ai singoli corsi, usando le visite ai corsi anche come strumento di valutazione delle istituzioni NVAO Olanda: accredita i corsi e si sta muovendo verso un accreditamento delle sedi, che possa in prospettiva sostituire l accreditamento dei singoli corsi ANECA Spagna: accredita e visita i corsi, sta sperimentando visite alle istituzioni QAA, UK: Solo a livello di istituzione Germania: solo visite ai corsi In generale il passaggio al livello di istituzione è visto come un modo di ridurre il lavoro degli atenei connesso alle visite

6 Modelli Nazionali di Valutazione: livello dell accreditamento e valutazione Paul Zevenbergen, board di NVAO su statodel dibattitoin Olanda: Topics in renewing the system: earned trust; risk-based; institutional accreditation? Everyone agrees on reducing administrative burden where possible HEI ask for a more trust based system, universities advocate institutional accreditation Students insist on keeping external programme assessment, have HEI deserved enough trust? Government looks for a combination of these positions. Experiments with institutional accreditation seem likely CASO Portogallo: sono impegnati in una campagna pluriennale di visite a tutti i corsi al termine del quale intendono muoversi verso un modello più flessibile, basato su sitemi interni, indicatori, controlli a campione.

7 Il Modello italiano nel confronto con gli altri paesi Il Modello italiano si muove nel solco delle ESG, con alcune peculiarità istituzionali legate al ritardo storico, all assetto normativo e istituzionale ereditato, alla dimensione dell ANVUR Accreditamento iniziale: Si innesta sulle procedure autorizzative precedenti, CUN-MIUR; la 240 ha introdotto il ruolo dell ANVUR sovrapponendolo all esistente. In nessun paese che io sappia intervengono tre soggetti nel processo di autorizzazione: CUN, ANVUR e Ministero La procedura, a causa della normativa, è confusa e si sta faticosamente trovando una strada per limitare le difficoltà agli atenei. Il lavoro richiesto e l interazione con gli atenei per l istituzione di nuovi corsi è tuttavia relativamente contenuto rispetto ad altri contesti. È di aiuto la standardizzazione tramite SUA- CDS

8 Il Modello italiano nel confronto con gli altri paesi Accreditamento periodico: Il DLGS 19/2012: prevede accreditamento periodico dei corsi e delle sedi, anche con riferimento all attività di ricerca dei dipartimenti Data la dimensione del Paese, grande, (96 università, 4300 corsi) e la dimensione dell ANVUR, piccola, (18 dipendenti) a regime, l ANVUR ha reso operativa la sua missione definendo un modello di visita in cui si valutano simultaneamente i processi di AQ di ateneo e un campione di corsi; La valutazione dei corsi è anche finalizzata a verificare la concreta applicazione delle procedure definite a livello di ateneo.

9 Il Modello italiano nel confronto con gli altri paesi Ruolo della scheda SUA-CDS Il sistema è stato concepito prevedendo una certa standardizzazione delle procedure di AQ a livello di corso, prevedendo una scheda di corso concepita come strumento informativo e «operativo», dato che sintetizza anche l attività di riesame annuale e ciclico. La scheda Sua non nasce dal nulla, ma si innesta sull esistente prassi di elaborazione del RAD e dell OFF, strumenti che sostenevano l attività del CUN e del Ministero. Le schede SUA consentono di informare il pubblico (pubblicate quest anno su input ANVUR sul sito Universitaly) e le Commissioni di esperti della valutazione, limitando gli sforzi in sede di visita agli atenei.

10 Il Modello italiano nel confronto con gli altri paesi Alcune peculiarità nazionali derivanti dalla normativa Nuclei di Valutazione: peculiarità italiana. Il nucleo data la sua configurazione non può essere il soggetto che guida i processi di AQ. Le recenti linee guida dell ANVUR tendono a qualificarne la funzione in senso maggiormente valutativo, chiedendo che sia il Presidio di Qualità a gestire i processi di AQ Commissioni paritetiche docenti studenti: il coinvolgimento degli studenti è un pilastro dei processi di AQ, ma in Italia la disposizione normativa definisce esplicitamente il modello di coinvolgimento

11 Il Modello italiano nel confronto con gli altri paesi In sintesi Accreditamento nuovi corsi:sufficientemente rapido ma con il coinvolgimento di molti soggetti, con possibili problemi di interpretazione e indirizzo agli atenei Modello di visite: modello misto, in cui prevale l analisi del funzionamento dei processi di AQ di ateneo, come emerge anche dall analisi dai corsi (i corsi esaminati al momento sono circa il 10% potrebbero diventare il 20%). Standardizzazione delle informazioni e di alcuni processi: costo iniziale ma riduzione dei costi in fase di visita Pluralità di soggetti:necessità di chiarire nella prassi, più che nella teoria, il ruolo di Presidio, Nucleo, Commissioni, Responsabili dei Corsi

12 Il Modello italiano nel confronto con gli altri paesi In sintesi Il sistema italiano già alla nascita è orientato più sulla verifica di ateneo che sul singolo corso, non essendoci la possibilità materiale di una visita esterna per ogni corso esistente A mio avviso non sarebbe stato opportuno muoversi solo sul livello di ateneo non essendoci ancora una cultura di assicurazione della qualità sufficientemente diffusa I sistemi risk-based richiedono che vi sia almeno una prima valutazione del rischio!

13 Il Modello italiano nel confronto con gli altri paesi Possibilità-opportunità-necessità di integrare i processi di AQ con informazioni quantitative Carriere degli studenti Opinioni degli studenti Esiti occupazionali In molti sistemi già avviene. Anche ANVUR si sta muovendo in questa direzione

14 Accreditamento delle Agenzie di Valutazione Le ESG prevedono standard che le agenzie di valutazione devono adottare 1. Agencies should undertake external quality assurance activities as defined in Part 2 of the ESG on a regular basis. They should have clear and explicit goals and objectives that are part of their publicly available mission statement. These should translate into the daily work of the agency. Agencies should ensure the involvement of stakeholders in their governance and work. 2. Agencies should have an established legal basis and should be formally recognisedas quality assurance agencies by competent public authorities. 3. Agencies should be independent and act autonomously. They should have full responsibility for their operations and the outcomes of those operations without third party influence.

15 Accreditamento delle Agenzie di Valutazione Le ESG prevedono standard che le agenzie di valutazione devono adottare 1. Agencies should regularly publish reports that describe and analysethe general findings of their external quality assurance activities. 2. Agencies should have adequate and appropriate resources, both human and financial, to carry out their work. 3. Agencies should have in place processes for internal quality assurance related to defining, assuring and enhancing the quality and integrity of their activities. 4. Agencies should undergo an external review at least once every five years in order to demonstrate their compliance with the ESG.

16 Accreditamento delle Agenzie di Valutazione E evidente che per ricevere l accreditamento l ANVUR deve innanzitutto aver svolto le attività previste Come noto l Agenzia ha avviato l accreditamento dei nuovi corsi nel 2013 e le visite solo a novembre Le precondizioni per chiedere una visita esterna ci saranno non appena avremo prodotto un numero sufficiente di rapporti di valutazione Ciò spiega il motivo per cui fino ad oggi, a parte l affiliazione ad ENQA, che ci consente nei limiti del possibile di partecipare agli incontri internazionali, non abbiamo chiesto una verifica esterna e la full-membership ad ENQA

17 Accreditamento delle Agenzie di Valutazione ANVUR è affiliate di ENQA. European Association for Quality Assurance in Higher Education Per la full-membershipoccorre una richiesta di visita da parte di un panel definito da ENQA. In preparazione si deve predisporre un rapporto di autovalutazione. Il Panel svolge la visita e redige un rapporto. Il Board decide.

18 Accreditamento delle Agenzie di Valutazione Oltre ad ENQA, vi è il Registro Europeo, European Quality Assurance Register for Higher Education Anche esso prevede l iscrizione a seguito di visita esterna

19 Accreditamento delle Agenzie di Valutazione Per quanto riguarda gli standard «esogeni», io ritengo che ANVUR: Abbia uno status giuridico e margini di indipendenza adeguati Quanto alle risorse umane, vi è il problema del sottodimensionamento dell organico previsto dal DPR 76/2010 che regolamenta l Agenzia e che stabilisce una dotazione di 18 persone. Per avere dei termini di confronto: HCERES Francia 75, ANECA (Spagna) 90, QAA Regno Unito 150 ecc Io ritengo che fino ad ora abbiamo fatto un buon lavoro, alle condizioni date occorre proseguire. La sfida come sempre nel nostro paese è dare continuità, con serietà, ai percorsi intrapresi perseguendo il miglioramento.

20 Conclusioni Io ritengo che fino ad ora abbiamo fatto un buon lavoro, soprattutto se valutato alle condizioni date Occorre proseguire. La sfida come sempre nel nostro Paese è dare continuità, con serietà, ai percorsi intrapresi, perseguendo il miglioramento continuo.

21 Grazie per l attenzione