Nota metodologica 2015 Le famiglie di valutazione e gli indicatori

Transcript

1 Nta metdlgica 2015 Le famiglie di valutazine e gli indicatri Pagina 1 di 10

2 GLI INDICATORI E LE FAMIGLIE DI VALUTAZIONE DELLE FACOLTÀ DEGLI ATENEI STATALI La valutazine delle single aree didattiche degli atenei statali si basa sull analisi di 2 famiglie di indicatri: prgressine della carriera degli studenti e internazinalizzazine. Il punteggi di gni singla famiglia, a sua vlta, è il frutt di una pprtuna aggregazine di una serie di indicatri, specifici per ciascuna famiglia di valutazine. Il vt finale, infine, è la media aritmetica dei punteggi di sintesi delle due famiglie di valutazine. La valutazine delle aree CUN è avvenuta sulla base di due famiglie di indicatri: i prgetti di ricerca e la prduzine scientifica. La valutazine degli Atenei è avvenuta attravers l analisi di cinque famiglie di indicatri: i servizi, le brse di studi e i cntributi, le strutture, il sit web e l internazinalizzazine. Gli indicatri delle AREE DIDATTICHE Famiglia: prgressine di carriera degli studenti P1 P2 P3 TASSO DI PERSISTENZA TRA IL I ED IL II ANNO (iscritti nell' A.A e che si sn immatriclati nell'ann accademic precedente / immatriclati nell' A.A e ). Nta: Indicatre nn utilizzat per la Laurea Magistrale e a cicl unic in Medicina e Chirurgia (LMCU-41) e per la Laurea Magistrale a cicl unic in Medicina veterinaria (LMCU-42) Premia l Atene cn il maggire tass di passaggi dal I al II ann. Fnte: MIUR - Uffici di Statistica-Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari TASSO DI ISCRITTI REGOLARI (iscritti A.A e da un numer di anni nn superire alla durata del crs al nett degli immatriclati / ttale degli iscritti A.A e al nett degli immatriclati, di quanti sn già in pssess di un titl di laurea e degli iscritti di cui nn si cnsce l ann di prima immatriclazine) Premia ll Atene cn la quta più alta di iscritti reglari. Fnte: MIUR - Uffici di Statistica-Elabrazine du dati Anagrafe Studenti TASSO DI REGOLARITA DEI LAUREATI (laureati nell A.S.2013 e 2012 nella durata reglare del crs / ttale dei laureati nell A.S e 2012 al nett dei laureati precci, di quelli di cui nn si cnsce l ann di prima immatriclazine e di quelli che sn già in pssess di un titl universitari) Premia le facltà cn il tass di reglarità più alt. Fnte: MIUR - Uffici di Statistica-Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari Pagina 2 di 10

3 Famiglia: rapprti internazinali RI1 MOBILITA DEGLI STUDENTI IN USCITA (studenti che hann trascrs un perid di studi all ester finanziat mediante il prgramma Erasmus (mbilità per studi per tircini) nell A.A e / iscritti al nett degli immatriclati nell A.A e ) Premia l Atene dve è più alt il rapprt tra il numer di studenti in uscita ed iscritti al nett degli immatriclati. Fnte: INDIRE e Uffici Erasmus degli Atenei; MIUR - Uffici di Statistica-Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari RI2 RI3 UNIVERSITA' OSPITANTI (numer di università straniere che hann spitat gli studenti Erasmus nell A.A e / ttale iscritti nell A.A e ) Premia l Atene nei quali è più alt il rapprt tra il numer di università spitanti e ttale degli iscritti Fnte: INDIRE e Uffici Erasmus degli Atenei; MIUR - Uffici di Statistica-Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari ISCRITTI STRANIERI (iscritti stranieri nell A.A sul ttale degli iscritti nell A.A ) Premia l Atene cn la più alta percentuale di studenti stranieri sul ttale degli iscritti. Fnte: MIUR - Uffici di Statistica-Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari Le famiglie di valutazine e il ranking delle aree didattiche Al fine di rendere tutti gli indicatri cmparabili su di una stessa scala, la metrica utilizzata si basa sul calcl, per ciascun indicatre 1 cnsiderat, di un punteggi che varia tra un minim di 0 e un massim di Tale prcedura di standardizzazine (std) è stata ttenuta attravers la seguente frmula: std(x) = X X min X max X min dve X è il valre riginari dell indicatre, mentre X min e X max rappresentan, rispettivamente, il valre minim e il valre massim dell stess indicatre all intern del crrispndente raggruppament. 1 All scp di attutire l effett prdtt da valri estremi (dvut, per esempi, a fenmeni ccasinali, a pssibili errri nella trasmissine dei dati a delle peculiarità delle classi di laurea) sulla distribuzine dei punteggi, per ciascun indicatre si è prcedut nel seguente md: - tutti gli indicatri cn un valre inferire al 2,5esim percentile sn stati riprtati al livell crrispndente al 2,5esim percentile. - tutti gli indicatri cn un valre superire al 97,5esim percentile sn stati riprtati al livell crrispndente al 97,5esim percentile. Pagina 3 di 10

4 Il pass successiv è quell di prcedere al calcl dei punteggi di sintesi delle due famiglie di valutazine (prgressine (P) e rapprti internazinali (RI)), attravers una pprtuna pnderazine dei rispettivi indicatri precedentemente standardizzati. Frmalmente: Prduttività (P): P = std(p1) + std(p2) + std(p3) 3 Rapprti Internazinali (RI): RI = std (RI1) + std (RI2) + std (RI3) 3 I punteggi di sintesi delle famiglie csì calclati, cme cnsuetudine del vt di laurea, vengn pi riprtati alla scala Si calcla, infine, il vt medi finale (M) cme media aritmetica delle due famiglie di valutazine: M = std (P) + std (RI) 2 Al fine di valutare il più alt numer pssibile di Atenei, senza preguidicare la validità statistica tra Atenei di dimensini diverse, si è decis di adttare i seguenti criteri di inclusine: 1. Vengn inclusi gli atenei cn almen la metà men 0,5 di classi di laurea attive per raggruppament 2. Tra gli Atenei esclusi perché nn rispettan il criteri indicat al punt 1, rientran quelli che hann un numer di iscritti per raggruppament superire alla media degli iscritti per raggruppament degli esclusi secnd il punt Tra gli esclusi, sulla base dei criteri indicati al punt 1 e 2, rientran quegli Atenei che hann un numer di iscritti per raggruppament maggire del numer di iscritti di un atene inclus per quell stess raggruppament. Pagina 4 di 10

5 Gli indicatri delle aree CUN 2 La valutazine delle single aree CUN degli Atenei si basa sull analisi di due famiglie di indicatri: la ricerca e la prduttività scientifica. Gli indicatri della RICERCA R1 N MEDIO DI UNITA' DI RICERCA FINANZIATE DAL PROGRAMMA PRIN NEL TRIENNIO PER DOCENTE DI RUOLO (ttale delle unità di ricerca nazinali e lcali finanziate dal prgramma PRIN nel trienni / numer medi di dcenti di rul negli anni slari ) Premia l Atene cn il più alt numer medi di unità di ricerca finanziate nel trienni per dcente di rul. Fnte: MIUR - Uffici di Statistica ; CINECA R2 FINANZIAMENTO MEDIO OTTENUTO DALLE UNITA' DI RICERCA FINANZIATE DAL PROGRAMMA PRIN NEL TRIENNIO (ttale dei finanziamenti ttenuti dalle unità di ricerca nazinali e lcali / n. delle unità finanziate negli anni slari ) Premia l Atene cn il più alt finanziament medi per unità di ricerca finanziata. Fnte: MIUR - Uffici di Statistica ; CINECA R3 R4 R5 PROGETTI PRESENTATI AL COFINANZIAMENTO NELL AMBITO DEL PROGRAMMA PRIN PER DOCENTE DI RUOLO (ttale delle unità presentate al cfinanziament nel trienni / numer medi di dcenti di rul negli anni slari ) Premia ll Atene cn il maggir numer di prgetti presentati per dcente di rul. Fnte: MIUR - Uffici di Statistica ; CINECA TASSO DI SUCCESSO DELLA PARTECIPAZIONE AL PROGRAMMA PRIN NEL TRIENNIO (ttale delle unità di ricerca nazinali e lcali finanziate / ttale delle unità presentate al cfinanziament) Premia l Atene cn il maggir tass di success. Fnte: MIUR - Uffici di Statistica ; CINECA PROGETTI DI RICERCA FINANZIATI DAL SETTIMO PROGRAMMA QUADRO DI RICERCA E SVILUPPO E ALTRI PROGETTI DI RICERCA (HORIZON, AIRC, AISM, FONDAZIONE FIBROSI CISTICA, FONDAZIONE VERONESI, FIRB, MINISTERO AFFARI ESTERI-ACCORDI INTERNAZIONALI, PNRA, RESEARCH ITALY-GRANDI PROGETTI, TELETHON) PER DOCENTE DI RUOLO (numer di unità di ricerca finanziate / numer medi di dcenti di rul negli anni 2 Per le aree CUN si è scelt di nn cnsiderare nella valutazine gli Atenei cn un numer di dcenti al di stt di una certa sglia. Tale sglia è stata calclata per gni area cme l 1,55% del numer massim di dcenti presenti in un singl Atene per l area in ggett. La percentuale è stata fissata in md da pter escludere Atenei cn Aree CUN cn un sl dcente. In particlare è risultat 1,55 = 100 x 1/65 dve 65 è il più piccl, fra tutte le Aree CUN, numer massim di dcenti appartenenti ad una stessa area CUN. Pagina 5 di 10

6 slari ) Premia l Atene cn il più alt numer medi di unità di ricerca finanziate per dcente di rul nel trienni. Fnte: Uffici di Ricerca degli Atenei Gli indicatri della PRODUTTIVITA SCIENTIFICA 3 PS1 PS2 PS3 H-INDEX NORMALIZZATO MEDIO H-index è un indicatre che mette in relazine il numer di pubblicazini di un dcente nel perid e il numer di citazini ttenute dalla stessa pubblicazine. Premia l Atene cn H-index nrmalizzata medi più elevat. Fnte Ggle Schlar. PUBBLICAZIONI/DOCENTI DI RUOLO Calcla il numer di pubblicazini presenti su Ggle Schlar. Il perid di riferiment è sempre per tutti i dcenti di rul afferenti alle aree CUN nell ann Premia l Atene cn il più alt rapprt pubblicazini/dcenti di rul Fnte Ggle Schlar. CITAZIONI/PUBBLICAZIONI Calcla il numer di citazini il perid è sempre per gni pubblicazine di dcente afferente all area CUN nell ann slare Premia gli Atenei cn il più alt cicl rapprt citazini/pubblicazini. Fnte Ggle Schlar. 3 La valutazine è avvenuta sul 97% dei dcenti incardinati al 2015, avend esclus la ttalità dei casi di mnimia. Pagina 6 di 10

7 Le famiglie di valutazine e il ranking delle aree cun per aree didattiche Al fine di rendere tutti gli indicatri cmparabili su di una stessa scala, la metrica utilizzata si basa sul calcl, per ciascun indicatre 4 cnsiderat, di un punteggi che varia tra un minim di 0 e un massim di Tale prcedura di standardizzazine (std) è stata ttenuta attravers la seguente frmula: std(x) = X X min X max X min dve X è il valre riginari dell indicatre, mentre X min e X max rappresentan, rispettivamente, il valre minim e il valre massim dell stess indicatre all intern del crrispndente raggruppament. Il pass successiv è quell di prcedere al calcl dei punteggi di sintesi delle due famiglie di valutazine (ricerca (R) e prduttività scientifica (PS)), attravers una pprtuna pnderazine dei rispettivi indicatri precedentemente standardizzati. Frmalmente: Ricerca (R): R = std (R1) + std (R2) + std (R3) + std (R4) + std (R5) 5 Nel cas in cui la maggiranza degli Ateni nn abbia alcun prgett finanziat dal VII Prgramma Quadr dagli altri prgetti di ricerca, nazinali e internazinali, presi in cnsiderazine, l indicatre R5 nn dà lug a un punteggi, ma a un ulterire bnus tale per cui il punteggi finale della famiglia della ricerca è csì calclat: R = std (R1) + std (R2) + std (R3)+ std (R4) k 4 4 All scp di attutire l effett prdtt da valri estremi (dvut, per esempi, a fenmeni ccasinali, a prbabili errri nella trasmissine dei dati a delle peculiarità delle classi di laurea) sulla distribuzine dei punteggi, per ciascun indicatre si è prcedut nel seguente md: - tutti gli indicatri cn un valre inferire al 2,5esim percentile sn stati riprtati al livell crrispndente al 2,5esim percentile. - tutti gli indicatri cn un valre superire al 97,5esim percentile sn stati riprtati al livell crrispndente al 97,5esim percentile. Pagina 7 di 10

8 dve k = 1 + k e cn: 0,000 std(r6) = 0 0,050 0 < std(r6) 333 k = { 0, < std(r6) 666 0,100 std(r6) > 666 Prduttività scientifica(ps): PS = std (PS1) + std (PS2) + std (PS3) 3 I punteggi di sintesi delle famiglie csì calclati, cme cnsuetudine del vt di laurea, vengn pi riprtati alla scala Si calcla, infine, il vt medi finale (M) cme media aritmetica delle due famiglie di valutazine: M = std (R) + std (PS) 2 Pagina 8 di 10

9 NOTA METODOLOGICA PER LA VALUTAZIONE DEGLI ATENEI STATALI La valutazine degli atenei si articla in 5 famiglie di indicatri: - SERVIZI S1. N pasti ergati nell ann slare 2013 / ttale degli iscritti A.A Fnte: Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari - Rilevazine sul Diritt all Studi 2014 S2. N di psti e cntributi allggi al 1/11/2014 / iscritti residenti furi regine A.A Fnte: Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari- Rilevazine sul Diritt all Studi BORSE E CONTRIBUTI B1 Spesa degli Atenei e degli Enti del Diritt all Studi per interventi a favre degli studenti A.S / ttale degli iscritti A.A Fnte: Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari - Rilevazine sul Diritt all Studi 2014; Cntribuzine studentesca e degli interventi delle università a favre degli studenti STRUTTURE ST1. N psti aula al 31/12/2014 / iscritti A.A Fnte: Uffici Nuclei di Valutazine Atenei e Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari ST2. N psti nelle bibliteche / iscritti A.A Fnte: Uffici Nuclei di Valutazine Atenei e Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari ST3. N psti nei labratri scientifici / iscritti A.A Fnte: Uffici Nuclei di Valutazine Atenei e Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari - WEB W1. Punteggi assegnat ai siti internet degli atenei sulla base della funzinalità e dei cntenuti. La valutazine del web si cmpne di 86 indicatri suddivisi in 9 famiglie: - Struttura del sit. Utile a identificare la presenza di elementi di base per la navigazine e la fruizine dei cntenuti - Strutture e servizi. Pssibilità di usufruire di determinati servizi anche nline (es. iscrizine e pagament tasse). - Privacy e sicurezza. Fcus sull attenzine prestata alla nrmativa ckie e a test inerenti la sicurezza delle webmail degli studenti - Accessibilità e usabilità. Racchiude gli indicatri per valutare il livell di accessibilità del sit web (secnd standard internazinali) e la sua usabilità. - SEO Cmpetitin. Utile a valutare la cura prestata al cntenut anche nell ttica dei mtri di ricerca rganici (es. Ggle) - Scial. Analisi della prduzine dei cntenuti e dell engagement registrat sulle fan page di atene. - Brand identity. Attenzine prestata alla creazine di un immagine crdinata e all implementazine di canali e strumenti vlti a veiclarla. - Studenti stranieri. Presenza di determinate infrmazini unicamente in lingua straniera Pagina 9 di 10

10 - Fundraising. Presenza di strumenti azini vlte alla prmzine di campagne 5*1000 crwdfunding. Fnte: Censis INTERNAZIONALIZZAZIONE I1. Iscritti stranieri A.A / ttale degli iscritti A.A Fnte: Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari I2. Studenti che nell A.A hann trascrs un perid all ester per studi tircini / ttale degli iscritti A.A al nett degli immatriclati Fnte: Uffici Erasmus; Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari I3. Studenti stranieri che nell A.A hann trascrs un perid di studi press l atene / ttale degli iscritti A.A Fnte: Uffici Erasmus; Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari. I4. Spesa degli atenei e degli enti al diritt all studi a favre della mbilità internazinale degli studenti5 / ttale degli iscritti al nett degli immatriclati A.A Fnte: Minister dell'università e della Ricerca - Uffici di Statistica. Elabrazine su dati Anagrafe Nazinale degli Studenti Universitari; Rilevazine sul Diritt all Studi 2014; Cntribuzine studentesca e degli interventi delle università a favre degli studenti 2014 Gli atenei statali sn stati suddivisi in cinque gruppi sulla base del numer di iscritti nell A.A desunt dall elabrazine cndtta dall Uffici di statistica del Minister dell Università e della Ricerca su dati Anagrafe Nazinale degli Studenti Universitari. I gruppi sn stati individuati mediante i seguenti criteri: - fin a iscritti : PICCOLI ; - da a : MEDI ; - da a : GRANDI ; - ltre : MEGA - Plitecnici Gli atenei nn statali sn stati suddivisi in tre gruppi sulla base del numer di iscritti nell A.A I gruppi sn stati individuati mediante i seguenti criteri: - fin a iscritti: piccli; - da a : medi; - da a : grandi. Il vt finale è la risultante della media aritmetica dei punteggi di sintesi delle diverse. V = std(s) + std(b) + std(st) + std(w) + std(i) 5 5 Le vci di spesa cnsiderate sn le seguenti: spesa per iscritti nell'istitut cinvlti in scambi internazinali, spesa per iscritti in istituti esteri cinvlti in scambi internazinali press l'istitut, spesa finanziata dall'unine Eurpea da altre istituzini per la mbilità degli studenti. Pagina 10 di 10