VQR Riassunto delle procedure per la (auto)valutazione. A. F. Lanza, L. Mangano, M. E. Palumbo

Transcript

1 VQR Riassunto delle procedure per la (auto)valutazione A. F. Lanza, L. Mangano, M. E. Palumbo

2 Classificazione dei prodo= I prodo= sono classifica? in due grandi?pologie: Prodo= non bibliometrici (disposi?vi, sodware, banche da?, mostre [incluse inizia?ve di divulgazione scien?fica], etc.); Ques? prodo= saranno valuta? da un revisore umano (referee), sulla base delle informazioni che forniamo con la scheda del prodono caricata sul sito della VQR; Prodo= bibliometrici (ar?coli su rivista, review, capitoli di volumi, etc.); Ques? prodo= saranno valuta?, all incirca nell 80-85% dei casi, con un algoritmo bibliometrico automa=co.

3 Classi di merito Classe A: Eccellente [top 10% della distribuzione mondiale nel caso dei prodo= biblio]; Classe B: Elevato [10%- 30%]; Classe C: Discreto [30%- 50%]; Classe D: AcceNabile [50%- 80%]; Classe E: Limitato [sono 80%]; Trovate la definizione dell insieme sta?s?co di riferimento e della metrica per stabilire le classi nel documento del GeV 02 (Scienze fisiche): hnp:// Al fine di determinare la classe di merito, si considereranno per ciascun prodono: Originalità; Rigore metodologico; ImpaNo anestato o potenziale.

4 Info per la valutazione biblio Si potrà scegliere tra due database bibliometrici: ISI Web of Science (WoS) e Scopus dell Elsevier; Ciascun addeno deve specificare la categoria scien,fica con cui desidera sia valutato il prodono che conferisce: Essa è chiamata SC (Science Category) in WoS e ASJC (All Science Journal Classifica?on) in Scopus; Nel caso di Scopus, consigliamo la categoria Astronomy and Astrophysics perché la Space and Planetary Science dà un ranking uguale o peggiore (tranne per riviste specialis?che, ad es. Icarus o Meteori?cs and Planetary Science); Ar?coli di argomento tecnologico o informa?co non sono compresi in questa categoria e quindi occorre scegliere per essi la categoria migliore caso per caso; Per ciascuno dei due database (Wos o Scopus), dovremo poi scegliere l indicatore di impano della rivista (Journal Metric o JM): AIS o 5YIF per WoS; IPP o SJR per Scopus; Per una data categoria, ci sono quindi qua@ro possibilità diverse da valutare per ogni dato anno.

5 Si può s?mare la classe di merito? Per i soli prodo= bibliometrici, l ANVUR ha pubblicato le soglie di citazioni necessarie per entrare in ciascuna delle cinque classi di merito, valutate al 15 o8obre 2015; Le soglie effe=ve saranno ricalcolate u?lizzando i database WoS e Scopus al 29 febbraio 2016, ovvero dopo che avremo inserito i nostri prodo=; Inoltre altri parametri dell algoritmo di valutazione saranno modificabili da parte di ANVUR; * Morale della favola: Non si possono prevedere i giudizi di ANVUR, nemmeno in forma sta?s?ca.

6 Che cosa dobbiamo fare Per permenere la valutazione di un dato prodono bibliometrico, ci è richiesto di dichiarare all ano del suo inserimento : Ø categoria scien?fica (SC): consigliamo Astronomy and Astrophysics quando possibile; Ø database di indicizzazione (WoS/Scopus); e Ø indice di impano della rivista (ovvero JM); per WoS: AIS o 5YIF; per Scopus: IPP o SJR. La scelta più conveniente dipende dall anno di pubblicazione.

7 Che cosa abbiamo fano Abbiamo calcolato in automa?co una s?ma delle classi di merito per le diverse combinazioni database/jm, limitatamente alle riviste della SC Astronomy and Astrophysics e ai prodo= Ar?cles ; Per alcune altre riviste, le ho calcolate io a mano; Per le riviste generali, come Nature, Science, Review of Modern Physics, etc., non abbiamo da? ANVUR;

8 Esempio A ciascuno dei colleghi che deve sonoporre prodo= bibliometrici, invieremo queste info: Lanza 2014 MNRAS No. Auth. = 15 CIT_wos = 9 CIT_ads = 15 CIT_sco = 13 WoS_ais = IR WoS_5yf = IR Sco_sjr = A Sco_ipp = A Lanza 2012 MNRAS No. Auth. = 12 CIT_wos = 19 CIT_ads = 27 CIT_sco = 19 WoS_ais = B WoS_5yf = B Sco_sjr = B Sco_ipp = B Lanza 2012 A&A 544 A23 No. Auth. = 1 CIT_wos = 15 CIT_ads = 19 CIT_sco = 16 WoS_ais = B WoS_5yf = B Sco_sjr = B Sco_ipp = B Lanza 2011 A&A 529 A36 No. Auth. = 2 CIT_wos = 26 CIT_ads = 39 CIT_sco = 10 WoS_ais = B WoS_5yf = B Sco_sjr = C Sco_ipp = C Lanza 2013 A&A 557 A31 No. Auth. = 1 CIT_wos = 10 CIT_ads = 15 CIT_sco = 11 WoS_ais = B WoS_5yf = B Sco_sjr = C Sco_ipp = C Lanza 2012 A&A 547 A37 No. Auth. = 2 CIT_wos = 12 CIT_ads = 16 CIT_sco = 13 WoS_ais = C WoS_5yf = C Sco_sjr = B Sco_ipp = C Lanza 2014 MNRAS No. Auth. = 2 CIT_wos = 4 CIT_ads = 7 CIT_sco = 3 WoS_ais = IR WoS_5yf = IR Sco_sjr = IR Sco_ipp = IR Ciascuno è invitato a controllare che siano correne ed a scegliere i prodo= migliori da sonoporre,?picamente i primi tre, avendo cura di selezionare la combinazione database/jm più favorevole; Le tabelle ANVUR si trovano in formato Excel su nostro sito Anonymous FTP, sonodirenorio /VQR , suddivise in due sonodirenori per WoS e Scopus; Per le riviste che non sono coperte dalla nostra analisi, la classe indicata è NF ; Lavori con troppe citazioni (o troppo poche) vengono invia, ad un referee; essi sono indica? con IR e sono concentra? nell anno di pubblicazione 2014;

9 Conclusioni Vi invi?amo a controllate la classificazione dei vostri ar?coli e a segnalarci se ne abbiamo dimen?cato qualcuno; A@enzione: le soglie indicate nelle tabelle possono cambiare (probabilmente aumentare), quindi la s?ma che onerrete è, in generale, per eccesso; anen? quindi ai lavori con valori prossimi alle soglie; I lavori pubblica? nel 2014 vanno quasi sempre in IR; prestate quindi molta anenzione a questo caso e, se possibile, sos?tuiteli con lavori degli anni preceden? [di solito, i referee sono più ca=vi dell algoritmo bibliometrico]; Noi vi proporremo di inserire i primi tre ar?coli della nostra lista; fateci sapere se non siete d accordo; Se avete dubbi, problemi o domande, non esitate a contanarci.