SISTEMI BIBLIOMETRICI DI SUPPORTO ALLA SELEZIONE DEI PRODOTTI PER LA VQR-ANVUR

Transcript

1 SISTEMI BIBLIOMETRICI DI SUPPORTO ALLA SELEZIONE DEI PRODOTTI PER LA VQR-ANVUR Giovanni Abramo CNR-IASI e Laboratorio di Studi sulla Ricerca e il Trasferimento Tecnologico Università degli Studi di Roma Tor Vergata Dipartimento di Ingegneria dell Impresa

2 I criteri base di valutazione VQR-ANVUR Combinazione citazioni-if Prodotti : Rango percentile per citazioni, rispetto a quelle di tutti gli articoli dello stesso anno e subject category. Prodotti : Rango percentile per IF di tutte le riviste della stessa subject category 2

3 Il Sistema Federico II Processo: consultazione on line base dati WoS Prodotti di ricerca: articoli, review, letter e conference proceeding censiti in Web of Science di Thomson Reuters: base dati SCI-E (Science Citation Index Expanded); SSCI (Social Science Citation Index); A&HCI (Arts and Humanities Citation Index); CPCI (Conference Proceedings). Data d osservazione delle citazioni: 26/3/2012. Individuazione delle soglie: per ciascun anno, document type e subject category (o gruppo). Aree Disciplinari: 2-9 3

4 ORP: il campo d osservazione Istituzioni: tutte le Università e gli enti pubblici di ricerca (EPR) italiani. Periodo d osservazione: Prodotti di ricerca: article, review, letter e proceedings paper in Web of Science di Thomson Reuters: base dati SCI- E (Science Citation Index Expanded); SSCI (Social Science Citation Index); A&HCI (Arts and Humanities Citation Index); e CPCI (Conference Proceedings). Dimensioni: circa riviste; pubblicazioni; proceeding; autori ( universitari). Settori: tutte le 246 subject categories ISI, tutti i 370 settori universitari (scientifico-tecnologici, economico-sociali e artistico-umanistici); 14 aree disciplinari. 4

5 Il processo di selezione dei migliori prodotti Di quali strumenti oggettivi dispone il ricercatore/la struttura a supporto della selezione dei migliori prodotti da sottomettere al VQR? Il confronto delle citazioni, per caso? Supponiamo che il ricercatore X debba selezionare 2 prodotti tra i 5 seguenti 5

6 ORP a supporto degli atenei/epr nel processo di selezione VQR Le migliori pubblicazioni del ricercatore X di Scienze Biologiche di UNIalpha Titolo Riferimenti Settore Citazioni Evolution of yolk androgens in birds: AMERICAN NATURALIST. Vol Development, coloniality, and sexual ECOLOGY , n. 6, pp dichromatism Ecological conditions during winter predict arrival date at the breeding quarters in a trans-saharan migratory bird ECOLOGY LETTERS. Vol 7, n. 1, pp ECOLOGY 26 Consequences of prenatal androgen exposure for the reproductive performance of female pheasants PROCEEDINGS OF THE ROYAL SOCIETY B-BIOLOGICAL SCIENCES. Vol 274, n. 1606, pp BIOLOGY 19 Maternal effects and the evolution of brain size in birds: Overlooked developmental constraints Protandry and sexual dimorphism in trans- Saharan migratory birds NEUROSCIENCE AND BIOBEHAVIORAL REVIEWS. Vol 31, n. 4, pp BEHAVIORAL ECOLOGY. Vol 15, n. 4, pp BEHAVIORAL SCIENCES 17 ZOOLOGY 9 6

7 Il processo di selezione dei migliori prodotti In realtà il semplice confronto delle citazioni potrebbe condurre a scelte errate: il numero di citazioni dipende infatti dall anno di pubblicazione e dall intensità di citazione nel settore in cui ricade la pubblicazione. Si potrebbero però normalizzare le citazioni per la media del settore nell anno di pubblicazione 7

8 ORP a supporto degli atenei/epr nel processo di selezione VQR Le migliori pubblicazioni del ricercatore X di Scienze Biologiche di UNIalpha Titolo Riferimenti Settore Citazioni Citaz norm. Evolution of yolk androgens in birds: Development, coloniality, and sexual dichromatism Ecological conditions during winter predict arrival date at the breeding quarters in a trans-saharan migratory bird AMERICAN NATURALIST. Vol 169, n. 6, pp ECOLOGY LETTERS. Vol 7, n. 1, pp ECOLOGY ECOLOGY Consequences of prenatal androgen exposure for the reproductive performance of female pheasants PROCEEDINGS OF THE ROYAL SOCIETY B-BIOLOGICAL SCIENCES. Vol 274, n. 1606, pp BIOLOGY Maternal effects and the evolution of brain size in birds: Overlooked developmental constraints Protandry and sexual dimorphism in trans- Saharan migratory birds NEUROSCIENCE AND BIOBEHAVIORAL REVIEWS. Vol 31, n. 4, pp BEHAVIORAL ECOLOGY. Vol 15, n. 4, pp BEHAVIORAL SCIENCES ZOOLOGY

9 Il processo di selezione dei migliori prodotti La normalizzazione è un passo in avanti, ma non ancora sufficiente per ottimizzare la selezione. Solo confrontando la pubblicazione con tutte le altre dello stesso settore e anno, si può avere un idea della qualità relativa di ciascuna, secondo i criteri ANVUR 9

10 ORP a supporto degli atenei/epr nel processo di selezione VQR Le migliori pubblicazioni del ricercatore X di Scienze Biologiche di UNIalpha Titolo Riferimenti Subject Cat. Citazioni Citaz norm. Percent. Evolution of yolk androgens in birds: AMERICAN NATURALIST. Vol Development, coloniality, and sexual ECOLOGY , n. 6, pp dichromatism Ecological conditions during winter predict arrival date at the breeding quarters in a trans-saharan migratory bird ECOLOGY LETTERS. Vol 7, n. 1, pp ECOLOGY Consequences of prenatal androgen exposure for the reproductive performance of female pheasants PROCEEDINGS OF THE ROYAL SOCIETY B-BIOLOGICAL SCIENCES. Vol 274, n. 1606, pp BIOLOGY Maternal effects and the evolution of brain size in birds: Overlooked developmental constraints Protandry and sexual dimorphism in trans- Saharan migratory birds NEUROSCIENCE AND BIOBEHAVIORAL REVIEWS. Vol 31, n. 4, pp BEHAVIORAL ECOLOGY. Vol 15, n. 4, pp BEHAVIORAL SCIENCES ZOOLOGY

11 Il processo di selezione dei migliori prodotti La posizione nella classifica settoriale di ciascuna pubblicazione, espressa in percentile, ci informa che la prima (95,1) ha il 4,9% di pubblicazioni nello stesso settore e anno con più citazioni; e l ultima (97,5) solo il 2,5%. Entrambe, top 20%, otterrebbero il max punteggio. Lo stesso ragionamento può essere ripetuto con l IF della rivista. A questo punto il ricercatore/la struttura possono effettuare la scelta finale con maggiore cognizione di causa. 11

12 CONFRONTO ORP SISTEMA FEDERICO II ORP vs FEDERICO II +/- Costo diretto - Costi indiretti + Precisione + Grado di copertura (ADU) + Funzionalità + Utilizzo atteso + Probablilità d'errore nell'utilizzo + Ritorno sull'investimento? 12

13 Giovanni Abramo CNR - IASI e Laboratorio di Studi sulla Ricerca e il Trasferimento Tecnologico Università degli Studi di Roma Tor Vergata Dipartimento di Ingegneria dell Impresa Via del Politecnico 1, Roma Tel Fax giovanni.abramo@uniroma2.it 13