L impact factor. L IF relativo ad un determinato anno può dunque essere calcolato solo nell anno successivo a quello di riferimento.

Transcript

1 L impact factor L idea dell impact factor (IF) è di Eugene Garfield, chimico, che a metà degli anni Cinquanta del secolo scorso, forte della frequentazione di ambienti scientifici, riuscì a dare una risposta formale al desiderio di quantificare in modo oggettivo il valore di una rivista. L espressione impact factor fu usata per la prima volta da Garfield in un commento pubblicato su Science nel 1955 (accanto, in alto). Una delle ragioni principali per le quali questo indice venne pensato era la volontà di proporre ai responsabili delle biblioteche accademiche un elemento quantitativo utile per decidere a quali periodici abbonarsi (Garfield, 2006). 29

2 L impact factor L IF è calcolato annualmente e riguarda soltanto quelle riviste incluse nei database citazionali della Thomson Reuters (SCI e SSCI). È pubblicato all interno del Journal Citation Report (JCR). L IF è il rapporto tra il numero di citazioni ottenute da una rivista nell anno di riferimento (ad esempio 2012) relative agli articoli pubblicati dalla rivista nei due anni precedenti ( ) e il totale degli articoli pubblicati nello stesso periodo dalla rivista. L IF relativo ad un determinato anno può dunque essere calcolato solo nell anno successivo a quello di riferimento. Citazioni ottenute nel / Articoli pubblicati nel 2010 (120 + Articoli pubblicati nel ) 260 = Impact factor Impact factor Anni precedenti Ò

3 L impact factor Cosa conta di sicuro nella decisione di considerare un articolo nel denominatore? Un titolo dell articolo che sia descrittivo È questa la ragione per cui troviamo nelle riviste di medicina titoli che possono talvolta apparire didascalici, per esempio nell indicare in dettaglio il disegno sperimentale scelto per lo studio. I nomi degli autori È una delle condizioni principali, al punto che fino a qualche anno fa la differenza certa tra item nel denominatore e item nel numeratore era proprio data dalla presenza o meno della firma. Esauriente riassunto (abstract o summary) È un elemento chiave e, se assente nelle riviste il cui full text non è in lingua inglese, impedisce alla rivista di essere considerata per l indicizzazione. Ampiezza sufficiente Gli articoli di ampiezza inferiore alla mezza pagina non sono solitamente considerati coerenti con i dettami della scholarly contribution e, pertanto, non sono considerati nel denominatore. Presenza di un esaustiva bibliografia Un articolo corredato da riferimenti bibliografici esaurienti garantisce che, nella preparazione, gli autori abbiano considerato la letteratura esistente, ponendo così il proprio lavoro nel solco di articoli precedenti curati da altri gruppi di ricerca. Densità dei riferimenti citati Un alto numero di voci citate per singola pagina di testo è considerato un indice di approfondito lavoro di ricerca. (McVeigh e Mann, 2009). 31

4 L impact factor Le probabilità che una rivista abbia un fattore di impatto elevato sul resto della comunità scientifica non sono le stesse per tutte le discipline. Questo dipende da diversi fattori, ma soprattutto dal diverso stile del medical writing che si è andato determinando negli anni nelle differenti discipline accademiche. Altre importanti disomogeneità riguardano la rapidità con cui i nuovi articoli sono citati e la durata media del tempo di vita di un lavoro. Per questa ragione, nel valutare il peso di una rivista è opportuno che i confronti avvengano sempre tra periodici di una stessa materia. 32 Già molti anni fa, infatti, Garfield sosteneva che al fine dei confronti è sempre necessario tenere presente quello che definiva il citation potential, vale a dire il numero medio di riferimenti inseriti in ciascuna pagina delle diverse riviste. L esempio classico riguardava la Matematica che, in media, ricorreva a 30 citazioni per pagina contro le 15 della Biochimica.

5 Impact Factor Normalizzato (NIF) Per ovviare al problema del confronto tra IF di riviste appartenenti a discipline diverse sono stati proposti diversi metodi per normalizzare il dato. Alcuni esempi: 1. Rapporto tra IF della rivista e la media degli IF delle riviste del medesimo settore disciplinare. NIF = JIF/SCIF NIF = IF normalizzato di un periodico in un determinato anno JIF = IF di un periodico in un determinato anno SCIF = media degli IF della Subject Category di appartenenza del periodico. Journal of Allergy and Clinical Immunology Disciplina di afferenza = Allergy IF (2011) = 11,003 Media degli IF delle riviste della disciplina Allergy 2,486 NIF = 11,003/2,486 = 4, Prodotto dell IF per l Impact Factor Normalizzato costante. NIF = IF x NIF constant Come si calcola l Impact Factor Normalizzato costante NIF constant = TCB/TArB TCD/TArD TCB = Totale delle citazioni ricevute da tutte le riviste di ambito biomedico in JCR in un dato anno. TArB = totale degli articoli pubblicati da tutte le riviste di ambito biomedico in JCR in un dato anno. TCD = totale delle citazioni delle riviste afferenti a una particolare disciplina in JCR in un dato anno TArD = totale degli articoli pubblicati dalle riviste afferenti a una particolare disciplina in JCR in un dato anno. (Owlia et al., 2011) 33

6 34 Impact Factor Normalizzato (NIF) 3. Si fissa a 10 il valore più alto di IF normalizzato per ogni categoria di periodici. È stato scelto il valore 10 perché generalmente gli IF dei periodici appartenenti alla scienza e tecnologia variano da 0 a 20; il valore 10 risulta quindi essere la giusta via di mezzo. Inoltre, utilizzando il valore 10 per normalizzare l IF, si ottengono valori confrontabili con i valori dell IF originario. La formula per determinare l IF normalizzato di un periodico è la seguente: NIF = IF x m NIF = IF normalizzato di un periodico in un determinato anno IF = IF di un periodico nello stesso anno m = moltiplicatore (10/IF) si ottiene dividendo l IF più alto tra i periodici nella specifica categoria per 10. (Sean, 1992) La seguente tabella mostra come le tre riviste, prime nell ambito delle rispettive Subject Category, non siano raffrontabili in termini di IF mentre risultano equiparate in termini di NIF. Titolo IF NIF Annal of Surgery 7,492 10,000 Annals of Emergency 4,133 10,000 Medicine Journal of Allergy and Clinical Immunology 11,003 10,000

7 Impact Factor Normalizzato (NIF) 4. Un altra modalità di calcolo dell IF normalizzato è proposta dal Ministero della Salute per l assegnazione dei fondi agli Istituti di Ricovero e Cura a Carattere Scientifico TIP: Dove trovare il quartile di appartenenza in JCR Circolare Ministero della Salute 30 maggio 2002 Per gli IRCCS I - Il processo di normalizzazione dell IF definisce 6 classi di riferimento, l appartenenza alle quali determina l attribuzione di uno specifico punteggio. Per ogni disciplina sono stati calcolati dei quartili (in riferimento al valore dell IF). L IF grezzo di una rivista che appartiene al quartile inferiore si normalizza con il valore 1. L IF grezzo di una rivista che appartiene al secondo quartile si normalizza con il valore 2. L IF grezzo di una rivista che appartiene al terzo quartile si normalizza con il valore 4. L IF grezzo di una rivista che appartiene al quartile superiore si normalizza con il valore 6. L IF grezzo di una rivista con valore 7 e 12 si normalizza con il valore 8. L IF grezzo di una rivista con valore 12 e 15 si normalizza con il valore 10. L IF grezzo di una rivista con valore >15 si normalizza con il valore 15. Gli articoli pubblicati su riviste non impattate otterranno ciascuno il valore 0,1. 35

8 36 Impact factor: un indicatore messo in discussione Uno dei motivi per i quali l IF è discusso riguarda i criteri di inclusione del tipo di articolo nel denominatore della frazione che origina il valore. La corrispondenza, le lettere al Direttore, i commenti, gli editoriali, le interviste, le notizie, I necrologi, le recensioni non sono considerati come articoli pubblicati nel corso dei due anni precedenti. Eppure, questo genere di contenuto può essere citato in altri articoli e può dunque contribuire alla crescita del numeratore. È dunque evidente che, agendo su questa leva (pubblicare un minor numero di original articles a vantaggio di testi di commento), le riviste possono quantomeno cercare di incrementare il proprio IF a prescindere dalla qualità dei contenuti pubblicati. In generale, ciò che è stato più volte oggetto di polemica nei confronti degli amministratori dell IF, è la relativa mancanza di trasparenza nella assegnazione del codice di pubblicazione, che in certi casi può portare a distorsioni dovute ad un eccesso di soggettività nella catalogazione degli articoli. Durante una confronto con Thomson Scientific su quale tipo di articolo in PLoS Medicine venisse reputato citabile dalla compagnia, fu chiaro che il processo che determinava l impact factor di un giornale fosse non scientifico e arbitrario (The PLoS Medicine Editors, 2006).

9 Impact factor: un indicatore messo in discussione I direttori delle riviste usano spesso l IF per sottolineare la performance delle proprie creature. È comprensibile, come lo è l entusiasmo dei loro editori che garantiscono all IF un evidenza proporzionale all ampiezza del fattore sui siti web e sui materiali promozionali indirizzati ai bibliotecari e agli autori potenziali. Ugualmente non giustificato è l uso dell IF per dare un idea quantitativa del prestigio di un autore che dovrebbe piuttosto essere determinata attraverso l uso di altri specifici strumenti. A ben vedere, l impatto di una rivista può derivare anche da: studi manipolati o fraudolenti inizialmente citati per il clamore suscitato dai risultati e successivamente diventati dei classici della malpractice editoriale; studi sperimentali di scarso valore il cui impatto è enfatizzato dalla ampia e capillare circolazione di reprint sponsorizzati; articoli che, recando la firma di un numero sproporzionato di autori, si giovano della diffusa pratica della self-citation. Se l impact factor è un valido indice della notorietà di una rivista, non si può dire che esso sia un indice altrettanto valido per il giudizio sul valore scientifico di un lavoro, di un autore e di una struttura: giudizio affidato al tempo, il grande scultore, che incide nel marmo pochi lavori a decennio, e se ne frega dell impact factor. Eugenio Picano 37

10 38 Impact factor: un indicatore messo in discussione I 10 principali modi per manipolare l IF (Falagas e Alexiou, 2008): 1. Richiedere agli autori, al momento della revisione dell articolo, l inserimento di voci bibliografiche tratte dal giornale stesso. 2. Inserire nel corpo dell articolo delle sezioni nelle quali viene fatto il punto su ciò che la rivista stessa ha pubblicato negli anni immediatamente precedenti sullo stesso argomento. 3. Gonfiare le auto-citazioni grazie alla pubblicazione di molti editoriali e di commenti dei lettori su articoli usciti. 4. Aumentare il numero degli articoli che, non andando ad alimentare il denominatore, possono comunque contribuire al numeratore grazie alle citazioni ottenute. 5. Pubblicare molte rassegne (il tipo di articolo più citato) a discapito degli articoli originali e, soprattutto, dei casi clinici (case report). 6. Rifiutare gli studi con risultati negativi, a prescindere dalla loro qualità. 7. Rifiutare studi che confermano dati già esistenti (confirmatory studies). 8. Favorire la pubblicazione di studi di gruppi multicentrici o, comunque, che recano la firma di molti autori. 9. Attrarre la collaborazione di studiosi di chiara fama e accettare i loro lavori senza prestare particolare attenzione alla qualità dei contenuti. 10. Pubblicare articoli che affrontano hot topics di attualità a prescindere dal rilievo clinico. Fairness and equality in scientific publishing means that all research work submitted to a journal be treated by the editors and reviewers on its own, and that the referee s judgment not be unduly biased by the author s reputation. Matthew E. Falagas, Vangelis G. Alexiou

11 Impact factor: un indicatore messo in discussione Al riguardo, diversi studi recenti, tra cui uno coordinato da John Ioannidis (Ioannidis et al., 2010) (tra i ricercatori che con maggiore continuità si dedicano alla Journalology, come la battezzò il direttore del BMJ Stephen Lock), hanno sottolineato delle evidenze importanti: gli studi clinici che per primi studiano un problema spesso non sono rappresentativi e si rivelano fuorvianti; un quarto dei risultati presentati nei più citati articoli originali pubblicati su riviste ad alta visibilità e relativi all efficacia di interventi sanitari è successivamente contraddetto o ridimensionato; il ritardo con cui i risultati positivi di uno studio sono smentiti da una ricerca che si conclude con risultati negativi si misura in diversi anni più che in mesi; la smentita di quanto concluso da una ricerca è sempre più frequente giunga da una revisione sistematica di buona qualità, ma anche in questo caso possono passare anni prima che si arrivi a evidenze certe di non efficacia o di danno. 39