gli indicatori bibliometrici -...

Seminario Gli indicatori bibliometrici 2 e 9 luglio 2013

Polo Bibliotecario di Scienze, Farmacologia e Scienze Farmaceutiche

Gli Indicatori Bibliometrici2 e 9 Luglio 2013

Roberta SatoFederico Fogo



La teoria

Bibliometria

Citazioni

Impact factor e gli altri indici ISI

Indici alternativi all’Impact Factor (Eigenfactor, SJR, SNIP)

h-index

Metriche web

Gli strumenti

WoS, Scopus, Scimago, Journal Indicators, PoP

Le applicazioni e le problematiche

Luci e ombre dell’IF

L’uso degli indici nella valutazione della ricerca in Italia (VQR, Abilitazione scientifica nazionale)



Gli indicatori bibliometrici

la teoria



Che cos’è la Bibliometria?

Perché usare la Bibliometria?

La Bibliometria applicata alle riviste: Impact Factor e altro



“The branch of library science concerned with the application of mathematical and statistical analysis to bibliography; the statistical analysis of books, articles, or other publications”Oxford English Dictionary http://digbig.com/5bhbtd

cioè … dati sulle pubblicazioni , o frequenza delle citazioni

CHE COS’E’ LA BIBLIOMETRIA

http://digbig.com/5bhbtd



ancora una definizione per:

Scientometrics is the branch of information science concerned with the application of bibliometrics to the study

of the spread of scientific ideas; the bibliometric analysis of science

Oxford English Dictionary http://digbig.com/5bhbtn

http://digbig.com/5bhbtn



PERCHE’ SI USA LA BIBLIOMETRIA

Si possono trovare risposte ad alcuni quesiti, quali ad esempio:

Quali sono le riviste migliori di una disciplina?

Chi cita miei articoli? Quante citazioni ho ricevuto?

Come si può stabilire l’importanza di un articolo?In quale rivista dovrei pubblicare?



Ma anche per…

Determinare quali siano le riviste più importanti in una determinata area di ricerca

Verificare l’impatto di una ricerca pubblicata

Proporre criteri per le richieste di finanziamento, la ripartizione dei fondi, la carriera professionale



valutazione qualitativa sia con la formula della peer reviewing, (o informed peer reviewers)

valutazione quantitativa che mira ad estrapolare le relazioni quantitative tra i documenti, basandosi sull’analisi quantitativa delle citazioni bibliografiche (indici bibliometrici)

LA VALUTAZIONE DELLA PRODUZIONE SCIENTIFICA



Inoltre,

Ci sono altri criteri quantitativi che possono essere utili per la valutazione, anche se non sono strettamente bibliometrici, come ad es. partecipazioni su invito a convegni, attribuzione di premi e riconoscimenti, sviluppo di software e brevetti




GLI OGGETTI DELLA VALUTAZIONE

L’insieme di pubblicazioni scientifiche di:

Singoli ricercatori (per avanzamento o raggiungimento di una posizione nella carriera o il finanziamento nelle università)

Gruppi di ricercatori (dello stesso dipartimento, scuola/facoltà, università o ente di ricerca)

Riviste scientifiche



Si parte dal presupposto che chi cita riconosca l’eredità di chi lo ha preceduto (paternità intellettuale) e che il numero di citazioni ricevuto da una pubblicazione sia un indicatore del suo impatto sulla comunità scientifica di riferimento




La probabilità di essere citati

1.Si distribuisce nel tempo in modo asimmetrico

2.E’ collegata alla dimensione della comunità scientifica di riferimento (pratiche citazionali diverse)

3.E’ collegata alla prassi redazionale nella disciplina: numero di co-autori, tipologia editoriale (articoli verso monografie), lingua (nazionale o inglese), vita citazionale media delle pubblicazioni

LIMITI DELL’ANALISI CITAZIONALE (1)



4. E’ collegata all’etica citazionale, possibilità di manipolazione strategica delle citazioni

5. E’ collegata alla tipologia di contenuto scientifico, nuovi metodi di indagine e rassegne ricevono più citazioni

6. E’ influenzata dagli errori nelle bibliografie e dalla collocazione editoriale

7. E’ influenzata dalla difficoltà di depurare i dati da omonimie, sinonimie, cognomi e nomi multipli, segno ortografici inclusi nel cognome dell’autore




8. E’ influenzata da citazioni anomale, ad es. citazioni di un articolo fraudolento

9. E’ influenzata dalle «sleeping beauties», pubblicazioni che non hanno ricevuto o hanno ricevuto poche citazioni, proprio per l’originalità dei loro contenuti

E’ evidente che l’uso dell’analisi delle citazioni è solo uno degli indicatori del valore/rilevanza di un prodotto scientifico in un certo arco temporale

Abatemarco Antonio and Roberto dell’Anno. Valutazione della produzione scientifica ed indicatori bibliometrici: quale affidabilità? Un’analisi per l’area economica negli atenei italiani

http://www-3.unipv.it/websiep/2011/201187.pdf




Galimberti, P. Qualità e quantità: stato dell’arte della valutazione della ricerca nelle scienze umane in Italia. JLIS.it vol.3 ,n.1(Giugno/June 2012). DOI: 10.4403/jlis.it-5617

http://leo.cilea.it/index.php/jlis/article/view/5617

INDICATORI BIBLIOMETRICI

Prima generazione Indicatori di base, facili da ottenere da fonti attestate disponibili da decenni

Numero di pubblicazioni, numero di citazioni,metriche dell’impatto della rivista

Seconda generazione Indicatori relativi o normalizzati per area disciplinare

Media di citazione relativa o normalizzata per area disciplinare

Terza generazione Indicatori basati sull’analisi avanzata dei network

Scimago journal rank, indicatori del «prestigio» (più peso a citazioni da una rivista di maggior prestigio)



I più noti sono:

Ranking tools applicati ai periodici (JCR journal impact factor, SCOPUS SNIP, SCImago SJR, PubFocus JR, etc.)

H-index o Hirsch index, usualmente applicato agli autori




Database che misurano l’impatto dei periodici:

Journal Citation Report (ISI)

Scopus

Database (i più usati) per la ricerca delle citazioni:

Web of Science (ISI)

Scopus

Google Scholar




Ci sono molti strumenti per l’analisi dello ‘’journal ranking’’

Ogni strumento si avvale di metriche diverse

Ogni strumento fa riferimento ad un diverso database di periodici

I dati ottenuti per i periodici devono essere comparati solo in riferimento alla stessa disciplina o sottodisciplina

N.B. Attualmente nessuno degli strumenti è in grado di rappresentare in modo adeguato le riviste multidisciplinari

JOURNAL RANKING TOOLS



Base dati di riferimento ---- Journal Citation Reports (JCR) °°

E’ un database a pagamento della ISI, nato nel 1980, che calcola e pubblica l’impact factor annuale dei periodici °° Università di Padova ha accesso al database JCR dal 2000 (IF dal 1996)

L’Impact factor (JIF) per i periodici è un indicatore proposto nel 1963 da Eugene Garfield (ISI-Thomson)Garfield E. The History and Meaning of the Journal Impact Factor. JAMA. 2006;295(1):90-93. doi:10.1001/jama.295.1.90.

IMPACT FACTOR (JIF)



L’impact factor di un periodico è il numero medio di citazioni ricevute in un determinato anno dagli articoli pubblicati in un periodico nei 2 anni precedenti, ad es.

l’impact factor di una rivista nel 2012 verrà così calcolato :

Year 2012 citations to 2011+2010 articles

---------------------------------------------------------- = JIF Total no. of articles published in 2011+2010

CHE COS’E’ L’IMPACT FACTOR (JIF)



Ci sono molte riviste** che non sono incluse nel database della ISI (prive di Impact factor)

Alcune aree disciplinari accettano e assimilano più rapidamente le novità, vedi ad es. le biotecnologie comparate alla matematica pura (introdotto lo 5-Year Impact Factor)

Il fattore di impatto di un periodico non può garantire la qualità scientifica dei singoli articoli pubblicati

Alcuni periodici pubblicano pochi articoli molto citati, questa piccola percentuale di articoli pesa molto sul totale delle citazioni ricevute dal periodico

** Per i criteri di selezione dei periodici per i database ISI WoS, vedi: http://wokinfo.com/media/essay/journal_selection_essay-it.pdf

IMPACT FACTOR: ASPETTI CRITICI (1)



Le rassegne e i periodici che pubblicano principalmente review possono essere molto citati in rapporto a periodici e articoli che pubblicano novità nella ricerca

Le riviste in lingua diversa da quella inglese hanno meno diffusione nel mondo e perciò possono essere meno citate dai ricercatori

Editoriali, lettere, abstract di meeting e convegni non vengono conteggiati come articoli

IMPACT FACTOR: ASPETTI CRITICI (2)

http://admin-apps.webofknowledge.com/JCR/JCR?RQ=RECORD&rank=1&journal=DRUG+AGING



5-Year Journal Impact Factor JIF calcolato per un intervallo di 5 anni

Immediacy indexIndica la velocità con cui un periodico viene citato. Calcolato come rapporto tra il numero di citazioni ricevute di articoli pubblicati in un determinato anno e il numero totale di articoli pubblicati in quello stesso anno

Cited Half LifeNumero di anni a partire dall’attuale JCR che raccolgono il 50% delle citazioni totali ricevute dalla rivista nell’anno corrente. E’ un indice della «vitalità» del periodico nel tempo

Eigenfactor Score e Author Influence Score (aggiornati al 2012)

ALTRI INDICATORI PER I PERIODICI PRESENTI IN JCR



E’ un progetto non commerciale, sponsorizzato dall’Università di Washington

free nel sito http://www.eigenfactor.org/

legame con i database ISI JCR; dal 2007 gli indici sono presenti anche in JCR

adotta un modello analogo al sistema di ranking di Google (weighted citation): peso maggiore ad articoli citati da articoli molto citati (articoli citati da riviste prestigiose)

riferimento temporale delle citazioni esteso a 5 anni

Nel sito sono presenti anche dati su: analisi costi/efficacia periodici OA, di genere ecc. ed analisi grafiche dei dati

Eigenfactor.org



Eigenfactor.org fornisce 2 indici: Eigenfactor Score (EF) misura il numero delle volte che gli articoli pubblicati da un periodico (nei precedenti 5 anni) sono stati citati in JCR di un certo anno (**)

Misura il valore totale di impatto e il prestigio di un periodico

Esclude le autocitazioni (tra articoli di una stessa rivista)

Considera anche le citazioni da tesi e giornali (differenze tra eigenfactor e JCR)

Considera l’importanza delle riviste («highly ranked journals») da cui provengono le citazioni

Limiti: dipendenza dai database ISI; ritardo rispetto a JCR (disponibili indici 2011)

(**) punteggi calcolati con valore di riferimento 100, somma totale degli EI di tutte le riviste in JCR



Eigenfactor.org fornisce 2 indici:

Article Influence Score (AI) analogo allo IF misura l’influenza media degli articoli di una rivista nei 5 anni dopo la pubblicazione.

E’ un valore ottenuto dividendo lo Eigenfactor score per il numero di articoli pubblicati dalla rivista. Il valore viene poi normalizzato, in modo tale che la somma totale di tutti gli articoli da tutte le riviste sia 1.00

Nel 2011, la rivista REVIEWS OF MODERN PHYSICS ha il valore più alto: AI=28.9002, cioè che in media un articolo in questa rivista ha 28 volte l’influenza di una rivista media in JCR



Indicatore bibliometrico che valuta le riviste costruito sui dati citazionali contenuti nel database Scopus

E' considerato una Prestige measure come EigenFactor e Article Influence Score di ISI

E' aggiornato due volte l'anno

E' stato introdotto nel 2009(Gonzalez-Pereira B, Guerrero-Bote V, and Moya-Anegon F,. The SJR indicator: A new indicator of journals' scientific prestige. ArXiv e-prints 2009)

SJR: SCIMAGO JOURNAL RANKING



E’ simile all’impact factor (citazioni/documento), ma sono introdotti dei correttivi

le citazioni non sono considerate tutte uguali: le citazioni agli articoli della rivista sono «pesate» di più o di meno a seconda della loro provenienza (le citazioni da riviste più prestigiose (SJR alto) contano di più, le citazioni da riviste meno prestigiose (SJR basso) pesano di meno) [sviluppo dell’algoritmo Google PageRank]

sono incluse nel calcolo le citazioni di un anno a lavori pubblicati dalla rivista nei tre anni precedenti




è presente un limite per le autocitazioni (all’interno della rivista (33% max.)

le citazioni sono «pesate» di più o di meno a seconda della disciplina (di più in discipline con bassa frequenza citazionale, di meno in discipline con alta fequenza citazionale)

nei calcoli sono considerati solo lavori peer review presenti in pubblicazioni peer reviewcioè sono considerati solo citazioni a e da articles, conference papers, reviews




E' presente in Scopus (strumento Analytics)

E' liberamente accessibile in:

Scimago http://www.scimagojr.com/


http://www.scimagojr.com/



E' un indicatore bibliometrico che corregge le differenze nella frequenza citazionale delle diverse discipline

è il rapporto tra la media delle citazioni per articolo di una rivista (impatto, cioè numero di citazioni / numero di documenti) ed il potenziale citazionale della disciplina (es. è alto per le scienze biologiche, basso per le scienze matematiche)

Ideato da Henk Moed (Università di Leiden)

Moed, H. F. (2010). Measuring contextual citation impact of scientific journals. Journal of Informetrics, 4(3), 265-277

SNIP: SOURCE NORMALIZED INDEX PER PAPER



impattopotenziale citazionale della

disciplina


SNIP =



è costruito (come SJR) sui dati citazionali di Scopus

sono considerate le citazioni di un anno a lavori pubblicati dalla rivista nei tre anni precedenti

le citazioni considerate provengono da lavori peer review (article, review, conference paper) presenti in pubblicazioni peer review e vanno a citare lavori peer review

non vengono eliminate le autocitazioni




è presente in Scopus (strumento Analytics)

è accessibile liberamente in CWTS Journal Indicatorshttp://www.journalindicators.com/


http://www.journalindicators.com/



Introdotto nel 2005

Valuta la performance di un autore basandosi sul numero di citazioni avute e sul numero di lavori pubblicati

E' stato successivamente applicato a riviste, gruppi di ricerca, istituzioni, nazioni (vedi Scimago)

E’ sempre un numero intero

Hirsch, J. E. (2005). An index to quantify an individual's scientific research output. Proc.Nat.Acad.Sci., 46, 16569.

INDICE DI HIRSCH (h-index)



Un autore ha un h-index uguale a n se ha almeno n lavori pubblicati che hanno ottenuto almeno n citazioni

Es. ho un h-index uguale a 12: significa che ho 12 pubblicazioni che hanno avuto almeno 12 citazioniHo fatto 50 pubblicazioni: 12 hanno ricevuto 12 o più citazioni, le restanti 38 hanno ricevuto meno di 12 citazioni

L’h-index di un autore non può mai essere superiore al numero delle sue pubblicazioni




Avvantaggia gli autori che associano produttività (numero di articoli pubblicati) e impatto sulla comunità scientifica (citazioni

avute): l’autore di molti articoli poco citati ha un h index altrettanto basso dell’autore che pubblica solo occasionalmente degli articoli

molto citati

L’h-index tende a penalizzare gli autori giovani (con poche pubblicazioni anche se magari molto citate) rispetto agli autori con

maturità accademica




altre caratteristiche:

può solo crescere o tutt’al più stabilizzarsi ad un valore costante

non tiene conto di lavori ad alto impatto (molto citati), se sono sporadici

non tiene conto di lavori poco citati, se non sono la maggioranza




Robert Lefkowitz (1943-h index = 108Nobel Chimica 2012

Dan Shechtman (1941-h index = 11Nobel Chimica 2011

Serge Laroche (1944-h index = 26Nobel Fisica 2012

Adam Riess (1969-h index = 52Nobel Fisica 2011

da Scopus




g-indexvariante dell'h-index che pesa maggiormente i lavori più citati

contemporary h-index (hc-index)variante dell'h-index che pesa maggiormente i lavori più recenti. Viene calcolato come l'h-index considerando il numero di lavori pubblicati e il corrispondente numero di citazioni corretto in questo modo:

VARIANTI DELL'INDICE DI HIRSCH

numero reale di citazionidel lavoro

X4

numero di anni trascorsi dalla pubblicazione del lavoro



ALTRI INDICATORI

numero totale di citazioni per autore

numero di citazioni per articolo

media delle citazioni per articolo

valori recuperabili da Scopus o da Web of Science



Che cos’è Altmetrics?

E’ un’alternativa alla bibliometria tradizionale. Misura l’impatto degli articoli rilevando dati dai social media, da siti e risorse web

http://altmetrics.org/about/

Altmetrics: a manifesto http://altmetrics.org/manifesto/

METRICHE NEL WEB


Polo Bibliotecario di Scienze, Farmacologia e Scienze FarmaceutichePolo Bibliotecario di Scienze, Farmacologia e Scienze Farmaceutiche

Altmetric.com in Scopus e PLOS

Altmetric.com in Scopus (Hub, Sciencedirect)

E’ un’applicazione di Scopus, che recupera link agli articoli scientifici da Twitter, Google, Facebook, dalla blogosphera scientifica, dai giornali e riviste, dagli strumenti reference management (Mendeley, CiteUlike) e li aggiunge ai risultati della ricerca o agli articoli full text visualizzati da SciVerse

Altmetrics.com è usato anche da Public Library of Science (PLoS): PLOS Impact Explorer



Altre applicazioni e software :

Impactstory un’applicazione open source per gli articoli nel web (Twitter, Mendeley, Delicious, CiteUlike, F1000; Slideshare, ecc.)

http://impactstory.org/

e altre ancora dal sito:

Almetrics.org

http://altmetrics.org/tools/

Bibliografia

Finbar Galligan, Sharon Dyas-Correia. Altmetrics: Rethinking the Way We Measure. Serials Review, Vol. 39, Issue 1, March 2013, Pages 56-61 http://dx.doi.org/10.1016/j.serrev.2013.01.003

Oxford LibGuides.Guides Directory .Bibliometrics & Citation Tracking. http://ox.libguides.com/bibliometricsRobin Chin Roemer and Rachel Borchardt. From bibliometrics to altmetrics: A changing scholarly landscape. C&RL News Vol.. 73, Issue 10, November 2012 :596-600 http://crln.acrl.org/content/73/10/596.full




gli strumenti



GLI STRUMENTI

Journal of Citation Reports

Scopus

Web of Science

Scimago (http://www.scimagojr.com/)

CWTS Journal Indicators (http://www.journalindicators.com/)





GLI STRUMENTI

Publish or Perish: software da scaricare in locale.Usa le citazioni indicizzate da Google Scholar e Microsoft Academic Search.Restituisce h-index, g-index, contemporary h-index ed altri parametri legati all’autore

download: http://www.harzing.com/pop.htm

add-on di Firefox per h index (Scholar h-Index Calculator)

http://www.harzing.com/pop.htm



GLI STRUMENTI

dal modulo dei servizi Aire SFX è possibile accedere al valore dell'IF o dello SJR della rivista in questione



GLI STRUMENTI ED I PARAMETRI CALCOLATI

JCRIFIF a 5 anniEigen FactorArticle Influence Score

Scimago SJRh index di riviste e nazioni

CTWS Journal Indicators SNIPraw impact per paper (RIP)

Scopus

SJRSNIPh indexcitazioni totali per autorecitazioni totali per articolo

Web of Science

h indexcitazioni totali per autorecitazioni totali per articolomedia delle citazioni per articolo



Analytics: per visualizzare gli indicatori e le misure relativi alle

riviste

SCOPUS E GLI INDICATORI DELLE RIVISTE



Journal Analyzer permette la comparazione fino a 10 riviste

SCOPUS ANALYTICS



SCOPUS ANALYTICS: JOURNAL ANALYZERPARAMETRI DELLA RIVISTA CALCOLATI

SJR

SNIP

numero totale di citazioni fatte nell'anno considerato a tutte le annate precedenti della rivista

numero di documenti nell'anno considerato

percentuale di documenti non citati nell'anno considerato

per avere una visione d'insieme dei valori di SJR e SNIP all’interno delle categorie disciplinari (rankings) è necessario consultare i relativi siti (Scimago e CTWS Journal Indicators)



parametri

SCOPUS ANALYTICS : JOURNAL ANALYZER



SCOPUS: PARAMETRI RELATIVI ALL'AUTORE

da Search scegliere la tab Author search



oppure ci si arriva cliccando sul nome nei record bibliografici




h index

documents: tutte le pubblicazioni dell'autore

references: tutti i lavori citati dall'autore

citations: tutti i lavori che citano l'autore (dal 1996)





Author Evaluator permette una visualizzazione grafica dei parametri dell'autore



SCOPUS: PARAMETRI RELATIVI ALL'AUTORE. OMONIMIE

Find potential author matches: recupera eventuali autori omonimi



SCOPUS: PARAMETRI RELATIVI ALL'AUTORE. OMONIMIE

View grouped with author: ricalcola i parametri fondendo i valori dei profili selezionati

Request to merge with author: l'autore può richiedere a Elsevier una fusione definitiva dei profili che gli appartengono




l'autore ha la possibilità di mandare a Scopus un feedback a percorso

guidato e chiedere l'inclusione nel suo profilo di lavori che non gli sono

riconosciuti o viceversa l'eliminazione dal profilo di lavori non suoi



SCOPUS: CITAZIONI PER ARTICOLO

citation overview lets you understand and compare the trend of citations to one or more works over the years,

that is the success (or the unsuccess) of a research work

citazioni ricevute dal lavoro dal momento della sua

pubblicazione ad oggi



selezionando uno o più record bibliografici è possibile verificare e confrontare l'andamento delle

citazioni nel corso degli anni

SCOPUS: CITATION OVERVIEW



WEB OF SCIENCE: PARAMETRI RELATIVI ALL'AUTORE

1. scegliere Author Search e inserire cognome e iniziale del nome




2. se è il caso, scegliere l'area disciplinare

3. Finish Search per dare il via alla ricerca




4. ottenuti i risultati creare un Citation reports




•sum of the times cited = citazioni all'autore•citing articles = citazioni all'autore con record in WoS•average citations per item = media delle citazioni (sum of the times cited/items)•h index



H INDEX IN SCOPUS E WEB OF SCIENCE

In Scopus è costruito con dati bibliografici a partire dal 1996

In Web of Science è costruito con i dati bibliografici a partire dal 1985

La differenza si ripercuote sui ricercatori con carriera accademica iniziata prima del 1996: il loro h index può essere marcatamente inferiore in Scopus rispetto a Web of Science



H INDEX E ALTRI PARAMETRI DELL'AUTORE IN SCOPUS E WEB OF SCIENCE

Scopus permette un'identificazione precisa dei parametri relativi all'autore grazie al profilo autore

Web of Science non permette un'dentificazione sempre precisa a causa delle possibili omonimie che non vengono risolte dall'indice



Publish or Perish vs Scopus/WoS

Publish or Perish può avere allo stato attuale solo un limitato uso come affidabile strumento bibliometrico

citazioni provenienti da fonti non sempre accademiche o scientifichenessuna certezza sull’insieme delle fonti analizzateduplicazione delle citazionierrori nei dati citazionali«rumore» nei risultati

PUBLISH OR PERISH



ha il vantaggio di calcolare, oltre all'h-index, anche

g-indexhc-index (contemporary h-index)individual h-index

individual h-index = variante dell'h-index che tiene in considerazione la questione della coauthorship: il numero di citazioni per singolo documento vien diviso per il numero di autori del documento e sui valori così ottenuti si calcola l'h-index

PUBLISH OR PERISH



http://www.scimagojr.com/ (accesso libero)

ranking delle riviste per SJR, h-index ed altri parametri citazionali

comparazione sulla base degli stessi parametri di due o più riviste

classifiche per nazioni

SCIMAGO




SCIMAGO: JOURNAL RANKING

è praticamente l'impact factor su dati Scopus

h-index della rivista

posizionamento della rivista nella

distribuzione per quartili della

classifica SJR



SCIMAGO: JOURNAL RANKING

numero di documenti totali pubblicati dalla rivista e numero di documenti che entrano

nel calcolo di SJR

media del numero di referenze per bibliografia



http://www.journalindicators.com/ (accesso libero)

ranking delle riviste per:

SNIPRIP (raw impact per paper): citazioni fatte in un anno a lavori pubblicati nei tre anni precedenti / numero di lavori pubblicati nei tre anni precedenti). In pratica è un impact factor a tre anninumero di lavori pubblicati nei tre anni precedenti (p)percentuale di autocitazioni

CWTS JOURNAL INDICATORS





le applicazioni e le problematiche



L’impact factor è una “pura” frazione aritmetica: un numeratore ed un denominatore

Per incrementarloo si aumenta il numeratoreo si riduce il denominatore

«QUANDO UNA MISURA DIVENTA UN OBIETTIVO CESSA DI ESSERE UNA BUONA MISURA»



L’editor responsabile della pubblicazione di un articolo chiede all’autore di inserire in bibliografia citazioni alla rivista (self citation)

Aumento della pubblicazione di review articles

Un membro dell'editorial board della rivista A, che è anche un autore, cita la rivista B. In cambio un editor della rivista B, che è anche un autore, cita la rivista A


INCREMENTO DEL NUMERATORE: PRATICHE ABBASTANZA COMUNI



l numero di citable documents (il denominatore) sembrerebbe essere, almeno in alcuni casi, negoziabile tra Thomson Scientific e

l’editore della rivista

Con qualche trucco è possibile «mascherare» i research articles e toglierli dal computo dei citable documents (pubblicazione di research articles senza abstract e/o con blibliografia ridotta: raccolgono citazioni ma non

vengono conteggiati tra i citable documents)

The PLoS Medicine Editors (2006) The Impact Factor Game. PLoS Med 3(6): e291.


DECREMENTO DEL DENOMINATORE



Se i non citable documents (editorials, news, letters, commentaries) non sono conteggiati nel denominatore, le citazioni

che ricevono sono invece conteggiate

.


DECREMENTO DEL DENOMINATORE



L’IMPACT FACTOR E LE REVIEW

Le review sono citate mediamente molto di più dei research article. Questo si ripercuote sull’impact factor di riviste che contengono review o che sono fatte solo di review.

SJR e SNIP non si sottraggono a questa regola e non le sottraggono ai calcoli



MULTIDISCIPLINARY CHEMISTRY JOURNALS: 2012 impact factor

1 Chemical Reviews* 41,298

2 Chemical Society Reviews* 24,892

3 Nature Chemistry 21,757

4 Accounts of Chemical Research* 20,833

5 Nano Today 17,689

6 Advanced Materials 14,829

7 Angewandte Chemie 13,734

8 Nano Letters 13,029

9 ACS Nano 12,062

10 Energy and Environmental Science 11,653

11 Journal of the American Chemical Society 10,677

* riviste formate esclusivamente da review



Aldrichimica Acta ha avuto il fattore d’impatto più alto nella categoria Organic Chemistry Journals dal 2004 al 2011

ORGANIC CHEMISTRY JOURNALS: 2011 impact factor



ORGANIC CHEMISTRY JOURNALS: 2011 impact factor

1 Aldrichimica Acta 16,091

2 Natural Products Reports 9,790

3 Advances in Carbohydrate Chemistry and Biochemistry 7,643

4 Advances in Organometallic Chemistry 7,000

5 Advanced Synthesis and Catalysis 6,048

6 Organic Letters 5,862

7 Biomacromolecules 5,479

8 Bioconjugate Chemistry 4,930

9 Journal of Organic Chemistry 4,450

10 Organometallics 3,963



Due articoli pubblicati dalla rivista nel 2010 sono stati ritirati per violazione delle policies contro le manipolazioni delle citazioni

I due articoli mostravano un evidente intento di manipolare in positivo i valori citazionali di un’altra rivista (Cell Transplantation) includendo nella bibliografia un vasto numero di referenze ad articoli della rivista stessa

http://www.hindawi.com/journals/tswj/2010/463612/abs/(vedere bibliografia in Scopus: DOI 10.1100/tsw.2010.39)

Thomson Reuters ha escluso la rivista dall’edizione 2011 di JCR

IL CASO SCIENTIFIC WORLD JOURNAL (HINDAWI)

http://www.hindawi.com/journals/tswj/2010/463612/abs/



IF 2008 = 2,051 (ottavo nella categoria Crystallography)

IF 2009 = 49,926 (primo nella categoria Crystallography)

IF 2010 = 54,333 (primo nella categoria Crystallography)

IF 2011 = 2,076 (ottavo nella categoria Crystallography)

IF 2012 = 2,244 (settimo nella categoria Crystallography)

IL CASO ACTA CRYSTALLOGRAPHICA A

http://admin-apps.webofknowledge.com/JCR/JCR?RQ=IMPACT&rank=1&journal=ACTA+CRYSTALLOGR+A

http://admin-apps.webofknowledge.com/JCR/JCR?RQ=LIST_SUMMARY_JOURNAL

http://admin-apps.webofknowledge.com/JCR/JCR?RQ=IMPACT&rank=1&journal=ACTA+CRYSTALLOGR+A

http://admin-apps.webofknowledge.com/JCR/JCR?RQ=LIST_SUMMARY_JOURNAL



http://link.springer.com/article/10.1007/s12471-012-0336-0/fulltext.html

Un editoriale di Netherlands Heart Journal di fine 2012 riporta in bibliografia 24 (su 25) referenze ad articoli 2010/2011 della rivista

stessa

citazioni 2012 = 206 (IF 1,411, 77° nella categoria)citazioni 2012 senza l'editoriale = 182 (IF 1,246, 85° nella categoria)

GLI EDITORIALI CHE "POMPANO" L'IF

http://link.springer.com/article/10.1007/s12471-012-0336-0/fulltext.html



Lista di riviste escluse dall’edizione 2012 di JCRhttp://admin-apps.webofknowledge.com/JCR/static_html/notices/notices.htm#editorial_information

per "anomalous citation patterns"

vd. % di self citations di Pain Physician

MANIPOLAZIONI DELL’IMPACT FACTOR

http://admin-apps.webofknowledge.com/JCR/static_html/notices/notices.htm



NEGOZIAZIONI DELL’IMPACT FACTOR

citable doc. 2000 = 504 citazioni 2000 = 7688citable doc. 2001 = 300 citazioni 2001 = 7363citable doc. 2002 = 334 citazioni 2002 = 7231

citazioni 2003 = 7551



NEGOZIAZIONI DELL’IMPACT FACTOR

A fronte di un andamento costante del numero di citazioni a Current Biology negli anni 2001-2003,

c'è un crollo del numero di "citable documents" tra 2002 e 2003 ed una conseguente impennata dell'IF

Current Biology è entrato a far parte dal 2001 di Cell Press, una divisione di Elsevier. Negoziazione?



Ogni ricercatore, associato e ordinario afferente ad un dipartimento ha presentato i suoi tre "migliori" lavori pubblicati nel

periodo 2004-2010

Come sono stati valutati i prodotti?

Metodi bibliometrici, differenti da GEV a GEV

Informed peer review

VALUTAZIONE DELLA QUALITA' DELLA RICERCA (VQR) 2004-2010



GEV Scienze chimicheGEV Scienze biologicheGEV Scienze mediche

numero di citazioni al lavoro (WoS) IF della rivista in cui è pubblicato

GEV Scienze della terranumero di citazioni al lavoro (WoS o Scopus)IF della rivista in cui è pubblicato (o analogo)




GEV Scienze fisichenumero di citazioni al lavoro (WoS o Scopus)

IF della rivista in cui è pubblicato (o SJR)

GEV Scienze matematichenumero di citazioni al lavoro (WoS)IF a 5 anni della rivista in cui è pubblicato (o SJR) o MCQ di MathsciNet




VQR 2004-2010: I QUADRATI MAGICI, UN ESEMPIO

un lavoro è considerato di classe A (=eccellente), B (=buono), C (=accettabile), D (limitato) o deve essere sottoposto a informed peer review (IR) a seconda del numero di citazioni avute e dell'IF della rivista nell'anno di publicazione



ABILITAZIONE SCIENTIFICA NAZIONALE PER L'ACCESSO ALLA PRIMA E ALLA SECONDA FASCIA DEI PROFESSORI UNIVERSITARI

I candidati dovevano avere un valore superiore alla mediana in almeno due dei tre parametri considerati

1)numero totale di articoli (indicizzato dalle banche dati internazionali) nel periodo 2003-2012, normalizzato solo se l'età accademica è inferiore ai dieci anni (la normalizzazione consiste nel moltiplicare il numero di articoli per dieci e dividere per l'età accademica)

2)numero totale di citazioni normalizzato per età accademica (la normalizzazione consiste nel dividere il numero di citazioni per l'età accademica)

3)indice di Hirsch normalizzato per età accademica (contemporary h-index)



ABILITAZIONE SCIENTIFICA NAZIONALE PER L'ACCESSO ALLA PRIMA E ALLA SECONDA FASCIA DEI PROFESSORI UNIVERSITARI

età accademica: periodo di tempo successivo alla data di pubblicazione del primo lavoro

Es. ho pubblicato il primo articolo nel 1998 (fa fede quanto ho inserito nel mio profilo Cineca): ho un'età accademica pari a 16 anni



GLI INDICATORI NEI BANDI DI CONCORSO: UN ESEMPIO

numero totale delle citazioni numero medio di citazioni per pubblicazione impact factor totale impact factor medio per pubblicazione combinazioni dei precedenti parametri



“L’uso del solo indicatore citazionale costituisce un obiettivo facile per possibili future manipolazioni, inducendo comportamenti fuorvianti quali

l’estensiva autocitazione e la citazione mutua all’interno di un gruppo ristretto, non giustificate da considerazione di natura tecnica”

ANVUR, bando VQR 2004-2010



“Si ritiene importante comunicare ai giovani ricercatori il messaggio che esiste un livello qualitativo anche profondamente diverso tra le varie

riviste e che ci si debba cimentare con severe procedure di peer review e avere, quale obiettivo, quello di pubblicare nelle migliori riviste del proprio

settore”

ANVUR, bando VQR 2004-2010



Ancora Bibliografia…1.Bibliometrics - Citation Searching & Bibliometrics - Research Guides at Stevens Institute of Technology . Retrieved 27/02/2013, from http://library.stevens.edu/citation_searching2.Colledge L. et al. (2010). SJR and SNIP: two new journal metrics in Elsevier Scopus. Serials 23(3), 215-221. http://uksg.metapress.com/content/31814565236758v6/fulltext.html3.Hirsch, J. E. (2005). An index to quantify an individual's scientific research output. Proceedings of the National Academy of Sciences of the United States of America, 102(46), 16569-16572 http://www.pnas.org/content/102/46/16569.full4.Piazzini, T. (2010). Bibliometric indicators: spread reflections for a focusing and conscious use. JLIS.It, 1(1), 63-86. doi:10.4403/jlis.it-245.Plikus, M. V., Zhang, Z., & Chuong, C. M. (2006). PubFocus: Semantic MEDLINE/PubMed citations analytics through integration of controlled biomedical dictionaries and ranking algorithm. BMC Bioinformatics, 7, 424. 6.MyRI Project Team. (2011). Booklet - Bibliometrics, an introduction (version 10 May 2, 2011). Retrieved 27/02/2013, from http://hdl.handle.net/10633/27346 7.Oxford English Dictionary, Retrieved 27/02/2013 from http://www.oed.com/, 8.UCD Library Bibliometrics Support Service. Retrieved 27/02/2013, from http://www.ucd.ie/library/supporting_you/research_support/bibliometrics/9.ULS pitt.libguides. Citation Searching and Bibliometric Measures. Retrieved 04/03/2013, from http://pitt.libguides.com/bibliometrics10.Van Noorden, R. (2010). Metrics: A profusion of measures. Nature, 465(7300), 864-866. 11. Yang, K., & Meho, L. I. (2006). Citation Analysis: A Comparison of Google Scholar, Scopus, and Web of Science. Proceedings of the American Society for Information Science and Technology, 43(1), 1-15. Retrieved from http://doi.wiley.com/10.1002/meet.14504301185

gli indicatori bibliometrici -...

Documents