1

Em quais temas de pesquisa publicamos com impacto?

Avaliação da produção científica dos Departamentos da Faculdade de Odontologia da

USP a partir de citações de artigos publicados e indexados na Web of Science em 2012

Por: Rubenildo Oliveira da Costa (Bibliotecário)

Serviço de Documentação Odontológica

Faculdade de Odontologia

Universidade de São Paulo

17/04/2014

2

Sumário

1 - Ficha técnica..............................................................................................................3

2 – Introdução.. ..............................................................................................................4

3 - Estado da arte.... ......................................................................................................6

4 - Considerações Finais......... ...................................................................................12

3

1 - Ficha técnica

Bases de dados utilizadas WoS (Web of Science) e Dedalus

Especialista entrevistado Moacyr Domingos Noveli (professor sênior da ODE)

Tipo de produção Artigos de periódicos

Período estudado 2012

Data da busca 25/03/2014

Estratégia de busca na WoS Tipo de produção: artigo científico / período: 2012 / País: Brasil ou Brazil / Instituição: Univ de Sao Paulo (busca aprimorada)

Estratégia de busca na Dedalus Base 4 (Produção) / Tipo de produção: artigo científico / período: 2012

Resultado de busca WoS 8.021 registros bibliográficos

Resultado de busca Dedalus 10.648 registros bibliográficos

Campos dos registros utilizados Unidade e Departamento (Dedalus) / Citação, Filiação, Categoria da WoS

Software VantagePoint, versão 8

Funções utilizadas no VantagePoint Combine Duplicate Records / Record Fusion / Data Fusion / Merge Field / Import Filter Editor / Aduna Cluster Map

Análise bibliométrica utilizada Análises de Citação e Cooperação Científica

Representações Gráficas Rede de Clusters (Agrupamentos)

4

2 – Introdução

A produção científica brasileira é avaliada a partir da quantidade de artigo

publicados.

Em algumas áreas do conhecimentos, tais como Biológicas, Saúde, Exatas etc.,

utiliza-se também como critério de avaliação indicador voltado ao periódico, conhecido

como Fator de Impacto (FI). O FI é um indicador quantitativo calculado a partir de

citações de artigos indexados na base de citação WoS, mas pertence à base Journal

Citation Reports (JCR), ambas da plataforma Web of Knowledge da empresa

jornalística privada Thomson Reuters.

Como forma de contemplar todas as áreas do conhecimento pesquisadas no

Brasil e marginalizadas pelo FI, a CAPES criou o QUALIS. Trata-se de um indicador

quantitativo e qualitativo que atribui notas aos periódicos nos quais os pesquisadores

brasileiros publicaram em um determinado período, utilizando critérios estabelecidos

por comissões de áreas correspondentes.

Logo, a produção científica brasileira é avaliada com base na quantidade de

artigos e também de indicadores de citação voltados aos periódicos. Ou seja, o

pesquisador é considerado importante se ele publica muitos artigos em periódicos com

FI e/ou Qualis elevados, e não se tais artigos obtiveram citações ou não.

O problema que se apresenta é que muitos dos artigos publicados em tais

periódicos nem sempre apresentam alto número de citações e que é falha a avaliação

da produção científica baseada no FI.

A hipótese que se propõe é que se avaliação da produção científica brasileira

seria mais representativa se fosse voltada para citações de artigos ou pesquisadores.

5

Com isso, pretende-se aqui avaliar a produção de artigos científicos publicados

por pesquisadores da Faculdade de Odontologia da USP, utilizando técnicas

bibliométricas e o software Vantage Point (VP).

O resultado deste estudo poderá servir para apoiar decisões de investimentos e

direcionamentos de pesquisas dos Departamentos da Faculdade de Odontologia da

USP.

6

3 - Estado da arte

O corpo docente da Faculdade de Odontologia da Universidade de São Paulo

(FOUSP) é formado por 152 professores, distribuídos por 7 Departamentos: Cirurgia

(ODC), Dentística (ODD), Estomatologia (ODE), Prótese (ODP),

Ortodondontia/Odontopediatria (ODO), Biologia Oral/Biomateriais (ODM) e Odontologia

Social (ODS).

A dificuldade de se realizar uma análise de impacto a partir de citação de artigos

ou pesquisador começa na busca dos registros bibliográficos em bases de citação

(WoS, Scopus e SciELO). Primeiro, teria-se de levantar todas as variações do nome de

cada pesquisador. Segundo, criar estratégia extensa de busca, de modo que se

recupere todos os artigos dos pesquisadores de uma só vez.

Tal problema é resolvido com o auxílio do software VP. Ao invés de criar uma

extensa estratégia de busca, faz-se uma busca na base de dados apenas com os

critérios de período (ano) e país. A exclusão de registros recuperados indevidamente

será processada pelo VP.

Outro fator benéfico, no caso desta análise, é que a USP possui uma base de

dados de produção científica (Dedalus), mas sem as informações de citação (impacto).

Então, ao comparar arquivos de registros bibliográficos da WoS e Dedalus a

partir da função “Indentific Duplicate”), tem-se um terceiro arquivo de registros

bibliográficos com registros duplicados identificados. A partir do terceiro arquivo, criam-

se mais dois, um de registros da WoS e outro de registros da Dedalus. Nesse

momento, executa-se a fusão “Record Fusion” do VP, resultando um último arquivo

com registros duplicados mesclados. Ou seja, unem-se os campos dos registros da

WoS com os campos dos registros da Dedalus, formando-se, então, um conjunto de

registros completos.

7

As análises apresentadas abaixo foram realizadas com base nesse conjunto de

registros completos.

Figura 1 Relações interdepartamental e temática da USP a partir de 101 artigos da

FOUSP indexados na WoS

8

A partir da Figura 1 pode-se perceber que o ODE é Departamento da FOUSP

que mais publicou artigos com 42, e que o tema mais pesquisado foi o Dentistry, Oral

Surgery... com 64 artigos, obviamente.

Porém, quando não publica-se com o tema Dentistry, Oral Surgery... é que se

tem maior colaboração com outros Departamentos da USP. Ou seja, a temática

específica de odontologia da FOUSP é publicada sem colaboração interdepartamental

na USP.

É importante informar que as categorias de assuntos da WoS são baseada nos

assuntos dos periódicos indexados.

A seguir, tem-se uma representação gráfica da produção científica das três

Faculdades de Odontologia da USP: a FO com 101 artigos publicados, a FOB com 80

e FORP com 63. Além da quantidade de artigos publicados tem-se ainda as variáveis

citação e colaboração entre unidades da USP a partir da produção das três Faculdades

de Odontologia.

9

Figura 2 Relação das citações da produção científica indexada na WoS das três

FOUSP

A Figura 2 apresenta a quantidade de artigos que receberam no mínimo três

citação no período de 2012 a 25 de março de 2014. São eles: 13 artigos receberam 3

citações, 16 receberam 4, 4 receberam 5, 2 receberam 6, 4 receberam 7, e assim por

diante.

Observa-se na Figura 2 os grandes círculos ligados à cada Faculdade de

Odontologia, identificando a grande quantidade de artigos que obtiveram nenhuma,

uma ou duas citações cada.

10

Com isso, confirma-se, portanto, a hipótese deste estudo segundo a qual

publicar em periódicos com FI não garante citação, sendo mais representativo um

indicador de citação baseado no artigo ou pesquisador.

Ademais, há que se considerar os artigos publicados pelas três Faculdades e

que não estão indexados na WoS, são eles: FOB (231), FO (221) e FORP (117).

Por outro lado, a Figura 2 também apresenta as unidades da USP que

publicaram com impacto com as três Faculdades de Odontologia da USP.

As figuras a seguir apresentam as mesmas variáveis que as anteriores, tais

como: citação (a partir de três citações por artigo) colaboração e categoria de assuntos,

além de colaboração externa, só que forma específica da FOUSP e seus

Departamentos.

Figura 3 Relação entre citação, categoria de assuntos e Departamentos da FOUSP, a

partir de 101 artigos indexados na WoS

11

Figura 4 Relação entre citação, categoria de assuntos e o Departamento ODE, a partir

de 42 artigos indexados na WoS

12

Figura 5 Relação entre citação, categoria de assuntos, Departamento ODE e

colaboração externa, a partir de 42 artigos indexados na WoS

13

4 - Considerações Finais

Concluí-se que é possível e viável construir indicadores confiáveis de impacto da

produção científica de artigos da FOUSP utilizando o software bibliométrico Vantage

Point.

Por último, é importante apresentar a dificuldade principal encontrada neste

trabalho que pode comprometer a abrangência das informações, que seria as funções

de identificação e união de registros duplicados do Vantage Point (Combine Duplicate

Records / Record Fusion / Data Fusion), baseados unicamente no campo título tanto

dos registros da Dedalus quanto da WoS. É preciso utilizar outros campos tais como

DOI, ISSN e número da primeira página do artigo. Além disso, desenvolver um filtro de

importação de registros da Dedalus mais detalhado, de forma que se recuperem todas

as formas de informação de determinado campo.