MESURES D’IMPACT TRADITIONNELLES: CITATIONS, FACTEUR D’IMPACT DES REVUES SAVANTES ET h-INDEX

NATALIE CLAIROUXBibliothécaire

BIBLIOTHÈQUE DE LA SANTÉAteliers pour chercheurs futés, Hiver 2016

INFLUENCE DES MESURES D’IMPACT TRADITIONNELLES

2

Facteur d’impact des

revues savantesh-index

# citations Titularisation

Promotion

Allocations de fonds

Embauche

Classement des établissements

3

L’UNITÉ DE BASE DE LA BIBLIOMÉTRIE Le nombre de fois qu’un document a été cité. Les auteurs citent pour toutes sortes de raisons: pour

référer à une méthodologie particulière, pour renforcer un point de discussion, pour créditer un expert du domaine, mais aussi pour discuter de résultats douteux.

Attention: Plus le nombre de citations est élevé ≠ plus un article a eu de l’influence sur la recherche scientifique... On peut seulement affirmer que les articles les plus cités ont été les plus utiles à d’autres auteurs, mais sans en connaître la raison.

On doit attendre de 2 à 3 ans après la publication d’un article avant de considérer la fiabilité des données de citation.

1. DONNÉES DE CITATION

4

3 PRINCIPALES SOURCES DE DONNÉES Les résultats pour un même article varient d’une source à l’autre, car la couverture de chacune diffère (titres en langues autre que l’anglais, types de documents inclus: actes de congrès, livres, etc.). Testez avec l’article: Audet M, Bouvier M. Restructuring G-Protein-Coupled Receptor Activation. Cell. 2012;151(1):14-23.

Web of Science (Thomson Scientific): 93 citations. Possibilité de créer une carte des citations. Guide

Scopus (Elsevier): 109 citations. Google Scholar Citations: 145 citations. Critique de l’outil

Pour aller plus loin: Meho LI, Yang K. Impact of data sources on citation counts and rankings of LIS faculty: Web of science versus Scopus and Google Scholar. J Am Soc Inf Sci Technol. 2007;58(13):2105-25.Harzing A-W, Alakangas S. Google Scholar, Scopus and the Web of Science: a longitudinal and cross-disciplinary comparison. Scientometrics. 2015:1-18.

1. DONNÉES DE CITATION

EXEMPLE DE DISTORSION DES CITATIONS

5

Reproduit de BMJ, How citation distortions create unfounded authority: analysis of a citation network, Steven A Greenberg, 339, b2680, no. de licence 3745941298664, 2015 avec la permission de BMJ Publishing Group Ltd.

6

JCR: OUTIL PERMETTANT DE COMPARER L’IMPACT DES REVUES D’UNE MÊME DISCIPLINETestez les outils avec la revue où le Dr Bouvier a publié le plus souvent: Journal of Biological Chemistry (50 articles)

Journal Citation Reports : compilation annuelle des citations des articles indexés dans Web of Science.

Facteur d’impact = le nombre de fois en moyenne que les articles d’une revue publiés au cours des 2 dernières années ont été cités au courant de l’année de référence. Autres indicateurs aussi disponibles. Guide

Certaines disciplines dénombrent plus de chercheurs et plus de revues que d’autres domaines. On peut difficilement comparer la biologie moléculaire avec la médecine dentaire, par exemple.

2. FACTEUR D’IMPACT DES REVUES SAVANTES

7

QUELQUES PRÉCISIONS ET CRITIQUES Publier un article dans une revue à haut facteur d’impact

comme Nature ou Cell ne garantit pas un taux de citations élevé. Le facteur d’impact est un indicateur d’impact des revues, pas des articles.

Le facteur d’impact d’une revue est majoritairement déterminé par une petite fraction de ses articles. La plupart des articles ne sont pas cités du tout!

Certains éditeurs ont été trouvés coupables d’auto-citation à outrance, ce qui a une influence sur le facteur d’impact d’une revue. Il est possible de vérifier cette donnée dans JCR.

Certains périodiques incluent une section composée de revues de la littérature, ce qui augmente leur facteur d’impact.

2. FACTEUR D’IMPACT DES REVUES SAVANTES

8

À noter: la variation des catégories (disciplines) entre les divers outils rendent les comparaisons difficiles...

RANG SCIMAGO (DONNÉES: SCOPUS)Basé sur le transfert de prestige d’un journal à un autre par le biais des citations. Classement des revues (voir la méthode de calcul) et des pays. CWTS JOURNAL INDICATORS (DONNÉES: SCOPUS)L’indicateur SNIP (source normalized impact per paper) compare les revues entre elles en tenant compte des habitudes de citation des différentes disciplines. GOOGLE SCHOLAR METRICSUtilise l’indicateur h5 (h-index calculé sur 5 ans). Ne cite que le top 20 pour chaque catégorie.

2. AUTRE OUTILS DE MESURE DE L’IMPACT DES REVUES SAVANTES

9

RELATIVE CITATION RATIO (RCR): UNE MESURE PLUS FIABLE DE L’IMPACT? Article de Hutchins et al. (2015); RCR basé sur le concept de

réseau de co-citations, plutôt que sur une revue. Les revues à facteur d’impact élevé (JIF ≥ 28) représentent

seulement 11 % des articles ayant un RCR élevé (3 ou plus). Se baser sur le JIF pour attribuer du mérite à des travaux de

recherche équivaut à négliger 89 % des articles influents similaires, mais publiés dans des revues moins prestigieuses.

Pour aller plus loin:

Casadevall A, Fang FC. Impacted Science: Impact Is Not Importance. mBio. 2015;6(5):e01593-15.Declaration on Research Assesment (DORA): Plusieurs recommandations pour les chercheurs, les institutions et les organismes subventionnaires. “La science devrait être évaluée selon le mérite, et non selon le facteur d’impact de la revue où elle est publiée”.

2. FACTEUR D’IMPACT DES REVUES SAVANTES

10

MESURE INDIVIDUELLE DE L’IMPACT D’UN AUTEUR Un chercheur avec un indice de h a publié h articles qui ont

été cités au moins h fois. Développé par J.E. Hirsch en 2005 (Proceedings of the

National Academy of Sciences of the United States of America 102 (46): 16569-16572).

Peut aussi s’appliquer à un groupe de scientifiques, par exemple aux chercheurs d’une institution.

L’indicateur permet d’accorder moins d’importance aux articles qui ont été très cités, et de même, aux articles qui n’ont pas été cités du tout (rapport qualité/quantité).

Par contre, le h-index ne tient pas compte du “rang” de l’auteur dans une publication à plusieurs auteurs (tous sont considérés égaux, bien que leur participation individuelle peut varier).

3. h-INDEX

11

OUTILS POUR DÉTERMINER LE h-INDEXQuel est le h-index du Dr Michel Bouvier? Attention, plusieurs chercheurs différents peuvent porter le même nom... Et un même auteur peut varier ses initiales d’une publication à l’autre! D’où l’utilité de demander un identifiant d’auteur ORCID.

Web of Science: 75. Guide Scopus: 76. (Besoin de grouper 2 auteurs M. Bouvier) Profil d’utilisateur Google Scholar: 86.

Pour aller plus loin: d’autres indicateurs d’impact individuel

p-index: pour mesurer la contribution des co-auteurs à la renommée d'un auteur. c-score: pour mesurer la qualité et la quantité d'un effort collaboratif.

3. h-INDEX