Facteur d’impact, h - ?· revues populaires vs. revues prestigieuses Les modèles alternatifs au facteur…

  • Published on
    30-Aug-2018

  • View
    212

  • Download
    0

Embed Size (px)

Transcript

  • Facteur dimpact, h-index, bibliomtrie :

    pourquoi et comment?

    Dernire mise jour : 23/10/2015 - Auteur : Frdrique Flamerie

    http://creativecommons.org/licenses/by-nc-sa/3.0/fr/

  • Plan De quoi parle-t-on?

    Le facteur dimpact

    Les modles alternatifs au facteur dimpact

    Le h-index

    Perspectives

  • 1. De quoi parle-t-on?

  • Lectures indispensables

    + rapport de lAcadmie des Sciences + bibliographie et webographie BUPMC

    Disponible la Bibliothque BCPR (Biologie Chimie Physique Recherche) cote 507.2 GIN

    http://www.academie-sciences.fr/activite/rapport/avis170111.pdfhttps://www.zotero.org/groups/jubil_bupmc/items/collectionKey/T9QMJTXChttps://www.zotero.org/groups/jubil_bupmc/items/collectionKey/T9QMJTXChttps://www.zotero.org/groups/jubil_bupmc/items/collectionKey/T9QMJTXC

  • Do metrics matter ? Alison Abbott , David Cyranoski , Nicola Jones , Brendan Maher , Quirin Schiermeier & Richard Van Noorden. Metrics : do metrics matter?, Nature, n 465, p. 860-862 (2010).

    De quoi parle-t-on?

  • Quest-ce que la bibliomtrie ?

    Elle se dfinit comme lexploitation statistique des publications

    Elle procde du calcul de divers indicateurs partir des bases de donnes bibliographiques couvrant la quasi-totalit de la littrature scientifique et de leurs citations dans la plupart des disciplines.

    Du bon, usage de la bibliomtrie pour lvaluation individuelle des chercheurs : Rapport de lAcadmie des Sciences, 17 janvier 2011

    De quoi parle-t-on?

  • A quoi la bibliomtrie sert-elle?

    De quoi parle-t-on?

    Analyse des citations = outil multi-usage

    recherche documentaire et gestion de collections de revues

    histoire et sociologie des sciences

    caractrisation

    valuation

    classement

  • Plusieurs objets et plusieurs niveaux

    Sources, revues

    Pays

    Laboratoires, institutions

    Chercheurs

    De quoi parle-t-on?

  • Les palmars : un apercu

    De quoi parle-t-on?

    Caractriser U-Multirank

    Approche pluridimensionnelle

    Comparer ce qui est comparable

    Classer Classement de

    Shanga

    Monodimensionnel : critres de prestige scientifique

    Nest plus significatif au-del de la 10e place

    any number beats no number

    http://www.u-portal.org/u-multirank/http://www.u-portal.org/u-multirank/http://www.u-portal.org/u-multirank/http://www.shanghairanking.com/ARWU-Methodology-2013.html

  • Pour les institutions et les chercheurs : Thomson Reuters : Web of Science Core

    Collection (+ de 8 600 titres) et Essential Science Indicators

    Elsevier : Scopus (+ de 20 000 titres)

    Pour les sources / revues : le Journal Citation Reports : donnes du

    Web of Science Core Collection Journal Metrics : donnes de Scopus

    De quoi parle-t-on?

    Bases de donnes de rfrence

  • Pourquoi le Web of Science est-il (si) slectif?

    Loi de Bradford

    Effet Mathieu vangile selon St Matthieu 25-29 : Car on donnera celui qui a et il sera dans labondance, mais celui qui na pas, mme ce quil a lui sera retir

    Voir : A. Blanchard, Distributions et lois Bibliomtriques - 31/01/2005

    0

    20

    40

    60

    80

    100

    120

    0 1000 2000 3000 4000 5000 6000

    # of journals

    % o

    f d

    ata

    ba

    se

    Articles Citations

    Distributions bibliomtriques : 20/80

    Source : Thomson-Reuters - prsentation UPMC 2011

    http://www.enroweb.com/spip.php?article22

  • Notion cl = la citation

    Une citation au sens du Web of Science est la rfrence :

    une review,

    un article de recherche,

    un ditorial,

    etc. : article de toute nature

    Mise en relation nombre de citations/nombre darticles au fondement des 2 indicateurs les + utiliss

    facteur dimpact

    h-index

    De quoi parle-t-on?

  • 2. Le facteur dimpact

  • Le facteur dimpact

  • Mode de calcul

    Exemple :

    Facteur dimpact de The Astrophysical Journal en 2012 =

    nb de citations reues en 2012 par des articles publis en 2011 et 2010 (33485) ------------------------------------------------------------------------ nb d'articles citables publis en 2011 et en 2010 (4973)

    Soit 33485 / 4973 = 6,733

    Le facteur dimpact 2012 de cette revue est de 6,733

    Le facteur dimpact

    Impact factor anne 2012 =

    Nombre de citations reues en 2012 par des articles publis en 2011 et 2010

    Nombre darticles citables publis en 2011 et 2010

  • 2010 2009 2008

    Impact Factor

    Annes

    prcdentes

    Temps

    Publications de 2010

    Publications cites en 2010, publies en 2008 et 2009

    Le facteur dimpact

    Schma daprs

    Mode de calcul

  • O trouver linformation : Journal Citation Reports

    Le facteur dimpact

    Le JCR fait partie de labonnement de lUPMC au Web of Science. 3 modes daccs : Jubil > Ressources en ligne : les essentiels > Bases de donnes

    http://www.jubil.upmc.fr/fr/ressources_en_ligne2/bases_de_donnees.html

  • O trouver linformation : Journal Citation Reports

    Le facteur dimpact

    Accs contextuel depuis la liste A-Z et le menu du rsolveur de liens SFX

    Ce service napparat que si la revue a un facteur dimpact

    http://sfxeu06.hosted.exlibrisgroup.com/33UPMC/azhttp://sfxeu06.hosted.exlibrisgroup.com/33UPMC/azhttp://sfxeu06.hosted.exlibrisgroup.com/33UPMC/azhttp://www.jubil.upmc.fr/fr/ressources_en_ligne2/liste_az_resolveur_liens_actu.htmlhttp://www.jubil.upmc.fr/fr/ressources_en_ligne2/liste_az_resolveur_liens_actu.html

  • Le facteur dimpact

    Accs depuis le Web of Science

    Accs contextuel depuis un rsultat de recherche

    Accs depuis le menu en haut de chaque page

    O trouver linformation : Journal Citation Reports

  • Le JCR : Donnes

    gnrales sur une revue

    Facteur dimpact

    Eigenfactor indice bibliomtrique pondrant le nbre de citations par le prestige des revues dont elles proviennent (cf. infra)

    Rank et Box Plot analyse du positionnement dune revue dans la (ou les) catgorie(s) dont elle fait partie

    Le facteur dimpact

  • Le JCR : Rank

    Le facteur dimpact

    Situer une revue par rapport aux autres revues de la mme discipline

    Voir lvolution de son positionnement dans le temps

  • Le JCR : Box Plot

    Le facteur dimpact

    Facteur dimpact de la revue

  • Le facteur dimpact

    Le JCR : Donnes dune catgorie de revues

    NB Par dfaut les 2 index Science citation index expanded et Social sciences citation index sont slectionns

  • Le JCR : autres indicateurs Liens de citations

    Revue cite - Cited Journal Data identifie les publications qui citent le plus souvent une revue

    donne mettre en vidence un rseau de revues

    Revue citante - Citing Journal Data identifie les publications le plus souvent cite par une revue

    donne mettre en vidence un rseau de revues

    Revues connexes - Journal Relationships analyse des liens de citation entre les revues dterminer des proximits smantiques

    identifier les liens entre les revues

    Le facteur dimpact

  • Le facteur dimpact

    Cited Journal Graph : comment la revue est-elle cite?

    Demi-vie de citation

    Citations utilises pour calculer le facteur dimpact

    Le JCR : Cited Journal

  • Le facteur dimpact

    Cited Journal Data : comment la revue est-elle cite?

    En 2013, PloS One est la revue qui a le plus cit la revue Bioinformatics

    Le JCR : Cited Journal

  • Le facteur dimpact

    Visualisation des relations de citation avec les 20 principales revues du rseau de citations de la revue

    Le JCR : Journal Relationships

    Survol de larc = facteur dimpact de la revue

    Survol des cordes = nombre de citation la revue parente

  • Comparer le positionnement (Quartile) ou lvolution (Trends) de revues appartenant une mme catgorie

    Le JCR : Compare Journals

    Le facteur dimpact

    Slectionner les revues et la catgorie

  • Les limites du facteur dimpact

    Les limites du facteur dimpact

    Like nuclear energy, the impact factor is a mixed blessing.

    Eugne Garfield, The agony and the ecstasy - The history and meaning of the journal impact factor

  • Avis de chercheurs

    Les limites du facteur dimpact

  • Dimportantes diffrences entre disciplines

    % of cites older than 10 years

    35%29%

    70%

    43%43%

    45%

    39%39%42%

    46%

    42%

    0.00%

    10.00%

    20.00%

    30.00%

    40.00%

    50.00%

    60.00%

    70.00%

    80.00%

    Beh

    avio

    ural S

    cien

    ce

    Biom

    edical &

    Life

    Scien

    ces

    Bus

    ines

    s & E

    cono

    mics

    Che

    mistry

    & M

    ater

    ials S

    cien

    ce

    Com

    pute

    r Scien

    ce

    Ear

    th &

    Env

    ironm

    enta

    l Scien

    ce

    Eng

    inee

    ring

    Hum

    anities

    , Soc

    . Sci. &

    Law

    Mat

    h & S

    tatis

    tics

    Med

    icine

    Phy

    sics

    & A

    stro

    nom

    y

    Antriorit des citations : % darticles de plus de 10 ans

    Les limites du facteur dimpact

    Source : Springer

  • Densit et temporalit des citations En biologie molculaire, il nest pas rare quun article recueille 10 30 citations en 2 ans, alors quune revue de premier rang en mathmatiques nen recevra que deux . Manuel Durand-Barthez, Lvaluation des publications scientifiques : nouvelles approches, nouveaux enjeux, 2009

    Dimportantes diffrences entre disciplines

    Les limites du facteur dimpact

    Source : http://www.eigenfactor.org/whyeigenfactor.php

    http://www.eigenfactor.org/whyeigenfactor.phphttp://www.eigenfactor.org/whyeigenfactor.php

  • Limites du mode de calcul

    dlai de 2 ans du facteur dimpact critiquable, celui de 5 ans galement

    NB : limpact sur 2 ans reste lindicateur de rfrence

    Importance des critres ditoriaux Nombre de fascicules dans lanne

    Nombre de pages et darticles par n

    Type darticle : reviews sont cites 2 fois plus en moyenne

    Les limites du facteur dimpact

  • Le facteur d'impact se rapporte une revue et non un article. Les articles d'une revue fort facteur d'impact ne sont pas tous cits de manire identique

    Les revues les plus prestigieuses, facteur dimpact trs lev, contiennent un pourcentage significatif darticles de qualit moyenne Rapport de lAcadmie des Sciences, op. cit., p.2

    Ex de Nature : en 2004, 25% des articles ont constitu 89% du FI Depuis 2008 + de 50% de ses articles ont reu zro ou 1 citation.

    Les limites du facteur dimpact

    Danger de lextrapolation

  • 3. Les modles alternatifs au facteur dimpact

  • fonde le statut dune page web sur une combinaison des liens qui pointent vers une page et sur le statut des pages dont sont issus ces liens. En prenant en compte la fois des facteurs de popularit et de prestige, Google a pu viter dattribuer des rangs levs des pages web populaires mais par ailleurs non pertinentes.

    Rodriguez M.A., Bollen J., Van de Sompel H., Journal Status , Scientometrics, vol. 69, n 3, 2006, p. 669

    revues populaires vs. revues prestigieuses

    Les modles alternatifs au facteur dimpact

    Lalgorithme du PageRank : influence weight

    Narin - 1976

    http://yunus.hacettepe.edu.tr/~tonta/courses/spring2011/bby704/narin_1975_eval-bibliometrics_images.pdfhttp://yunus.hacettepe.edu.tr/~tonta/courses/spring2011/bby704/narin_1975_eval-bibliometrics_images.pdfhttp://yunus.hacettepe.edu.tr/~tonta/courses/spring2011/bby704/narin_1975_eval-bibliometrics_images.pdfhttp://yunus.hacettepe.edu.tr/~tonta/courses/spring2011/bby704/narin_1975_eval-bibliometrics_images.pdfhttp://yunus.hacettepe.edu.tr/~tonta/courses/spring2011/bby704/narin_1975_eval-bibliometrics_images.pdfhttp://yunus.hacettepe.edu.tr/~tonta/courses/spring2011/bby704/narin_1975_eval-bibliometrics_images.pdf

  • Conu par Carl T. Bergstrm, Universit de Washington, 2007

    Sappuie sur le corpus du JCR Prise en compte dun poids des

    citations, li linfluence relative des revues dans la communaut scientifique

    Les auto-citations sont exclues du calcul Fond sur les 5 annes les plus rcentes

    Eigenfactor

    Les modles alternatifs au facteur dimpact

  • Eigenfactor Score = mesure de linfluence dun journal pour la communaut scientifique - influence globale dune revue Somme des Eingenfactor scores de toutes les revues du JCR = 100

    Article Influence Score = mesure de linfluence moyenne de chaque article sur les 5 dernires annes - influence moyenne par article Article Influence Score moyen du JCR = 1

    Cost effectiveness Score = prix/Eigenfactor score Cost effectiveness score moyen = 1

    Les modles alternatifs au facteur dimpact

    Les indicateurs de lEigenfactor

  • http://www.eigenfactor.org

    Les modles alternatifs au facteur dimpact

    Eigenfactor

    http://www.eigenfactor.org/

  • http://well-formed.eigenfactor.org Donnes de 1997 2005 Citation patterns : liens de citation entre revues et entre domaines disciplinaires Change over time : volution du Eigenfactor score Clustering : classement par Article Influence et liens de citation entre revues Map : rseau de citations

    Clustering

    http://well-formed.eigenfactor.org/http://well-formed.eigenfactor.org/http://well-formed.eigenfactor.org/http://well-formed.eigenfactor.org/radial.htmlhttp://well-formed.eigenfactor.org/time.htmlhttp://well-formed.eigenfactor.org/treemap.htmlhttp://well-formed.eigenfactor.org/map.html

  • Indicateurs Scopus

    Source Normalized Impact per Paper (SNIP)

    en savoir + : Fiche CoopIST (Cirad)

    Impact per Publication (IPP) en savoir + : Fiche CoopIST (Cirad)

    SCImago Journal Rank (SJR) en savoir + : Fiche CoopIST (Cirad)

    Les modles alternatifs au facteur dimpact

    http://www.journalmetrics.com/snip.phphttp://www.journalmetrics.com/snip.phphttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-snip/1-familiarisez-vous-avec-l-indicateur-sniphttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-snip/1-familiarisez-vous-avec-l-indicateur-sniphttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-snip/1-familiarisez-vous-avec-l-indicateur-sniphttp://www.journalmetrics.com/ipp.phphttp://www.journalmetrics.com/ipp.phphttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-ipp/1-familiarisez-vous-avec-l-indicateur-ipp-ou-impact-per-publicationhttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-ipp/1-familiarisez-vous-avec-l-indicateur-ipp-ou-impact-per-publicationhttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-ipp/1-familiarisez-vous-avec-l-indicateur-ipp-ou-impact-per-publicationhttp://www.journalmetrics.com/sjr.phphttp://www.journalmetrics.com/sjr.phphttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-sjr/1-familiarisez-vous-avec-l-indicateur-sjrhttp://coop-ist.cirad.fr/aide-a-la-publication/evaluer-la-recherche/l-indicateur-sjr/1-familiarisez-vous-avec-l-indicateur-sjr

  • Fentre danalyse des citations = 3 ans

    Diffrents modes daccs (gratuits)

    Journal Metrics (Elsevier) : SNIP, IPP, SJR

    Journal Indicators (Universit de Leiden): SNIP et IPP

    Scimago Journal & Country Rank (Scimago Lab): SJR et IPP

    Les modles alternatifs au facteur dimpact

    Indicateurs Scopus

    http://www.journalmetrics.com/http://www.journalindicators.com/http://www.scimagojr.com/http://www.scimagojr.com/http://www.scimagojr.com/

  • SNIP Objectif : permettre des comparaisons

    directes entre revues de champs disciplinaires diffrents

    Normalisation a priori : pondration des citations en fonction des disciplines

    NB pas de dfinition a priori de catgories disciplinaires

    Ratio nombre de citations/potentiel de citations de la discipline

    Les modles alternatifs au facteur dimpact

  • IPP Indice quivalent au facteur dimpact : ratio

    nombre de citations/nombre darticles

    Mais fentre danalyse des citations de 3 ans, couverture Scopus Web of Science Core Collection,

    Mais articles a le mme sens dans le...

Recommended

View more >