Présentation du 23 mars 2016

MESURES D’IMPACT TRADITIONNELLES:
CITATIONS, FACTEUR D’IMPACT DES
REVUES SAVANTES ET h-INDEX
NATALIE CLAIROUX
Bibliothécaire
BIBLIOTHÈQUE DE LA SANTÉ
Ateliers pour chercheurs futés, Hiver 2016
INFLUENCE DES MESURES D’IMPACT
TRADITIONNELLES
Embauche
# citations
Facteur d’impact
des revues
savantes
Titularisation
Promotion
Allocations de fonds
h-index
Classement des
établissements
2
1. DONNÉES DE CITATION
L’UNITÉ DE BASE DE LA BIBLIOMÉTRIE
 Le nombre de fois qu’un document a été cité.
 Les auteurs citent pour toutes sortes de raisons: pour
référer à une méthodologie particulière, pour renforcer un
point de discussion, pour créditer un expert du domaine,
mais aussi pour discuter de résultats douteux.
 Attention: Plus le nombre de citations est élevé ≠ plus un
article a eu de l’influence sur la recherche scientifique... On
peut seulement affirmer que les articles les plus cités ont
été les plus utiles à d’autres auteurs, mais sans en
connaître la raison.
 On doit attendre de 2 à 3 ans après la publication d’un
article avant de considérer la fiabilité des données de
citation.
3
1. DONNÉES DE CITATION
3 PRINCIPALES SOURCES DE DONNÉES
Les résultats pour un même article varient d’une source à l’autre,
car la couverture de chacune diffère (titres en langues autre que
l’anglais, types de documents inclus: actes de congrès, livres, etc.).
Testez avec l’article: Audet M, Bouvier M. Restructuring G-Protein-Coupled Receptor Activation. Cell.
2012;151(1):14-23.
 Web of Science (Thomson Scientific): 93 citations. Possibilité de
créer une carte des citations. Guide
 Scopus (Elsevier): 109 citations.
 Google Scholar Citations: 145 citations. Critique de l’outil
Pour aller plus loin:
Meho LI, Yang K. Impact of data sources on citation counts and rankings of LIS faculty: Web
of science versus Scopus and Google Scholar. J Am Soc Inf Sci Technol. 2007;58(13):210525.
Harzing A-W, Alakangas S. Google Scholar, Scopus and the Web of Science: a longitudinal
and cross-disciplinary comparison. Scientometrics. 2015:1-18.
4
EXEMPLE DE DISTORSION DES CITATIONS
5
Reproduit de BMJ, How citation distortions create unfounded authority: analysis of
a citation network, Steven A Greenberg, 339, b2680, no. de licence
3745941298664, 2015 avec la permission de BMJ Publishing Group Ltd.
2. FACTEUR D’IMPACT DES REVUES SAVANTES
JCR: OUTIL PERMETTANT DE COMPARER L’IMPACT DES
REVUES D’UNE MÊME DISCIPLINE
Testez les outils avec la revue où le Dr Bouvier a publié le plus souvent: Journal of
Biological Chemistry (50 articles)
 Journal Citation Reports : compilation annuelle des citations
des articles indexés dans Web of Science.
 Facteur d’impact = le nombre de fois en moyenne que les
articles d’une revue publiés au cours des 2 dernières années
ont été cités au courant de l’année de référence. Autres
indicateurs aussi disponibles. Guide
 Certaines disciplines dénombrent plus de chercheurs et plus
de revues que d’autres domaines. On peut difficilement
comparer la biologie moléculaire avec la médecine dentaire,
par exemple.
6
2. FACTEUR D’IMPACT DES REVUES SAVANTES
QUELQUES PRÉCISIONS ET CRITIQUES
 Publier un article dans une revue à haut facteur d’impact
comme Nature ou Cell ne garantit pas un taux de citations
élevé. Le facteur d’impact est un indicateur d’impact des
revues, pas des articles.
 Le facteur d’impact d’une revue est majoritairement
déterminé par une petite fraction de ses articles. La
plupart des articles ne sont pas cités du tout!
 Certains éditeurs ont été trouvés coupables d’auto-citation
à outrance, ce qui a une influence sur le facteur d’impact
d’une revue. Il est possible de vérifier cette donnée dans
JCR.
 Certains périodiques incluent une section composée de
revues de la littérature, ce qui augmente leur facteur
d’impact.
7
2. AUTRE OUTILS DE MESURE DE L’IMPACT DES REVUES
SAVANTES
À noter: la variation des catégories (disciplines) entre les
divers outils rendent les comparaisons difficiles...
RANG SCIMAGO (DONNÉES: SCOPUS)
Basé sur le transfert de prestige d’un journal à un autre par le
biais des citations. Classement des revues (voir la méthode de
calcul) et des pays.
CWTS JOURNAL INDICATORS (DONNÉES: SCOPUS)
L’indicateur SNIP (source normalized impact per paper)
compare les revues entre elles en tenant compte des
habitudes de citation des différentes disciplines.
GOOGLE SCHOLAR METRICS
Utilise l’indicateur h5 (h-index calculé sur 5 ans). Ne cite que
le top 20 pour chaque catégorie.
8
2. FACTEUR D’IMPACT DES REVUES SAVANTES
RELATIVE CITATION RATIO (RCR): UNE MESURE PLUS
FIABLE DE L’IMPACT?
 Article de Hutchins et al. (2015); RCR basé sur le concept
de réseau de co-citations, plutôt que sur une revue.
 Les revues à facteur d’impact élevé (JIF ≥ 28) représentent
seulement 11 % des articles ayant un RCR élevé (3 ou plus).
 Se baser sur le JIF pour attribuer du mérite à des travaux
de recherche équivaut à négliger 89 % des articles influents
similaires, mais publiés dans des revues moins
prestigieuses.
Pour aller plus loin:
Casadevall A, Fang FC. Impacted Science: Impact Is Not Importance. mBio. 2015;6(5):e0159315.
Declaration on Research Assesment (DORA): Plusieurs recommandations pour les chercheurs,
les institutions et les organismes subventionnaires. “La science devrait être évaluée selon le
mérite, et non selon le facteur d’impact de la revue où elle est publiée”.
9
3. h-INDEX
MESURE INDIVIDUELLE DE L’IMPACT D’UN AUTEUR
 Un chercheur avec un indice de h a publié h articles qui ont
été cités au moins h fois.
 Développé par J.E. Hirsch en 2005 (Proceedings of the
National Academy of Sciences of the United States of
America 102 (46): 16569-16572).
 Peut aussi s’appliquer à un groupe de scientifiques, par
exemple aux chercheurs d’une institution.
 L’indicateur permet d’accorder moins d’importance aux
articles qui ont été très cités, et de même, aux articles qui
n’ont pas été cités du tout (rapport qualité/quantité).
 Par contre, le h-index ne tient pas compte du “rang” de
l’auteur dans une publication à plusieurs auteurs (tous sont
considérés égaux, bien que leur participation individuelle
peut varier).
10
3. h-INDEX
OUTILS POUR DÉTERMINER LE h-INDEX
Quel est le h-index du Dr Michel Bouvier?
Attention, plusieurs chercheurs différents peuvent porter le même nom... Et un
même auteur peut varier ses initiales d’une publication à l’autre! D’où l’utilité
de demander un identifiant d’auteur ORCID.
 Web of Science: 75. Guide
 Scopus: 76. (Besoin de grouper 2 auteurs M. Bouvier)
 Profil d’utilisateur Google Scholar: 86.
Pour aller plus loin: d’autres indicateurs d’impact individuel
11

p-index: pour mesurer la contribution des co-auteurs à la renommée d'un auteur.

c-score: pour mesurer la qualité et la quantité d'un effort collaboratif.