Bibliométrie

De par la nature des outils de mesure et des pratiques de publication et de citation, plusieurs arguments plaident pour la prudence dans les analyses bibliométriques et soulignent l’importance de mettre en relation plusieurs indicateurs et de les utiliser de façon complémentaire avec l’évaluation par les pairs.

• Le nombre de citations prend-il en compte les autocitations ?
• Sur quelle période s’échelonnent les citations ?
• Un seul article peut avoir généré beaucoup de citations et influencé la moyenne d’une revue ou d’un auteur.
• La revue ou l’auteur citant ont-ils une forte influence dans la communauté ? La citation est-elle positive ou négative ? S’agit-il de citations complaisantes ou amicales ?
• Des erreurs dans les citations peuvent altérer la valeur des analyses (coquilles dans le nom des revues, revues connues sous plusieurs noms, homonymie des auteurs, etc.)

Discipline

• Quels sont les principaux modes de communication savante pour la discipline étudiée : livres, conférences, revues, réseaux informels ? Sont-ils pris en compte dans les sources des données bibliométriques ?
• Quelles sont les pratiques de citation de la discipline : de nombreuses références sont citées, ou un nombre restreint ?

Sujet étudié

• Un sujet nouveau ou un domaine très spécialisé, avec très peu de chercheurs, générera moins de publications et de références.
• Un article portant sur un sujet local, de par sa nature, risque d’être publié dans une revue nationale et risque donc d’être moins cité.

Langue

• Un important biais anglo-américain existe dans la couverture des périodiques indexés dans Web of Science, et dans une moindre mesure, dans Scopus. Les articles publiés dans les périodiques non-anglophones sont donc moins indexés et risquent conséquemment d’être moins cités.

Type d’article

• Un article de type « revue systématique » ou de synthèse sera généralement plus cité qu’un article de recherche.
• Un article généraliste ou méthodologique intéressera davantage de chercheurs qu’un article spécialisé.

Âge du document

• Un document plus ancien a bénéficié de plus de temps pour être lu et donc d'être cité.