Quand l’indicateur finit par décider du contenu

Une revue très citée ne garantit pas chaque article

La déclaration de San Francisco sur l’évaluation de la recherche, élaborée en 2012, recommande de ne pas utiliser le facteur d’impact d’une revue comme substitut à la qualité d’un article ou au travail d’un chercheur. L’indicateur porte sur une revue ; la décision d’évaluation porte sur un autre objet.

Le problème est compréhensible en communication : un total peut être juste tout en répondant mal à la question posée. Le contexte et l’objet mesuré restent nécessaires pour interpréter le chiffre.

Tous les liens n’expriment pas une recommandation

Google a introduit l’attribut nofollow en 2005 pour lutter notamment contre le spam dans les commentaires. En 2019, sa documentation a ajouté des indications distinctes pour les liens sponsorisés et les contenus produits par les utilisateurs, tout en faisant évoluer leur traitement.

Ces précisions rappellent qu’un lien peut avoir plusieurs fonctions. Un paiement, une contribution d’utilisateur ou une référence éditoriale ne se lisent pas de la même manière. Compter les liens sans leur contexte retire une partie de l’information utile.

Lire les citations produites par les assistants

Une citation dans une réponse IA dépend de la question, du service et du moment de l’observation. Pour comparer deux relevés, il faut garder ces conditions et lire ce qui a été repris. Le total seul ne montre ni la justesse du passage ni son intérêt pour un acheteur.

Les exemples scientifiques et techniques n’annoncent pas le futur des assistants. Ils donnent une raison de vérifier l’usage d’un indicateur avant d’en faire un objectif. Si une équipe produit surtout ce qui fait progresser le score, il faut encore examiner l’utilité de ces publications pour ses lecteurs.

Le déplacement peut être discret : préférer des définitions courtes parce qu’elles sont souvent citées, abandonner une analyse difficile à résumer ou multiplier les sujets généraux pour augmenter les occasions de reprise. Ce sont des situations à examiner, sans supposer qu’elles décrivent toutes les équipes. Le risque vient du lien entre l’indicateur, l’objectif fixé et les décisions qu’il récompense.

Associer le chiffre aux éléments qui l’expliquent

Les principes de Barcelone 4.0 de l’AMEC rattachent l’évaluation aux objectifs de l’organisation et aux publics concernés. Ce repère permet d’examiner un score de citations à partir de la contribution attendue : quels sujets doivent être mieux compris, quelles compétences doivent être reconnues et quelles relations doivent progresser ?

Un bilan conserve alors le total, mais aussi les questions, les sources et les réponses observées. Il peut montrer qu’une progression concerne surtout des définitions périphériques, ou qu’un contenu plus rarement repris soutient une discussion importante. La décision éditoriale dispose de ces deux informations, au lieu de récompenser automatiquement le plus grand nombre.

L’enjeu est de préserver la capacité de l’entreprise à investir dans une explication dont l’utilité dépasse la facilité de mesure. Un indicateur doit aider à examiner ce choix et ses résultats. Lorsqu’il décide silencieusement du sujet à la place de l’équipe, il cesse de décrire le travail et commence à le diriger.

Le signal d’alerte est un changement du texte qui améliore le compteur en appauvrissant la réponse : fragmenter artificiellement une même explication, produire des listes interchangeables ou supprimer une réserve parce qu’elle rend la phrase moins facilement reprise. La revue doit comparer ces choix à la question que le contenu devait éclairer.