la bibliométrie : nouvelle frontière des bibliothèques ?

La bibliométrie : nouvelle frontière des bibliothèques ?

19/04/2016 – Solenn Bihan

Solenn Bihan Mission d’appui à la recherche & Information Scientifique (MARS) Université de Lille 2

Matrix ou la réalité augmentée

3

La politique documentaire selon Bertrand Calenge • Utilisation des indicateurs statistiques • Informations objectives • Meilleure connaissance d’une collection • Outil d’aide à la décision • Attention à l’interprétation Ex : taux de rotation des ouvrages pour les acquisitions

Attention ! C’est de la bibliométrie !


Taux de rotation = Nb de prêts Nb de docs de la collection

https://bccn.wordpress.com/2008/08/04/evaluation-et-statistiques-les-taux-de-rotation/

4

Définition La bibliométrie a été créée par des bibliothécaires comme outil de gestion de la documentation.


L’application des mathématiques et des méthodes statistiques aux livres, articles et autres moyens de communication.* *Source : Pritchard A. Statistical Bibliography of Bibliometrics. Journal of Documentation. 1969;25(4):348-9.

Décrire

Analyser

Cartographier

Trier

Classer

Valoriser

5

Méthode


Définir l’objectif

Définir le corpus

Choisir un indicateur pertinent

Vérifier le mode de

calcul

Interpréter les

résultats

6

Condition 1 : des données accessibles et structurées


Bases de données en ligne

Catalogues de bibliothèques Bases

d’articles (Pubmed…)

Bases d’articles avec citations

(Web of Science, Scopus)

Archives ouvertes

Moteurs de recherche

(Google Scholar…)

7

Condition 2 : des données de qualité


Autorités Auteurs

Identifiants document

Disciplines (Indices Dewey)

Mots-clés (RAMEAU)

Statistiques fiables

= Données

structurées et normalisées

Référentiels

8

Données normalisées = Référentiels Un référentiel est partagé entre plusieurs applications. Notion utilisée au-delà des métiers des bibliothèques. C’est le garant de la qualité des données. Ex : IdRef est le Référentiel des autorités Sudoc, Calames et Theses.fr


Un référentiel, c'est un ensemble de bases de données contenant les « références » d'un système d'information. Un référentiel clair, logique et précis est un des gages de bonne interopérabilité d'un système d'information.* *Source : Wikipedia.

9

Condition 3 : des indicateurs fiables


Pertinents

Homogènes Calibrés Indicateurs statistiques

L’indicateur n’est pas le concept lui-même mais une façon approchée de mesurer […] le concept visé.* *Source : Gingras Y, UQAM. La fièvre de l’évaluation de la recherche : du mauvais usage de faux indicateurs. 2008. Disponible sur: http://www.cirst.uqam.ca/Portals/0/docs/note_rech/2008_05.pdf.

10

La bibliométrie scientifique, selon Yves Gingras • Outil indispensable d’analyse des

sciences et de leurs évolutions • Qui suppose une démarche rigoureuse

et validée • Et une connaissance fine des modes

de production


11

En résumé Vous savez ce qu’est la bibliométrie. Vous en faisiez déjà sans le savoir : • En cataloguant, vous produisez des données qui servent à

la bibliométrie. • Vous faites de la bibliométrie pour la « politique

documentaire »


Mais alors, qu’y a-t-il de scandaleux ?

Dr Jekyll et Mr Hyde ?

13

Bien ou mal ? 1. Utiliser les statistiques du SIGB pour mener la politique

documentaire 2. Mesurer le taux de publications déposées dans une

archive ouverte 3. Attribuer des financements aux chercheurs en fonction de

leur facteur d’impact 4. Evaluer la progression des thèses en accès libre sur

Thèses.fr 5. Dessiner des communautés d’intérêt grâce aux réseaux

de citations 6. Choisir les articles les plus cités sur un sujet pour les lire

en premier 7. Classer les universités en fonction de leur nombre de

publications et de citations


14

Confusion entre bibliométrie et évaluation Cf Yves Gingras


Bibliométrie sauvage

Fièvre de l’évaluation

15

L’évaluation chiffrée est incontournable Elle se fera avec nous ou sans nous Les bibliothèques peuvent améliorer les indicateurs avec des données de qualité Les bibliothèques peuvent devenir des partenaires essentiels dans le pilotage de la recherche


Ne pas mettre le doigt dans l’engrenage Se méfier des chiffres (risque de simplification, détournement…) Refuser en bloc l’évaluation de la recherche

En résumé : Les bibliothèques au milieu du gué

Le cas de Lille 2 : Sur le fil

17 19/04/2016 – Solenn Bihan

Bibliométrie Recenser les publications

Améliorer les stratégies de publication

Piloter la documentation

Accompagner la transition

vers l’OA

Piloter la recherche

Des usages variés

18

L’offre de services : aide à la visibilité et au pilotage • Formation des utilisateurs aux bonnes pratiques • Fourniture de rapports documentés (gouvernance,

montage de projets) • Analyse des classements • Veille sur l’évolution des métriques


19

Les Sciences de la Vie et de la Santé • Recherche mondialisée et en inflation rapide • Sous forme d’articles de revue • Bien référencés dans les bases bibliométriques • Hiérarchie implicite des revues confirmée

par le facteur d’impact ⇒ La bibliométrie est particulièrement adaptée à cette

communauté


20

Une démarche bibliométrique validée Cf INRA, INSERM, OST

• Rigueur de la méthode • Avis critique sur les outils et les indicateurs • Amélioration de la qualité des données


21

Cellule bibliométrique de Lille 2 & CHRU


Les compétences : • L’édition scientifique et ses

évolutions

• Le référencement

• Les statistiques

• Les pratiques des

chercheurs

• Le pilotage et l’évaluation

de la recherche

Service Documenta-

tion

Service Recherche CHRU

22

Les outils disponibles à Lille 2


Base pluridisciplinaire d’articles + données de citations. (Relative) normalisation des données

Outil d’analyse statistique commercialisé par Thomson Reuters. InCites utilise les données du Web of Science. Production de tableaux et graphiques

Base locale des articles produits par une institution + indicateurs précalculés. Produit par le CHRU de Lille, interfacé avec le Web of Science / InCites, et aussi PubMed.

23

Les principes de SAMPRA


Extraction des données du

Web of Science

« Core Collection »

Renvoi de la liste des publications validées

pour créer ou optimiser le « Organization-

Enhanced »

1

2 Validation par les chercheurs

Analyses locales

InCites

Consolidation des

adresses (WAAN)

24

L’annuaire de SAMPRA


Fédération2

Equipe A Equipe B Equipe C Equipe D Equipe E

Unité 1 Unité 2 Unité 3

Fédération1

Etablissement

25

L’interface de SAMPRA


1 2

26 19/04/2016 – Solenn Bihan

Validation des publications

Valider par lot

xxxxxxxxxxxx

27

Les indicateurs de SAMPRA


28

Les indicateurs de SAMPRA


Disciplines Web of Sciences, Keywords et Mesh Major Topic

Et après ?

30

Les limites

• Il manque une instance qui porte ces arguments au niveau national

• Il manque une offre de formation continue, des groupes de travail pour améliorer les pratiques


Comment adapter les outils et la démarche dans d’autres disciplines?

Comment convaincre la communauté des bibliothécaires de s’engager dans cette voie ?

31

Perspectives dans l’Université de Lille :


Charte de signature unique des publications Génération

de CV chercheurs à partir de HAL

Consolidation des affiliations des articles dans Scopus et Wos

Visibilité

Mise en commun d’un annuaire des chercheurs et labos

Implémentation d’identifiants auteurs (IDHAL, IDREF, ORCID…)

Normalisation

Accessibilité Interopérabilité Bibliométrie

32

Perspectives au niveau international


Inflation de la production scientifique Crise de l’évaluation de la recherche

Essor de l’Open Science Essor des métriques alternatives, et des métriques ouvertes

33

A vous de jouer !


Université de Lille – Droit et Santé 42, rue Paul Duez F-59000 Lille www.univ-lille.fr

Merci de votre attention

Toutes les images de cette présentation sont dans le domaine public. CC0 Cette présentation est disponible sous une licence Creative Commons