MODMODELELEESS, , OUTILS ET METOUTILS ET METHHODESODES

DE BIBLIOMDE BIBLIOMETETRRIEIE

Sessions de Formation Sessions de Formation

URFISTURFIST 20092009

Manuel Durand-BarthezManuel Durand-Barthez, SCD Toulouse 3, SCD Toulouse 3

2 types 2 types d’évaluation:d’évaluation:

2 types 2 types d’évaluation:d’évaluation:

• A priori, qualitative, par les pairs (peer reviewing)• A posteriori, quantitative, par les citations (bibliométrique)

• A priori, qualitative, par les pairs (peer reviewing)• A posteriori, quantitative, par les citations (bibliométrique)

Définition du problèmeDéfinition du problème

Nécessité de promouvoir des

alternatives de type qualitatif par rapport au modèle dominant

quantitatif

Nécessité de promouvoir des

alternatives de type qualitatif par rapport au modèle dominant

quantitatif

MéthodeMéthodeMéthodeMéthode

• Démonter le système quantitatif Démonter le système quantitatif (bibliométrie) qui trop souvent (bibliométrie) qui trop souvent régit en amont la soumission régit en amont la soumission d’articled’article

• Réformer ce système de l’intérieurRéformer ce système de l’intérieur• Introduire une évaluation Introduire une évaluation

qualitative coopérativequalitative coopérative• Y associer étroitement l’OAIY associer étroitement l’OAI

• Démonter le système quantitatif Démonter le système quantitatif (bibliométrie) qui trop souvent (bibliométrie) qui trop souvent régit en amont la soumission régit en amont la soumission d’articled’article

• Réformer ce système de l’intérieurRéformer ce système de l’intérieur• Introduire une évaluation Introduire une évaluation

qualitative coopérativequalitative coopérative• Y associer étroitement l’OAIY associer étroitement l’OAI

L’EVALUATION DES L’EVALUATION DES PUBLICATIONS SCIENTIFIQUESPUBLICATIONS SCIENTIFIQUESL’EVALUATION DES L’EVALUATION DES PUBLICATIONS SCIENTIFIQUESPUBLICATIONS SCIENTIFIQUES

Depuis 1960, modèle quasi Depuis 1960, modèle quasi monopolistique:monopolistique:

ISI (Institute of scientific ISI (Institute of scientific Information – Philadelphie)Information – Philadelphie)

[Groupe U.S. Thomson Inc.]

Depuis 1960, modèle quasi Depuis 1960, modèle quasi monopolistique:monopolistique:

ISI (Institute of scientific ISI (Institute of scientific Information – Philadelphie)Information – Philadelphie)

[Groupe U.S. Thomson Inc.]

EVALUATION DES EVALUATION DES AUTEURSAUTEURSEVALUATION DES EVALUATION DES AUTEURSAUTEURS

9750 titres9750 titres revendiquéssur la Plate-Forme propriétaire

de l’ISIWEB OF SCIENCE (WoS)

9750 titres9750 titres revendiquéssur la Plate-Forme propriétaire

de l’ISIWEB OF SCIENCE (WoS)

Répartition par Répartition par DomainesDomainesRépartition par Répartition par DomainesDomaines• 6650 titres6650 titres en Sciences

Technologie MédecineBase Science Citation Index• 1950 titres1950 titres en Sciences socialesBase Social Science Citation Index• 1150 titres1150 titres en Sciences humainesBase Arts & Humanities Citation

Index

• 6650 titres6650 titres en Sciences Technologie Médecine

Base Science Citation Index• 1950 titres1950 titres en Sciences socialesBase Social Science Citation Index• 1150 titres1150 titres en Sciences humainesBase Arts & Humanities Citation

Index

EVALUATION DES SOURCES(Titres des revues)EVALUATION DES SOURCES(Titres des revues)

JOURNAL CITATION REPORTJOURNAL CITATION REPORT

(J.C.R.)(J.C.R.)Tableau statistique annuel

paraît au Printemps de l’année « n+1 »

2007: + de 6000 titres analysés

JOURNAL CITATION REPORTJOURNAL CITATION REPORT

(J.C.R.)(J.C.R.)Tableau statistique annuel

paraît au Printemps de l’année « n+1 »

2007: + de 6000 titres analysés

Journal:Journal: EMBO JImpact FactorImpact Factor: 8.662 

Cites in 2007 to articles published in:Cites in 2007 to articles published in: 20062006 = 4170 

20052005 = 3981 05+0605+06 = 8151

Number of articles publishedNumber of articles published in:in: 20062006 = 547 

20052005 = 394 05+0605+06 = 941

Calculation:Calculation:

Cites to recent articlesCites to recent articles 8151 ------------------------------ = ---------- = 8.662

Number of recent articlesNumber of recent articles 941

Le calcul sur deux ans n'est pas forcément le Le calcul sur deux ans n'est pas forcément le plus adapté à toutes les spécialités : plus adapté à toutes les spécialités :

Certaines peuvent mieux supporterCertaines peuvent mieux supporter

5 ans de délai5 ans de délai

Notamment parce que la nature des articles publiés possède un caractère

plus pérenne et plus fondamental, appréciable (et donc "citable") sur une

plus longue durée

Facteurs de pondération:Facteurs de pondération:

- Périodicité + ou – grande: 2 ou 52 num. par an ?Périodicité + ou – grande: 2 ou 52 num. par an ?

- Nombre d’articles par numéroNombre d’articles par numéro

- Changement de titre en cours d’annéeChangement de titre en cours d’année

- « Jeune » périodique (libre, par ex.)« Jeune » périodique (libre, par ex.)

- Nombre de textes type « Nombre de textes type « review review  » »

- Langue, alphabetLangue, alphabet

- AutocitationsAutocitations

Spécificités SHSSpécificités SHSSpécificités SHSSpécificités SHS

• Primauté des monographies• Pérennité des contenus• En France, importance de la

langue française

Schéma de l’enquête CNRS de Schéma de l’enquête CNRS de 2004 sur les périodiques SHS2004 sur les périodiques SHS

• Primauté des monographies• Pérennité des contenus• En France, importance de la

langue française

Schéma de l’enquête CNRS de Schéma de l’enquête CNRS de 2004 sur les périodiques SHS2004 sur les périodiques SHS

Scholar GoogleScholar GoogleScholar GoogleScholar Google

• Une réplique « ouverte » du Une réplique « ouverte » du W.O.S.W.O.S.

• Pas d’exploitation Pas d’exploitation « sophistiquée » des données« sophistiquée » des données

• Délimitation du corpus Délimitation du corpus inconnue et mouvanteinconnue et mouvante

• Une réplique « ouverte » du Une réplique « ouverte » du W.O.S.W.O.S.

• Pas d’exploitation Pas d’exploitation « sophistiquée » des données« sophistiquée » des données

• Délimitation du corpus Délimitation du corpus inconnue et mouvanteinconnue et mouvante

La « Fronde »La « Fronde »La « Fronde »La « Fronde »

Publication d’articles Publication d’articles polémiques, notamment polémiques, notamment

dans dans NatureNature

Publication d’articles Publication d’articles polémiques, notamment polémiques, notamment

dans dans NatureNature

La fièvre de l’évaluation La fièvre de l’évaluation de la recherche. Du de la recherche. Du

mauvais usage de faux mauvais usage de faux indicateursindicateurs

La fièvre de l’évaluation La fièvre de l’évaluation de la recherche. Du de la recherche. Du

mauvais usage de faux mauvais usage de faux indicateursindicateurs

Note de Recherche

Yves GINGRAS – Mai 2008Yves GINGRAS – Mai 2008Centre interuniversitaire de

recherche sur la science et la technologie

UQAM - QuébecUQAM - Québec

Note de Recherche

Yves GINGRAS – Mai 2008Yves GINGRAS – Mai 2008Centre interuniversitaire de

recherche sur la science et la technologie

UQAM - QuébecUQAM - Québec

Citebase Citebase et et CiteseerCiteseerUne autre conception du Une autre conception du Facteur d’ImpactFacteur d’Impact

Citebase Citebase et et CiteseerCiteseerUne autre conception du Une autre conception du Facteur d’ImpactFacteur d’Impact• Des expériences fondées sur l’OAIDes expériences fondées sur l’OAI• Comparaisons portant sur:Comparaisons portant sur:

- Nb. de téléchargements- Nb. de téléchargements- Nb. de citations générées- Nb. de citations générées- Temps écoulé entre ces deux - Temps écoulé entre ces deux

actionsactions- Cycle de la publication (long - Cycle de la publication (long

terme)terme)

• Des expériences fondées sur l’OAIDes expériences fondées sur l’OAI• Comparaisons portant sur:Comparaisons portant sur:

- Nb. de téléchargements- Nb. de téléchargements- Nb. de citations générées- Nb. de citations générées- Temps écoulé entre ces deux - Temps écoulé entre ces deux

actionsactions- Cycle de la publication (long - Cycle de la publication (long

terme)terme)

Facteur de HIRSCHFacteur de HIRSCH Facteur de HIRSCHFacteur de HIRSCH

Calcul d’une moyenne faisant Calcul d’une moyenne faisant coïncider:coïncider:

• Nb de Publications et Nb de Publications et • Nb de CitationsNb de Citations

= indice = indice hh

Calcul d’une moyenne faisant Calcul d’une moyenne faisant coïncider:coïncider:

• Nb de Publications et Nb de Publications et • Nb de CitationsNb de Citations

= indice = indice hh

Il y associe unIl y associe un indiceindice m portant surportant sur la duréela durée n (nombre d’années)(nombre d’années)

résultant de la penterésultant de la pente (slope)(slope) h versusversus n

•m m 11 ( (h h = 20 après 20 ans d’activité) : = 20 après 20 ans d’activité) : chercheurchercheur de « bon niveau » de « bon niveau »•m m 22 ( (h h = 40 après 20 ans d’activité) : = 40 après 20 ans d’activité) : chercheur responsable d’une équipe de chercheur responsable d’une équipe de haut niveau dans une université très cotéehaut niveau dans une université très cotée•m ≥ m ≥ 33 ( (h h = 60 après 20 ans d’activité, = 60 après 20 ans d’activité, voire 90 après 30 ans) : chercheur hors voire 90 après 30 ans) : chercheur hors pair, Nobel etc…pair, Nobel etc…

Le facteur G d’EggheLe facteur G d’Egghe

• Le facteur Le facteur GG est calculé comme le est calculé comme le plus grand nombre plus grand nombre GG tel que les tel que les GG publications les plus citées ont reçu publications les plus citées ont reçu au moins au moins G G citations au carrécitations au carré

• Il est censé remédier au « gel » des Il est censé remédier au « gel » des publications captées au-dessus de publications captées au-dessus de l’indice H en tenant compte du l’indice H en tenant compte du nombre exceptionnellement élevé de nombre exceptionnellement élevé de citations générées par quelques-citations générées par quelques-unes d’entre ellesunes d’entre elles

• Le facteur Le facteur GG est calculé comme le est calculé comme le plus grand nombre plus grand nombre GG tel que les tel que les GG publications les plus citées ont reçu publications les plus citées ont reçu au moins au moins G G citations au carrécitations au carré

• Il est censé remédier au « gel » des Il est censé remédier au « gel » des publications captées au-dessus de publications captées au-dessus de l’indice H en tenant compte du l’indice H en tenant compte du nombre exceptionnellement élevé de nombre exceptionnellement élevé de citations générées par quelques-citations générées par quelques-unes d’entre ellesunes d’entre elles

EVALUATION EVALUATION QUALITATIVEQUALITATIVE

(hors Citations)

Le Le Peer Reviewing Peer Reviewing classiqueclassique

Le Le Peer Reviewing Peer Reviewing classiqueclassique

• 2 2 referees referees en principe en principe anonymesanonymes• Arbitrage parArbitrage par l’l’Editor in ChiefEditor in Chief• 1 (rarement 2) « navettes »1 (rarement 2) « navettes » Voir les Recommandations aux Voir les Recommandations aux AuteursAuteursExemple de la Charte de Exemple de la Charte de l’American Chemical Societyl’American Chemical Society

• 2 2 referees referees en principe en principe anonymesanonymes• Arbitrage parArbitrage par l’l’Editor in ChiefEditor in Chief• 1 (rarement 2) « navettes »1 (rarement 2) « navettes » Voir les Recommandations aux Voir les Recommandations aux AuteursAuteursExemple de la Charte de Exemple de la Charte de l’American Chemical Societyl’American Chemical Society

L’évaluation qualitative L’évaluation qualitative coopérativecoopérative

L’évaluation qualitative L’évaluation qualitative coopérativecoopérative

Un réservoirUn réservoir : : arXivarXiv

Des périodiques Des périodiques : : European European Geological UnionGeological Union

Un groupe éditorialUn groupe éditorial : :

BMC - F1000BMC - F1000

Un réservoirUn réservoir : : arXivarXiv

Des périodiques Des périodiques : : European European Geological UnionGeological Union

Un groupe éditorialUn groupe éditorial : :

BMC - F1000BMC - F1000

Faculty of 1000 (1)Faculty of 1000 (1)

 

"Recommended""Recommended" Recommended reading for a section (i.e. of specialist interest) (F1000 Biology rating of 3)

 

"Must read" Must read for more than one subject/section (i.e. of general interest) (F1000 Biology rating of 6),

 

"Exceptional" A landmark paper representing the top 1% of publications (F1000 Biology rating of 9).

            Recommended

F1000 Factor 3.1

Must Read

F1000 Factor 6.2

  Exceptional

F1000 Factor 10.7

Fac of 1000 (2)Fac of 1000 (2)Fac of 1000 (2)Fac of 1000 (2)

• F1000 Factor =F1000 Factor = Moyenne des 2 scores les plus élevés + (Somme de tous les Scores/30)

• Exemple: 3 examinateurs, 2 Exemple: 3 examinateurs, 2

attribuent la mentionattribuent la mention Must Read, le , le 3è d3è déécerne l’Exceptionalcerne l’Exceptional => on a on a un F1000 Factor deun F1000 Factor de (6+9)/2 + (6+6+9)/30 = 8,2

• Ceci correspond Ceci correspond àà un "Exceptional" un "Exceptional" rating badge.rating badge.

• F1000 Factor =F1000 Factor = Moyenne des 2 scores les plus élevés + (Somme de tous les Scores/30)

• Exemple: 3 examinateurs, 2 Exemple: 3 examinateurs, 2

attribuent la mentionattribuent la mention Must Read, le , le 3è d3è déécerne l’Exceptionalcerne l’Exceptional => on a on a un F1000 Factor deun F1000 Factor de (6+9)/2 + (6+6+9)/30 = 8,2

• Ceci correspond Ceci correspond àà un "Exceptional" un "Exceptional" rating badge.rating badge.

F1000 – Les « perles F1000 – Les « perles cachées »cachées »F1000 – Les « perles F1000 – Les « perles cachées »cachées »• Signalement périodique

d’articles issus de revues « prestigieuses » à faible impact : Hidden Jewels

• Analogie avec le Journal Status de Bollen opposant revues « popular» vs. « prestigious »

• Signalement périodique d’articles issus de revues « prestigieuses » à faible impact : Hidden Jewels

• Analogie avec le Journal Status de Bollen opposant revues « popular» vs. « prestigious »

Alternatives à Alternatives à l’évaluationl’évaluation

des sources des sources

Alternatives à Alternatives à l’évaluationl’évaluation

des sources des sourcesL’EigenfactorEigenfactor de Carl Bergstrom (Dept. Biology Univ. Washington)ScimagoScimago Universités espagnoles de Universités espagnoles de Grenade, Extremadure, Grenade, Extremadure, Carlos III (Madrid) et Alcalá Carlos III (Madrid) et Alcalá de Henaresde Henares

L’EigenfactorEigenfactor de Carl Bergstrom (Dept. Biology Univ. Washington)ScimagoScimago Universités espagnoles de Universités espagnoles de Grenade, Extremadure, Grenade, Extremadure, Carlos III (Madrid) et Alcalá Carlos III (Madrid) et Alcalá de Henaresde Henares

L’L’EigenfactorEigenfactor de Carl de Carl Bergstrom (Dept. Biology Bergstrom (Dept. Biology Univ. Washington)Univ. Washington)

L’L’EigenfactorEigenfactor de Carl de Carl Bergstrom (Dept. Biology Bergstrom (Dept. Biology Univ. Washington)Univ. Washington)

Classement et Mapping Classement et Mapping des revues en prenant des revues en prenant souche sur le souche sur le JCR JCR de l’de l’ISIISIExécution itérative du Exécution itérative du Page RankPage RankCartographie des axes de Cartographie des axes de recherche, traçabilité des recherche, traçabilité des liensliensChaînage et passerelles Chaînage et passerelles entre disciplinesentre disciplines

Classement et Mapping Classement et Mapping des revues en prenant des revues en prenant souche sur le souche sur le JCR JCR de l’de l’ISIISIExécution itérative du Exécution itérative du Page RankPage RankCartographie des axes de Cartographie des axes de recherche, traçabilité des recherche, traçabilité des liensliensChaînage et passerelles Chaînage et passerelles entre disciplinesentre disciplines

L’L’EigenfactorEigenfactor de Carl de Carl Bergstrom (Dept. Biology Bergstrom (Dept. Biology Univ. Washington)Univ. Washington)

L’L’EigenfactorEigenfactor de Carl de Carl Bergstrom (Dept. Biology Bergstrom (Dept. Biology Univ. Washington)Univ. Washington)• Dans les liens subséquents, Dans les liens subséquents,

élargissement à tout type de documents élargissement à tout type de documents scientifiques (thèses, scientifiques (thèses, communications…)communications…)

• Évaluation sur cinq ansÉvaluation sur cinq ans• Ajustement automatique des moyennes Ajustement automatique des moyennes

de citations propres à chaque disciplinede citations propres à chaque discipline• S’inspire de la distinction S’inspire de la distinction PopularPopular

Prestigious Prestigious du du Journal StatusJournal Status de Bollen de Bollen

• Dans les liens subséquents, Dans les liens subséquents, élargissement à tout type de documents élargissement à tout type de documents scientifiques (thèses, scientifiques (thèses, communications…)communications…)

• Évaluation sur cinq ansÉvaluation sur cinq ans• Ajustement automatique des moyennes Ajustement automatique des moyennes

de citations propres à chaque disciplinede citations propres à chaque discipline• S’inspire de la distinction S’inspire de la distinction PopularPopular

Prestigious Prestigious du du Journal StatusJournal Status de Bollen de Bollen

Scimago - ScopusScimago - ScopusScimago - ScopusScimago - Scopus

• Même concept de calcul que Même concept de calcul que l’l’EigenfactorEigenfactor

• Page Rank appliqué au Page Rank appliqué au réservoir défini de la base réservoir défini de la base SCOPUSSCOPUS d’Elsevier d’Elsevier

• Couverture Couverture SCOPUSSCOPUS plus large plus large que le JCR qui sert de souche à que le JCR qui sert de souche à l’l’EigenfactorEigenfactor

• Même concept de calcul que Même concept de calcul que l’l’EigenfactorEigenfactor

• Page Rank appliqué au Page Rank appliqué au réservoir défini de la base réservoir défini de la base SCOPUSSCOPUS d’Elsevier d’Elsevier

• Couverture Couverture SCOPUSSCOPUS plus large plus large que le JCR qui sert de souche à que le JCR qui sert de souche à l’l’EigenfactorEigenfactor

Système SCEAS / DBLPSystème SCEAS / DBLPSystème SCEAS / DBLPSystème SCEAS / DBLP

• Évaluation des articles ou Évaluation des articles ou communicationscommunications

• Évaluation parallèle des sourcesÉvaluation parallèle des sources• Page RankPage Rank sur les liens sur les liens

électroniques + citations brutesélectroniques + citations brutes• Réservoir DBLP (DataBase systems Réservoir DBLP (DataBase systems

and Logic Programming ) de l’Univ. and Logic Programming ) de l’Univ. de Trèvesde Trèves

[Allemagne] : essentiellement [Allemagne] : essentiellement INFORMATIQUEINFORMATIQUE

• Évaluation des articles ou Évaluation des articles ou communicationscommunications

• Évaluation parallèle des sourcesÉvaluation parallèle des sources• Page RankPage Rank sur les liens sur les liens

électroniques + citations brutesélectroniques + citations brutes• Réservoir DBLP (DataBase systems Réservoir DBLP (DataBase systems

and Logic Programming ) de l’Univ. and Logic Programming ) de l’Univ. de Trèvesde Trèves

[Allemagne] : essentiellement [Allemagne] : essentiellement INFORMATIQUEINFORMATIQUE

Citation et Accès libreCitation et Accès libre

• Les articles en accès libre sur Les articles en accès libre sur le Web sont cités de 2,5 à 7 le Web sont cités de 2,5 à 7 fois plus que les autresfois plus que les autres

• La philosophie de l’accès libre La philosophie de l’accès libre n’a pas la citation pour objectif n’a pas la citation pour objectif principal mais de fait, il la principal mais de fait, il la facilitefacilite

• Les articles en accès libre sur Les articles en accès libre sur le Web sont cités de 2,5 à 7 le Web sont cités de 2,5 à 7 fois plus que les autresfois plus que les autres

• La philosophie de l’accès libre La philosophie de l’accès libre n’a pas la citation pour objectif n’a pas la citation pour objectif principal mais de fait, il la principal mais de fait, il la facilitefacilite

L’évaluation L’évaluation administrativeadministrativeL’évaluation L’évaluation administrativeadministrative•Au niveau national: Au niveau national: indicateurs de l’OSTindicateurs de l’OST

•Au niveau local: Au niveau local: systèmes 3 voletssystèmes 3 volets

Budget + Carrières Budget + Carrières +Publications +Publications (ex.:GRAAL ou INRA)(ex.:GRAAL ou INRA)

•Au niveau national: Au niveau national: indicateurs de l’OSTindicateurs de l’OST

•Au niveau local: Au niveau local: systèmes 3 voletssystèmes 3 volets

Budget + Carrières Budget + Carrières +Publications +Publications (ex.:GRAAL ou INRA)(ex.:GRAAL ou INRA)

Les 8 Indicateurs de Les 8 Indicateurs de l’OSTl’OSTLes 8 Indicateurs de Les 8 Indicateurs de l’OSTl’OST• Part de publications scientifiques • Indice de spécialisation scientifique • Part de citations• Indice d’impact relatif • Indice d’impact espéré • Ratio de citations relatif • Indice d’activité par classe de

citations• Part d’articles en co-publication

• Part de publications scientifiques • Indice de spécialisation scientifique • Part de citations• Indice d’impact relatif • Indice d’impact espéré • Ratio de citations relatif • Indice d’activité par classe de

citations• Part d’articles en co-publication

Facteurs d’Impact Facteurs d’Impact et Axes de Rechercheet Axes de Recherche Facteurs d’Impact Facteurs d’Impact et Axes de Rechercheet Axes de Recherche • 107 107 Subject CategoriesSubject Categories du JCR du JCR

regroupées en 8 disciplines regroupées en 8 disciplines académiques par l’OSTacadémiques par l’OST

• Les Les Subject Categories Subject Categories font font l’objet d’un Facteur d’Impact l’objet d’un Facteur d’Impact agrégé sur le JCR dont la agrégé sur le JCR dont la variation annuelle peut faire variation annuelle peut faire varier les politiques de recherchevarier les politiques de recherche

• 107 107 Subject CategoriesSubject Categories du JCR du JCR regroupées en 8 disciplines regroupées en 8 disciplines académiques par l’OSTacadémiques par l’OST

• Les Les Subject Categories Subject Categories font font l’objet d’un Facteur d’Impact l’objet d’un Facteur d’Impact agrégé sur le JCR dont la agrégé sur le JCR dont la variation annuelle peut faire variation annuelle peut faire varier les politiques de recherchevarier les politiques de recherche

Pour conclurePour conclure

• La citation: un problème déontologique ?

• Son ampleur et ses dérapages n’impliquent-ils pas une action de la communauté scientifique ?

• Importance d’un travail coopératif sur les alternatives

• La citation: un problème déontologique ?

• Son ampleur et ses dérapages n’impliquent-ils pas une action de la communauté scientifique ?

• Importance d’un travail coopératif sur les alternatives

Sources (1)Sources (1)Sources (1)Sources (1)

• http://isiwebofknowledge.com/• http:// arxiv.org • http://citebase.org • http://citeseer.ist.psu.edu • http://scholar.google.com • http://www.f1000biology.com/

home/

• http://isiwebofknowledge.com/• http:// arxiv.org • http://citebase.org • http://citeseer.ist.psu.edu • http://scholar.google.com • http://www.f1000biology.com/

home/

Sources (2)Sources (2)Sources (2)Sources (2)

•http://www.eigenfactor.org

•http://scimagojr.com

•http://www.eigenfactor.org

•http://scimagojr.com

Sources Sources (3)(3)Sources Sources (3)(3)

• Hirsch, Jorge E.: Hirsch, Jorge E.: PNAS, Nov. 15, 2005, 102 PNAS, Nov. 15, 2005, 102 (46) 16569-16572(46) 16569-16572www.pnas.org/cgi/doi/10.1073/pnas.0507655102

• Rodriguez, Marko A.; Bollen, Johan; Van de Rodriguez, Marko A.; Bollen, Johan; Van de Sompel, Herbert. - Journal Status.Sompel, Herbert. - Journal Status. arXiv:cs.GL/060103 v1 9 Jan 2006 http://www.arxiv.org/PS_cache/cs/pdf/0601/0601030v1.pdf

• Les mêmesLes mêmes:: The convergence of digital The convergence of digital libraries and the peer-review process 2006libraries and the peer-review process 2006

http://arxiv.org/ftp/cs/papers/0504/0504084.pdf

• Hirsch, Jorge E.: Hirsch, Jorge E.: PNAS, Nov. 15, 2005, 102 PNAS, Nov. 15, 2005, 102 (46) 16569-16572(46) 16569-16572www.pnas.org/cgi/doi/10.1073/pnas.0507655102

• Rodriguez, Marko A.; Bollen, Johan; Van de Rodriguez, Marko A.; Bollen, Johan; Van de Sompel, Herbert. - Journal Status.Sompel, Herbert. - Journal Status. arXiv:cs.GL/060103 v1 9 Jan 2006 http://www.arxiv.org/PS_cache/cs/pdf/0601/0601030v1.pdf

• Les mêmesLes mêmes:: The convergence of digital The convergence of digital libraries and the peer-review process 2006libraries and the peer-review process 2006

http://arxiv.org/ftp/cs/papers/0504/0504084.pdf

Sources Sources (4)(4)Sources Sources (4)(4)

• La fièvre de l’évaluation de la La fièvre de l’évaluation de la recherche. Du mauvais usage de recherche. Du mauvais usage de faux indicateursfaux indicateurs

• Note de Recherche Yves GINGRAS – Yves GINGRAS – Mai 2008 Mai 2008 Centre interuniversitaire de recherche sur la science et la technologie UAQAM – QuébecUAQAM – Québec

• http://www.cirst.uqam.ca/Portals/http://www.cirst.uqam.ca/Portals/0/docs/note_rech/2008_05.pdf0/docs/note_rech/2008_05.pdf

• La fièvre de l’évaluation de la La fièvre de l’évaluation de la recherche. Du mauvais usage de recherche. Du mauvais usage de faux indicateursfaux indicateurs

• Note de Recherche Yves GINGRAS – Yves GINGRAS – Mai 2008 Mai 2008 Centre interuniversitaire de recherche sur la science et la technologie UAQAM – QuébecUAQAM – Québec

• http://www.cirst.uqam.ca/Portals/http://www.cirst.uqam.ca/Portals/0/docs/note_rech/2008_05.pdf0/docs/note_rech/2008_05.pdf