SlideShare une entreprise Scribd logo
« modes de peer-reviewing et modes
de publication »
Fev 2019
Gabriel Gallezot
Evaluation pour la publication…
Evaluation qualitative : traditionnellement a priori, le
peer reviewing, …
•Auto-évaluation
•Collègues de labo (évaluation)
•Direction de N° (guest éditor) ou d’ouvrage
(sélection/évaluation)
•Comité de rédaction (sélection)
•Comité scientifique (évaluation)
•Editeur (évaluation/correction)
•Lecteur (évaluation)
… Publication pour l’évaluation
Evaluation quantitative : a posteriori, la bibliométrie et
autres métriques
•À l’origine : Garfield et le Science Citation Index (SCI,
1961) de l’Institute for Scientific Information (ISI), puis
JCR (1975)
•Des référentiels : Wos OST, ERIH, JQL, listes
HCeRES, Scopus, …des bases (JournalBase), des
listes…
•Des mesures : Impact Factor, Classement de
Shanghai, H index, Eigen Factor, Leiden Facteurs,
indicateurs OST,...
•Des évaluations : HCERES, CNU, Université, …
Et … d’autres formes d’évaluation et de mesures
Altmetrics,F1000, Citeseer, Citebase, scholar
●c’est dans cette « dialectique » de l’évaluation amont
/ évaluation aval que se joue une partie de la
question de l’intégrité scientifique
●Qualité des résultats publiés (?), passer le crible du
« peer-reviewing » (?) pour être publier dans une
« bonne revue » (?) et ainsi « créditer » son indice de
citation (?) pour obtenir des financement (?), faire
avancer sa carrière (?)
=> notions étroitement liées d’intégrité Sc. /
évaluation / publication
Intégrité scientifique
« L’intégrité scientifique est la conduite intègre et honnête qui doit présider à
toute recherche. »
[…] « La qualité et la fiabilité de la production scientifique dépendent d’elle »
[…] « Comment alors supporter la course à la « valorisation », au
financement et à la publication, sachant l’importance donnée à la liste des
publications – qui se doivent d’être dans des journaux à haut facteur
d’impact – pour la plupart des jurys ? Et comment ne pas reconnaître
qu’aujourd‘hui, les conditions de l’exercice de la recherche se sont
considérablement durcies dans un environnement de concurrence
mondialisée ? » (Corvol, 2016)
- Faudres : FFP = Fabrication, Falsification, Plagiat
- Méconduites scientifiques : FFP + pratiques questionnables
de recherche (PQR) + conflits d’intérêt + signatures des publi
●Délégué intégrité sc. dans les Ets de Recherche
●En 2015 charte « déontologie » signée par la CPU et 7 Ets de recherche (ratifiée oct 2018)
●Rapport Corvol juin 2016 : « le respect de l’intégrité scientifique relève d’une responsabilité à la fois individuelle et
collective en terme d’exemplarité de l’ensemble de la communauté scientifique. »
●Mars 2017 l’OFIS (Office français de l’intégrité scientifique) au sein du Hcéres
La fraude « annoncée » de plus en plus importe : Fang, Ferric
C., R. Grant Steen, et Arturo Casadevall. 2012. « Misconduct accounts
for the majority of retracted scientific publications ». Proceedings of the
National Academy of Sciences.
Et Pierre Barthélémy, « passeurdesciences »
http://passeurdesciences.blog.lemonde.fr/2012/10/03/la-fraude-scientifique-est-plus-
repandue-recherche/
" l'augmentation des rétractions et des manquements à l'éthique peut résulter, au
moins en partie, du système de la science au résultat, basé sur la logique
économique de la prime au vainqueur, qui confère au premier des
récompenses disproportionnées, sous la forme de subventions, de postes et
de prix, à une période où le financement de la recherche se restreint ".
Fonctionnement des revues
7
•Deux fonctions : editor et publisher
–Editeur scientifique = gère le contenu scientifique
–Editeur commercial = s ’occupe de
•la production
•le marketing
•la diffusion
•Les contrats avec les auteurs
•Le comité de rédaction
•Le comité scientifique
•Evaluation par les pairs
Source : M.Lefebvre / M. Bertin – Urfist Toulouse
Un système d’évaluation par rapporteurs
8
Limites de ce système
–Rapporteurs pas toujours spécialistes
–pénurie de reviewers
–anonymat difficile à respecter
–longueur de la procédure
–dimension subjective de la procédure
–anonymat favorise désengagement
–évaluation ¹ vérification
–plagiat
–Copinage
–…
=> alors quel « peer reviewing » ?
Source : M.Lefebvre / M. Bertin – Urfist Toulouse
Penser au contexte actuel :
l’Open Science / Science Ouverte
et publicisation
FAIR ou pourquoi et comment
« entreposer » mes données ?
Source : Note d’orienta,on proposée par le Collège « Europe et interna,onal » du Coso. SPSO du 23 janvier 2019.
Rédac,on : David Aymonin ; Isabelle Mauger Perez et les membres du Collège Europe et interna,onal. 17/01/2019
DORA (Declaration On Research Assessment)
et Manifeste de Leiden
Faire évoluer l’évaluation !
https://sfdora.org/read/fr/ DORA (2012) :
- la nécessité de mettre un terme à l’utilisation d’indicateurs basés sur les revues, c
- celle d’évaluer la recherche sur sa valeur intrinsèque plutôt qu’en fonction de la rev
- celle encore d’exploiter au mieux les possibilités offertes par la publication en ligne
10 principes de Leiden (2015) :
http://www.leidenmanifesto.org/translations.html
DORA et Manifeste de leiden
Faire évoluer l’évaluation !
Ne plus faire du « JIF chaising » et utiliser la bibliome
Source : JNSO2018
Source : BJSM Online First, published on November 17, 2017 as 10.1136/bjsports-2017-098367
Publicisation
From « Publish or Perish » to « Visible or Vanish »
+ INC : ORCID, ...
●Différences AO / RLA : Green / Gold / diamond
et et le « Plan S » (dia suivante)
●Incise : Gold APC et éditeur prédateur :
https://predatoryjournals.com/journals/
●Pré-print, post-print
●OAI-PMH / google scholar / SciHub ?
●Voir aussi DOAB : https://www.doabooks.org/
●Loi sur la République Numérique (dias suivantes)
9 voies de l’OA, conformes (?) au Plan S.
green, gold apc, diamond
https://101innovations.wordpress.com/2018/11/30/nine-routes-towards-plan-s-compliance/
Plan S
https://www.coalition-s.org/10-principles/
Structuré autour de 10 principes applicables d'ici
2020 pour la recherche financée par des
subventions publiques
1. les auteurs conservent le droit d'auteur sur
leurs publications, qui doivent être publiés sous
une licence libre de droits telles que Creative
Commons;
2. les membres de la coalition établissent des
critères et prérequis solides pour déterminer la
conformité du libre accès des revues et des plate-
formes ;
Déclaration commune franco-
allemande à Berlin 14
●[...] compte tenu de la situation actuelle de
l'édition scientifique et des perspectives ouvertes
par la publication de Plan S, il nous semblerait
raisonnable de proposer, à moyen terme, un
soutien formel et financier à la coexistence de
trois modes de publication en parties à peu près
égales:
●1. la diffusion des écrits scientifiques, dès leur
publication, en accès libre dans une archive
ouverte, permanente et reconnue par les
la loi sur la République
Numérique
La loi est promulguée le 7 octobre 2016. Elle favorise l’ouverture
et la circulation des données et du savoir et à garantir un
environnement numérique accessible aux citoyens et respectueux
de la vie privée des internautes.
L’article 30 vise à renforcer le droit des chercheurs à diffuser
librement leurs travaux scientifiques majoritairement financées par
des fonds publics.
L’enjeu est de garantir l’accès de tous à la production scientifique
en respectant – si nécessaire – des délais d’embargo fixés en
cohérence avec les recommandations de l’Union européenne
(programme-cadre de recherche H2020)
Les objectifs de la loi pour une République numérique
Source : I. Gras & P. Mouron, AMU
Différents modes de publication,
différents modes de « peer review »,
à la recherche de la qualité ou de
changement de l’écosysteme de la
recherche :
Des exemples pour mieux
comprendre
« registered reports »
« An analysis now suggests that registering and peer-reviewing stu
Source : https://www.nature.com/articles/d41586-018-07118-1
164 revues acceptent
actuellement (fev 2019)
les « registered report » :
https://cos.io/rr/
Publier les recherches infructueuses
●De manière connexe Emergent Scientist (EmSci)
, une revue orienté étudiants propose de publier
également les hypothèses non fructueuses.
●Aspect formation à la recherche intègre par
l’exercice de la publication
●Appréhender le modèle de reviewing (les
étudiants peuvent être auteurs et rapporteurs)
Quelques exemples (suite)
Quelques exemples (suite)
●Les éditeurs prédateurs, dérive du Gold
APC : : https://predatoryjournals.com/journals/
●
●Megarevues : http://openaccess.inist.fr/?Les-
megarevues (ie ; PlosOne & PeerJ)
– Diffusion en ligne uniquement
– Mutidisciplinaires
– Mode d’évaluation différents (allégé, post peer
review, …)
– Délais de publication rapide
●Open peer reviewing (experience Vertigo),
avec plugin hypothes.is
expérimentation de La revue Vertigo (revues.org)
à Open peer review. Exemple sur un article
publié : http://vertigo.hypotheses.org/1924. Voir
OPRISM (Open Peer Review facilitation through
Social Media) , un modèle pour d’autres revues en
Open peer review sur OpenEdition
●Pubpeer et RetractionWatch, des sites dédiés à
la traque du retrait d’articles (qualité peer
reviewing vs. qualité du post open peer reviewing)
Quelques exemples (suite)
Retraction index
(en relation avec Retractionwatch et Pubpeer)
Fang, Ferric C., et Arturo Casadevall. 2011. « Retracted Science and the
Retraction Index ». Infection and Immunity 79(10): 3855-3859.
Correlation entre
L'IF et le retraction index
●Epi-revues (cf. EpiScience, du CCSD)
https://www.episciences.org/
Modèle à associer à PCI par exemple
« third-party » peer review
(dia suivante)
●Data paper / data journal : https://coop-ist.cirad.fr/aide-a-la-
publication/rediger/data-paper/5-liens-utiles-exemples-et-guides
Quelques exemples (suite)
PCI
https://peercommunityin.org/
déconnecter l’évaluation de l’article de sa publication
Favoriser le Green et réduire la valeur ajoutée des revu
Parfaitement compatible avec les Epi-revues
●Publons : valoriser son travail de Peer reviewing
(interfaçage Orcid, mais attention racheter par
Clarivate en 2017 ) https://publons.com/
Quelques exemples (suite)
En guise de conclusion :
Entre dispositif hypertélique et slow science
●Une chaîne de dispositifs socio-techniques dont
l’utilisateur ne peut se libérer.
●Retrouver le temps de la recherche
●Pour éviter un cycle absurde ? des logiciels
« d’écriture » d’articles (ex. SCIgen) et des outils
informatique (cf. IA ou autres) à la place des
reviewers :https://pdos.csail.mit.edu/archive/scigen/ et
https://retractionwatch.com/2016/09/02/weve-seen-computer-generated-fake-papers-get-published-
now-we-have-computer-generated-fake-peer-reviews/
- penser qualité, fiabilité (intégrité) et non

Contenu connexe

Tendances

Master veille informationnelle_2016-2017_partie3
Master veille informationnelle_2016-2017_partie3Master veille informationnelle_2016-2017_partie3
Master veille informationnelle_2016-2017_partie3
Jean-Paul Thomas
 
ResearcherID, ORCID, IdHAL : enjeux et perspectives des identifiants chercheurs
ResearcherID, ORCID, IdHAL : enjeux et perspectives  des identifiants chercheursResearcherID, ORCID, IdHAL : enjeux et perspectives  des identifiants chercheurs
ResearcherID, ORCID, IdHAL : enjeux et perspectives des identifiants chercheurs
pascal aventurier
 
Former les enseignants-chercheurs a l information scientifique
Former les enseignants-chercheurs a l information scientifiqueFormer les enseignants-chercheurs a l information scientifique
Former les enseignants-chercheurs a l information scientifique
Manuel Durand Barthez
 
Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...
Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...
Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...
URFIST de Paris
 
Blogosphère scientifique en SHS : présentation de la plateforme Hypothèses
Blogosphère scientifique en SHS : présentation de la plateforme HypothèsesBlogosphère scientifique en SHS : présentation de la plateforme Hypothèses
Blogosphère scientifique en SHS : présentation de la plateforme Hypothèses
URFIST de Rennes
 
Administrer un portail et gérer une collection dans HAL
Administrer un portail et gérer une collection dans HALAdministrer un portail et gérer une collection dans HAL
Administrer un portail et gérer une collection dans HAL
Françoise Gouzi
 
Open Access scientific Literature
Open Access scientific LiteratureOpen Access scientific Literature
Open Access scientific Literature
Manuel Durand Barthez
 
Usages des réseaux sociaux académiques : enjeux et opportunités (2016)
Usages des réseaux sociaux académiques : enjeux et opportunités (2016)Usages des réseaux sociaux académiques : enjeux et opportunités (2016)
Usages des réseaux sociaux académiques : enjeux et opportunités (2016)
pascal aventurier
 
Master veille informationnelle_2016-2017_partie4
Master veille informationnelle_2016-2017_partie4Master veille informationnelle_2016-2017_partie4
Master veille informationnelle_2016-2017_partie4
Jean-Paul Thomas
 
Utiliser Twitter pour la veille et la communication
Utiliser Twitter pour la veille et la communicationUtiliser Twitter pour la veille et la communication
Utiliser Twitter pour la veille et la communication
URFIST de Rennes
 
Recherche scientifique
Recherche scientifiqueRecherche scientifique
Recherche scientifique
Ibrahim Bounhas
 
4agc _biblio2_2010
4agc _biblio2_20104agc _biblio2_2010
4agc _biblio2_2010
Laetitia Guillard
 
Master veille informationnelle_2016-2017_partie1
Master veille informationnelle_2016-2017_partie1Master veille informationnelle_2016-2017_partie1
Master veille informationnelle_2016-2017_partie1
Jean-Paul Thomas
 
Humanités numériques - Digital Humanities
Humanités numériques - Digital HumanitiesHumanités numériques - Digital Humanities
Humanités numériques - Digital Humanities
URFIST de Paris
 
L'identité numérique du doctorant
L'identité numérique du doctorantL'identité numérique du doctorant
L'identité numérique du doctorant
Alain Marois
 
Master veille informationnelle_2016-2017_partie2
Master veille informationnelle_2016-2017_partie2Master veille informationnelle_2016-2017_partie2
Master veille informationnelle_2016-2017_partie2
Jean-Paul Thomas
 
Curation et curateurs en vogue sur le web
Curation et  curateurs en vogue sur le webCuration et  curateurs en vogue sur le web
Curation et curateurs en vogue sur le web
paolinem
 
Outils de recherche et de veille sur l'actualité
Outils de recherche et de veille sur l'actualité Outils de recherche et de veille sur l'actualité
Outils de recherche et de veille sur l'actualité
URFIST de Rennes
 
Stage outils curation_2014-12-03
Stage outils curation_2014-12-03Stage outils curation_2014-12-03
Stage outils curation_2014-12-03
URFIST de Rennes
 
Gérer ses signets en ligne
Gérer ses signets en ligne Gérer ses signets en ligne
Gérer ses signets en ligne
URFIST de Rennes
 

Tendances (20)

Master veille informationnelle_2016-2017_partie3
Master veille informationnelle_2016-2017_partie3Master veille informationnelle_2016-2017_partie3
Master veille informationnelle_2016-2017_partie3
 
ResearcherID, ORCID, IdHAL : enjeux et perspectives des identifiants chercheurs
ResearcherID, ORCID, IdHAL : enjeux et perspectives  des identifiants chercheursResearcherID, ORCID, IdHAL : enjeux et perspectives  des identifiants chercheurs
ResearcherID, ORCID, IdHAL : enjeux et perspectives des identifiants chercheurs
 
Former les enseignants-chercheurs a l information scientifique
Former les enseignants-chercheurs a l information scientifiqueFormer les enseignants-chercheurs a l information scientifique
Former les enseignants-chercheurs a l information scientifique
 
Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...
Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...
Veille, visibilité et communication : les atouts des réseaux sociaux pour le ...
 
Blogosphère scientifique en SHS : présentation de la plateforme Hypothèses
Blogosphère scientifique en SHS : présentation de la plateforme HypothèsesBlogosphère scientifique en SHS : présentation de la plateforme Hypothèses
Blogosphère scientifique en SHS : présentation de la plateforme Hypothèses
 
Administrer un portail et gérer une collection dans HAL
Administrer un portail et gérer une collection dans HALAdministrer un portail et gérer une collection dans HAL
Administrer un portail et gérer une collection dans HAL
 
Open Access scientific Literature
Open Access scientific LiteratureOpen Access scientific Literature
Open Access scientific Literature
 
Usages des réseaux sociaux académiques : enjeux et opportunités (2016)
Usages des réseaux sociaux académiques : enjeux et opportunités (2016)Usages des réseaux sociaux académiques : enjeux et opportunités (2016)
Usages des réseaux sociaux académiques : enjeux et opportunités (2016)
 
Master veille informationnelle_2016-2017_partie4
Master veille informationnelle_2016-2017_partie4Master veille informationnelle_2016-2017_partie4
Master veille informationnelle_2016-2017_partie4
 
Utiliser Twitter pour la veille et la communication
Utiliser Twitter pour la veille et la communicationUtiliser Twitter pour la veille et la communication
Utiliser Twitter pour la veille et la communication
 
Recherche scientifique
Recherche scientifiqueRecherche scientifique
Recherche scientifique
 
4agc _biblio2_2010
4agc _biblio2_20104agc _biblio2_2010
4agc _biblio2_2010
 
Master veille informationnelle_2016-2017_partie1
Master veille informationnelle_2016-2017_partie1Master veille informationnelle_2016-2017_partie1
Master veille informationnelle_2016-2017_partie1
 
Humanités numériques - Digital Humanities
Humanités numériques - Digital HumanitiesHumanités numériques - Digital Humanities
Humanités numériques - Digital Humanities
 
L'identité numérique du doctorant
L'identité numérique du doctorantL'identité numérique du doctorant
L'identité numérique du doctorant
 
Master veille informationnelle_2016-2017_partie2
Master veille informationnelle_2016-2017_partie2Master veille informationnelle_2016-2017_partie2
Master veille informationnelle_2016-2017_partie2
 
Curation et curateurs en vogue sur le web
Curation et  curateurs en vogue sur le webCuration et  curateurs en vogue sur le web
Curation et curateurs en vogue sur le web
 
Outils de recherche et de veille sur l'actualité
Outils de recherche et de veille sur l'actualité Outils de recherche et de veille sur l'actualité
Outils de recherche et de veille sur l'actualité
 
Stage outils curation_2014-12-03
Stage outils curation_2014-12-03Stage outils curation_2014-12-03
Stage outils curation_2014-12-03
 
Gérer ses signets en ligne
Gérer ses signets en ligne Gérer ses signets en ligne
Gérer ses signets en ligne
 

Similaire à Modes de peer-reviewing et modes de publication dans le contexte de la Science Ouverte

Le rôle de l'Open Access dans le paysage de l'IST
Le rôle de l'Open Access dans le paysage de l'ISTLe rôle de l'Open Access dans le paysage de l'IST
Le rôle de l'Open Access dans le paysage de l'IST
Françoise Gouzi
 
Retour sur 5 années d'évolution des problématiques IST : rapport d'étonnement
Retour sur 5 années d'évolution des problématiques IST : rapport d'étonnementRetour sur 5 années d'évolution des problématiques IST : rapport d'étonnement
Retour sur 5 années d'évolution des problématiques IST : rapport d'étonnement
Antoine Blanchard
 
Évaluation des productions scientifiques : des innovations en SHS ?
Évaluation des productions scientifiques : des innovations en SHS ?Évaluation des productions scientifiques : des innovations en SHS ?
Évaluation des productions scientifiques : des innovations en SHS ?
Collectif PAPERA
 
IST, comment préparer l'avenir ?
IST, comment préparer l'avenir ?IST, comment préparer l'avenir ?
IST, comment préparer l'avenir ?
ABES
 
En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?
Manuel Durand Barthez
 
Le libre accès à l'IST: enjeux et ressources pour les doctorants
Le libre accès à l'IST: enjeux et ressources pour les doctorantsLe libre accès à l'IST: enjeux et ressources pour les doctorants
Le libre accès à l'IST: enjeux et ressources pour les doctorants
Université Aix-Marseille - Service commun de la documentation
 
La publication scientifiques diaporama CM 2016
La publication scientifiques diaporama CM 2016La publication scientifiques diaporama CM 2016
La publication scientifiques diaporama CM 2016
Bibliothèques universitaires de Rennes 1
 
Formation recherche documentaire doctorants sciences 27 10_10
Formation recherche documentaire doctorants sciences 27 10_10Formation recherche documentaire doctorants sciences 27 10_10
Formation recherche documentaire doctorants sciences 27 10_10
URFIST de Strasbourg
 
Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018
Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018
Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018
IST IRD - Service IST de l'Institut de Recherche pour le Développement
 
En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?
URFIST de Paris
 
Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...
Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...
Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...
Adou Jean Constant ATTA
 
Les revues scientifiques et le libre accès
Les revues scientifiques et le libre accèsLes revues scientifiques et le libre accès
Les revues scientifiques et le libre accès
Bessem Aamira
 
Évaluation & Valorisation des résultats de la recherche
Évaluation & Valorisation des résultats de la rechercheÉvaluation & Valorisation des résultats de la recherche
Évaluation & Valorisation des résultats de la recherche
Mokhtar Ben Henda
 
HAL déposer et accompagner - Exporter les données, créer une page web, gérer...
HAL déposer et accompagner - Exporter les données, créer une page web, gérer...HAL déposer et accompagner - Exporter les données, créer une page web, gérer...
HAL déposer et accompagner - Exporter les données, créer une page web, gérer...
Odile Contat
 
Colloque évaluation de la recherche, oct. 2016
Colloque évaluation de la recherche, oct. 2016Colloque évaluation de la recherche, oct. 2016
Colloque évaluation de la recherche, oct. 2016
Myrtille Jouanno
 
Les métriques de la science (ou La bibliométrie pour les nuls)
Les métriques de la science (ou La bibliométrie pour les nuls)Les métriques de la science (ou La bibliométrie pour les nuls)
Les métriques de la science (ou La bibliométrie pour les nuls)
URFIST de Paris
 
Présentation HAL par Odile Contat - MESHS Lille 2015
Présentation HAL par Odile Contat - MESHS Lille 2015 Présentation HAL par Odile Contat - MESHS Lille 2015
Présentation HAL par Odile Contat - MESHS Lille 2015
MESHS
 
M1 meef maths 2017
M1 meef maths 2017M1 meef maths 2017
Etat des lieux et panorama des ressources
Etat des lieux et panorama des ressourcesEtat des lieux et panorama des ressources
Etat des lieux et panorama des ressourcesULB - Bibliothèques
 

Similaire à Modes de peer-reviewing et modes de publication dans le contexte de la Science Ouverte (20)

Le rôle de l'Open Access dans le paysage de l'IST
Le rôle de l'Open Access dans le paysage de l'ISTLe rôle de l'Open Access dans le paysage de l'IST
Le rôle de l'Open Access dans le paysage de l'IST
 
Retour sur 5 années d'évolution des problématiques IST : rapport d'étonnement
Retour sur 5 années d'évolution des problématiques IST : rapport d'étonnementRetour sur 5 années d'évolution des problématiques IST : rapport d'étonnement
Retour sur 5 années d'évolution des problématiques IST : rapport d'étonnement
 
100608 cs corte
100608 cs corte100608 cs corte
100608 cs corte
 
Évaluation des productions scientifiques : des innovations en SHS ?
Évaluation des productions scientifiques : des innovations en SHS ?Évaluation des productions scientifiques : des innovations en SHS ?
Évaluation des productions scientifiques : des innovations en SHS ?
 
IST, comment préparer l'avenir ?
IST, comment préparer l'avenir ?IST, comment préparer l'avenir ?
IST, comment préparer l'avenir ?
 
En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?
 
Le libre accès à l'IST: enjeux et ressources pour les doctorants
Le libre accès à l'IST: enjeux et ressources pour les doctorantsLe libre accès à l'IST: enjeux et ressources pour les doctorants
Le libre accès à l'IST: enjeux et ressources pour les doctorants
 
La publication scientifiques diaporama CM 2016
La publication scientifiques diaporama CM 2016La publication scientifiques diaporama CM 2016
La publication scientifiques diaporama CM 2016
 
Formation recherche documentaire doctorants sciences 27 10_10
Formation recherche documentaire doctorants sciences 27 10_10Formation recherche documentaire doctorants sciences 27 10_10
Formation recherche documentaire doctorants sciences 27 10_10
 
Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018
Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018
Valorisation et Bibliometrie, Isabelle Henry, JeudIST IRD du 8/11/2018
 
En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?En marge du Rang A : quel espace pour la recherche ?
En marge du Rang A : quel espace pour la recherche ?
 
Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...
Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...
Contribution des Archives Ouvertes dans les grandes réformes de l'Enseignemen...
 
Les revues scientifiques et le libre accès
Les revues scientifiques et le libre accèsLes revues scientifiques et le libre accès
Les revues scientifiques et le libre accès
 
Évaluation & Valorisation des résultats de la recherche
Évaluation & Valorisation des résultats de la rechercheÉvaluation & Valorisation des résultats de la recherche
Évaluation & Valorisation des résultats de la recherche
 
HAL déposer et accompagner - Exporter les données, créer une page web, gérer...
HAL déposer et accompagner - Exporter les données, créer une page web, gérer...HAL déposer et accompagner - Exporter les données, créer une page web, gérer...
HAL déposer et accompagner - Exporter les données, créer une page web, gérer...
 
Colloque évaluation de la recherche, oct. 2016
Colloque évaluation de la recherche, oct. 2016Colloque évaluation de la recherche, oct. 2016
Colloque évaluation de la recherche, oct. 2016
 
Les métriques de la science (ou La bibliométrie pour les nuls)
Les métriques de la science (ou La bibliométrie pour les nuls)Les métriques de la science (ou La bibliométrie pour les nuls)
Les métriques de la science (ou La bibliométrie pour les nuls)
 
Présentation HAL par Odile Contat - MESHS Lille 2015
Présentation HAL par Odile Contat - MESHS Lille 2015 Présentation HAL par Odile Contat - MESHS Lille 2015
Présentation HAL par Odile Contat - MESHS Lille 2015
 
M1 meef maths 2017
M1 meef maths 2017M1 meef maths 2017
M1 meef maths 2017
 
Etat des lieux et panorama des ressources
Etat des lieux et panorama des ressourcesEtat des lieux et panorama des ressources
Etat des lieux et panorama des ressources
 

Dernier

Iris van Herpen. pptx
Iris         van         Herpen.      pptxIris         van         Herpen.      pptx
Iris van Herpen. pptx
Txaruka
 
Newsletter SPW Agriculture en province du Luxembourg du 12-06-24
Newsletter SPW Agriculture en province du Luxembourg du 12-06-24Newsletter SPW Agriculture en province du Luxembourg du 12-06-24
Newsletter SPW Agriculture en province du Luxembourg du 12-06-24
BenotGeorges3
 
Iris van Herpen. pptx
Iris            van        Herpen.     pptxIris            van        Herpen.     pptx
Iris van Herpen. pptx
Txaruka
 
Cycle de Formation Théâtrale 2024 / 2025
Cycle de Formation Théâtrale 2024 / 2025Cycle de Formation Théâtrale 2024 / 2025
Cycle de Formation Théâtrale 2024 / 2025
Billy DEYLORD
 
Iris van Herpen. pptx
Iris         van        Herpen.      pptxIris         van        Herpen.      pptx
Iris van Herpen. pptx
Txaruka
 
Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...
Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...
Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...
cristionobedi
 
Burkina Faso library newsletter May 2024
Burkina Faso library newsletter May 2024Burkina Faso library newsletter May 2024
Burkina Faso library newsletter May 2024
Friends of African Village Libraries
 
Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...
Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...
Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...
M2i Formation
 

Dernier (8)

Iris van Herpen. pptx
Iris         van         Herpen.      pptxIris         van         Herpen.      pptx
Iris van Herpen. pptx
 
Newsletter SPW Agriculture en province du Luxembourg du 12-06-24
Newsletter SPW Agriculture en province du Luxembourg du 12-06-24Newsletter SPW Agriculture en province du Luxembourg du 12-06-24
Newsletter SPW Agriculture en province du Luxembourg du 12-06-24
 
Iris van Herpen. pptx
Iris            van        Herpen.     pptxIris            van        Herpen.     pptx
Iris van Herpen. pptx
 
Cycle de Formation Théâtrale 2024 / 2025
Cycle de Formation Théâtrale 2024 / 2025Cycle de Formation Théâtrale 2024 / 2025
Cycle de Formation Théâtrale 2024 / 2025
 
Iris van Herpen. pptx
Iris         van        Herpen.      pptxIris         van        Herpen.      pptx
Iris van Herpen. pptx
 
Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...
Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...
Formation Intelligence Artificielle pour dirigeants- IT6-DIGITALIX 24_opt OK_...
 
Burkina Faso library newsletter May 2024
Burkina Faso library newsletter May 2024Burkina Faso library newsletter May 2024
Burkina Faso library newsletter May 2024
 
Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...
Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...
Formation M2i - Onboarding réussi - les clés pour intégrer efficacement vos n...
 

Modes de peer-reviewing et modes de publication dans le contexte de la Science Ouverte

  • 1. « modes de peer-reviewing et modes de publication » Fev 2019 Gabriel Gallezot
  • 2. Evaluation pour la publication… Evaluation qualitative : traditionnellement a priori, le peer reviewing, … •Auto-évaluation •Collègues de labo (évaluation) •Direction de N° (guest éditor) ou d’ouvrage (sélection/évaluation) •Comité de rédaction (sélection) •Comité scientifique (évaluation) •Editeur (évaluation/correction) •Lecteur (évaluation)
  • 3. … Publication pour l’évaluation Evaluation quantitative : a posteriori, la bibliométrie et autres métriques •À l’origine : Garfield et le Science Citation Index (SCI, 1961) de l’Institute for Scientific Information (ISI), puis JCR (1975) •Des référentiels : Wos OST, ERIH, JQL, listes HCeRES, Scopus, …des bases (JournalBase), des listes… •Des mesures : Impact Factor, Classement de Shanghai, H index, Eigen Factor, Leiden Facteurs, indicateurs OST,... •Des évaluations : HCERES, CNU, Université, … Et … d’autres formes d’évaluation et de mesures Altmetrics,F1000, Citeseer, Citebase, scholar
  • 4. ●c’est dans cette « dialectique » de l’évaluation amont / évaluation aval que se joue une partie de la question de l’intégrité scientifique ●Qualité des résultats publiés (?), passer le crible du « peer-reviewing » (?) pour être publier dans une « bonne revue » (?) et ainsi « créditer » son indice de citation (?) pour obtenir des financement (?), faire avancer sa carrière (?) => notions étroitement liées d’intégrité Sc. / évaluation / publication
  • 5. Intégrité scientifique « L’intégrité scientifique est la conduite intègre et honnête qui doit présider à toute recherche. » […] « La qualité et la fiabilité de la production scientifique dépendent d’elle » […] « Comment alors supporter la course à la « valorisation », au financement et à la publication, sachant l’importance donnée à la liste des publications – qui se doivent d’être dans des journaux à haut facteur d’impact – pour la plupart des jurys ? Et comment ne pas reconnaître qu’aujourd‘hui, les conditions de l’exercice de la recherche se sont considérablement durcies dans un environnement de concurrence mondialisée ? » (Corvol, 2016) - Faudres : FFP = Fabrication, Falsification, Plagiat - Méconduites scientifiques : FFP + pratiques questionnables de recherche (PQR) + conflits d’intérêt + signatures des publi ●Délégué intégrité sc. dans les Ets de Recherche ●En 2015 charte « déontologie » signée par la CPU et 7 Ets de recherche (ratifiée oct 2018) ●Rapport Corvol juin 2016 : « le respect de l’intégrité scientifique relève d’une responsabilité à la fois individuelle et collective en terme d’exemplarité de l’ensemble de la communauté scientifique. » ●Mars 2017 l’OFIS (Office français de l’intégrité scientifique) au sein du Hcéres
  • 6. La fraude « annoncée » de plus en plus importe : Fang, Ferric C., R. Grant Steen, et Arturo Casadevall. 2012. « Misconduct accounts for the majority of retracted scientific publications ». Proceedings of the National Academy of Sciences. Et Pierre Barthélémy, « passeurdesciences » http://passeurdesciences.blog.lemonde.fr/2012/10/03/la-fraude-scientifique-est-plus- repandue-recherche/ " l'augmentation des rétractions et des manquements à l'éthique peut résulter, au moins en partie, du système de la science au résultat, basé sur la logique économique de la prime au vainqueur, qui confère au premier des récompenses disproportionnées, sous la forme de subventions, de postes et de prix, à une période où le financement de la recherche se restreint ".
  • 7. Fonctionnement des revues 7 •Deux fonctions : editor et publisher –Editeur scientifique = gère le contenu scientifique –Editeur commercial = s ’occupe de •la production •le marketing •la diffusion •Les contrats avec les auteurs •Le comité de rédaction •Le comité scientifique •Evaluation par les pairs Source : M.Lefebvre / M. Bertin – Urfist Toulouse
  • 8. Un système d’évaluation par rapporteurs 8 Limites de ce système –Rapporteurs pas toujours spécialistes –pénurie de reviewers –anonymat difficile à respecter –longueur de la procédure –dimension subjective de la procédure –anonymat favorise désengagement –évaluation ¹ vérification –plagiat –Copinage –… => alors quel « peer reviewing » ? Source : M.Lefebvre / M. Bertin – Urfist Toulouse
  • 9.
  • 10.
  • 11.
  • 12. Penser au contexte actuel : l’Open Science / Science Ouverte et publicisation
  • 13.
  • 14. FAIR ou pourquoi et comment « entreposer » mes données ?
  • 15. Source : Note d’orienta,on proposée par le Collège « Europe et interna,onal » du Coso. SPSO du 23 janvier 2019. Rédac,on : David Aymonin ; Isabelle Mauger Perez et les membres du Collège Europe et interna,onal. 17/01/2019
  • 16. DORA (Declaration On Research Assessment) et Manifeste de Leiden Faire évoluer l’évaluation ! https://sfdora.org/read/fr/ DORA (2012) : - la nécessité de mettre un terme à l’utilisation d’indicateurs basés sur les revues, c - celle d’évaluer la recherche sur sa valeur intrinsèque plutôt qu’en fonction de la rev - celle encore d’exploiter au mieux les possibilités offertes par la publication en ligne 10 principes de Leiden (2015) : http://www.leidenmanifesto.org/translations.html
  • 17. DORA et Manifeste de leiden Faire évoluer l’évaluation ! Ne plus faire du « JIF chaising » et utiliser la bibliome Source : JNSO2018
  • 18. Source : BJSM Online First, published on November 17, 2017 as 10.1136/bjsports-2017-098367 Publicisation From « Publish or Perish » to « Visible or Vanish » + INC : ORCID, ...
  • 19. ●Différences AO / RLA : Green / Gold / diamond et et le « Plan S » (dia suivante) ●Incise : Gold APC et éditeur prédateur : https://predatoryjournals.com/journals/ ●Pré-print, post-print ●OAI-PMH / google scholar / SciHub ? ●Voir aussi DOAB : https://www.doabooks.org/ ●Loi sur la République Numérique (dias suivantes)
  • 20. 9 voies de l’OA, conformes (?) au Plan S. green, gold apc, diamond https://101innovations.wordpress.com/2018/11/30/nine-routes-towards-plan-s-compliance/
  • 21. Plan S https://www.coalition-s.org/10-principles/ Structuré autour de 10 principes applicables d'ici 2020 pour la recherche financée par des subventions publiques 1. les auteurs conservent le droit d'auteur sur leurs publications, qui doivent être publiés sous une licence libre de droits telles que Creative Commons; 2. les membres de la coalition établissent des critères et prérequis solides pour déterminer la conformité du libre accès des revues et des plate- formes ;
  • 22. Déclaration commune franco- allemande à Berlin 14 ●[...] compte tenu de la situation actuelle de l'édition scientifique et des perspectives ouvertes par la publication de Plan S, il nous semblerait raisonnable de proposer, à moyen terme, un soutien formel et financier à la coexistence de trois modes de publication en parties à peu près égales: ●1. la diffusion des écrits scientifiques, dès leur publication, en accès libre dans une archive ouverte, permanente et reconnue par les
  • 23. la loi sur la République Numérique
  • 24. La loi est promulguée le 7 octobre 2016. Elle favorise l’ouverture et la circulation des données et du savoir et à garantir un environnement numérique accessible aux citoyens et respectueux de la vie privée des internautes. L’article 30 vise à renforcer le droit des chercheurs à diffuser librement leurs travaux scientifiques majoritairement financées par des fonds publics. L’enjeu est de garantir l’accès de tous à la production scientifique en respectant – si nécessaire – des délais d’embargo fixés en cohérence avec les recommandations de l’Union européenne (programme-cadre de recherche H2020) Les objectifs de la loi pour une République numérique Source : I. Gras & P. Mouron, AMU
  • 25.
  • 26.
  • 27. Différents modes de publication, différents modes de « peer review », à la recherche de la qualité ou de changement de l’écosysteme de la recherche : Des exemples pour mieux comprendre
  • 28.
  • 29. « registered reports » « An analysis now suggests that registering and peer-reviewing stu Source : https://www.nature.com/articles/d41586-018-07118-1 164 revues acceptent actuellement (fev 2019) les « registered report » : https://cos.io/rr/
  • 30. Publier les recherches infructueuses ●De manière connexe Emergent Scientist (EmSci) , une revue orienté étudiants propose de publier également les hypothèses non fructueuses. ●Aspect formation à la recherche intègre par l’exercice de la publication ●Appréhender le modèle de reviewing (les étudiants peuvent être auteurs et rapporteurs) Quelques exemples (suite)
  • 31. Quelques exemples (suite) ●Les éditeurs prédateurs, dérive du Gold APC : : https://predatoryjournals.com/journals/ ● ●Megarevues : http://openaccess.inist.fr/?Les- megarevues (ie ; PlosOne & PeerJ) – Diffusion en ligne uniquement – Mutidisciplinaires – Mode d’évaluation différents (allégé, post peer review, …) – Délais de publication rapide
  • 32. ●Open peer reviewing (experience Vertigo), avec plugin hypothes.is expérimentation de La revue Vertigo (revues.org) à Open peer review. Exemple sur un article publié : http://vertigo.hypotheses.org/1924. Voir OPRISM (Open Peer Review facilitation through Social Media) , un modèle pour d’autres revues en Open peer review sur OpenEdition ●Pubpeer et RetractionWatch, des sites dédiés à la traque du retrait d’articles (qualité peer reviewing vs. qualité du post open peer reviewing) Quelques exemples (suite)
  • 33. Retraction index (en relation avec Retractionwatch et Pubpeer) Fang, Ferric C., et Arturo Casadevall. 2011. « Retracted Science and the Retraction Index ». Infection and Immunity 79(10): 3855-3859. Correlation entre L'IF et le retraction index
  • 34. ●Epi-revues (cf. EpiScience, du CCSD) https://www.episciences.org/ Modèle à associer à PCI par exemple « third-party » peer review (dia suivante) ●Data paper / data journal : https://coop-ist.cirad.fr/aide-a-la- publication/rediger/data-paper/5-liens-utiles-exemples-et-guides Quelques exemples (suite)
  • 35. PCI https://peercommunityin.org/ déconnecter l’évaluation de l’article de sa publication Favoriser le Green et réduire la valeur ajoutée des revu Parfaitement compatible avec les Epi-revues
  • 36. ●Publons : valoriser son travail de Peer reviewing (interfaçage Orcid, mais attention racheter par Clarivate en 2017 ) https://publons.com/ Quelques exemples (suite)
  • 37. En guise de conclusion : Entre dispositif hypertélique et slow science ●Une chaîne de dispositifs socio-techniques dont l’utilisateur ne peut se libérer. ●Retrouver le temps de la recherche ●Pour éviter un cycle absurde ? des logiciels « d’écriture » d’articles (ex. SCIgen) et des outils informatique (cf. IA ou autres) à la place des reviewers :https://pdos.csail.mit.edu/archive/scigen/ et https://retractionwatch.com/2016/09/02/weve-seen-computer-generated-fake-papers-get-published- now-we-have-computer-generated-fake-peer-reviews/ - penser qualité, fiabilité (intégrité) et non