Peer review par IA : comment Data2Paper évalue votre article avec cinq relecteurs indépendants

Votre article est terminé. Les données sont vérifiées, l'argument retravaillé, les références mises en forme. Vous arrivez à un choix : soumettre directement à une revue et patienter plusieurs semaines voire plusieurs mois avant le retour des relecteurs, ou trouver un moyen d'obtenir une critique structurée avant la soumission.

La fonctionnalité Paper Review de Data2Paper s'inscrit précisément dans cette seconde option. Téléversez votre article au format PDF, et le système renvoie une évaluation éditoriale complète — non pas par une seule IA générique, mais par cinq relecteurs configurés indépendamment, chacun examinant votre manuscrit sous un angle différent. Vous obtenez une décision éditoriale, une feuille de route de révision priorisée, des rapports individuels et un contrôle d'intégrité des citations.

Cet article détaille chaque étape, qui sont les cinq relecteurs, comment se construit la décision éditoriale et à quoi ressemblent les livrables.

Ce que vous téléversez

Vous déposez votre article au format PDF (DOCX, TEX, MD ou TXT également pris en charge, jusqu'à 20 Mo). Vous choisissez la langue de retour et la profondeur de la relecture :

• Quick : deux relecteurs (Editor-in-Chief et méthodologie), environ 15 minutes. Pertinent pour les premiers jets ou les contrôles rapides.
• Full : les cinq relecteurs et la vérification d'intégrité, environ 30 à 45 minutes. C'est le mode à privilégier avant une soumission.

C'est la totalité de l'entrée. Pas de configuration des expertises, pas de gabarit à choisir, aucun paramétrage préalable.

Étape 1 : ingestion de l'article

Le système analyse votre PDF et le convertit en représentation structurée. Il ne s'agit pas d'une simple extraction de texte : markitdown et pdfplumber sont mobilisés pour traiter tableaux, figures, équations et hiérarchies de section.

Les livrables sont une version Markdown normalisée de votre article (paper.md) et un fichier de métadonnées (paper_metadata.json) qui contient :

• le titre et la liste d'auteurs extraits ;
• le texte du résumé ;
• la structure des sections avec leurs intitulés ;
• la langue détectée ;
• le nombre de références ;
• le nombre de figures et de tableaux.

Si votre PDF est une image scannée sans couche texte, le pipeline s'arrête ici et vous le signale, plutôt que de produire du contenu illisible à partir d'artefacts d'OCR.

Étape 2 : analyse du champ et configuration des relecteurs

C'est sur ce point que Paper Review se distingue radicalement d'un « collez votre article dans ChatGPT et demandez du feedback ».

Le système lit l'article ingéré et analyse six dimensions :

1. Discipline principale — De quel champ relève cet article ? (par exemple, « assurance qualité dans l'enseignement supérieur »)
2. Disciplines secondaires — Quels champs adjacents sont mobilisés ?
3. Paradigme de recherche — Quantitatif, qualitatif, méthodes mixtes, théorique ?
4. Type de méthodologie — Essai randomisé contrôlé ? Enquête ? Étude de cas ? Méta-analyse ?
5. Niveau de revue ciblée — Lit-on un manuscrit destiné à une Q1, Q2, Q3 ou Q4 ?
6. Maturité du manuscrit — Le brouillon est-il abouti ?

Sur cette base, le système génère cinq personas de relecteurs. Pas de simples étiquettes « Reviewer 1, Reviewer 2 ». Chaque persona a une identité académique, une expertise disciplinaire et un niveau de sévérité calibrés pour correspondre au champ et à la méthodologie réels de votre article.

Par exemple, si vous téléversez une étude en méthodes mixtes sur le burn-out infirmier en réanimation, le système peut configurer :

• un EIC ayant dirigé des revues de recherche en sciences infirmières et spécialiste des études sur les ressources humaines en santé ;
• un relecteur méthodologie calibré pour les designs mixtes intégrant des enquêtes cliniques ;
• un relecteur disciplinaire qui maîtrise la littérature sur le burn-out en santé et sait vérifier que les cadres théoriques majeurs sont bien cités ;
• un relecteur perspective qui apporte un regard de politique de santé ou de comportement organisationnel ;
• un devil's advocate qui traque les variables confondantes propres aux études observationnelles en santé.

Cette configuration dynamique garantit que le retour est pertinent pour votre manuscrit, et non issu d'un gabarit générique.

Étape 3 : relecture parallèle et vérification d'intégrité

En mode complet, cinq processus de relecture se déroulent simultanément.

L'Editor-in-Chief (EIC)

L'EIC évalue l'article du point de vue d'un rédacteur en chef de revue : la contribution est-elle originale ? Significative ? La structure correspond-elle aux attentes de la revue ciblée ? L'argument tient-il du résumé à la conclusion ?

L'EIC ne plonge pas dans les détails statistiques ou la couverture bibliographique — c'est l'affaire des relecteurs spécialisés. Sa focale : ce manuscrit mérite-t-il publication, et pourquoi ?

Le relecteur méthodologie

Ce relecteur examine la rigueur du design : stratégie d'échantillonnage, méthodes d'analyse, reporting statistique, analyse de puissance, conformité APA. Si vous revendiquez un effet de médiation, il vérifie que votre analyse soutient effectivement cette assertion. Si vous présentez un p-value de 0,04 comme « hautement significatif », il signale l'écart.

Le relecteur méthodologie est calibré sur le paradigme de votre manuscrit. Une étude de cas qualitative est évaluée sur la saturation théorique et la transparence du codage, pas sur la taille d'effet.

Le relecteur disciplinaire

Ce relecteur vérifie la couverture bibliographique et le cadrage théorique : avez-vous cité les travaux fondateurs de votre champ ? Le cadre théorique est-il approprié ? La terminologie est-elle utilisée avec précision ? Votre contribution fait-elle réellement avancer la conversation dans ce domaine ?

Si un article-clé manque à vos références — le type d'omission qu'un relecteur humain repérerait immédiatement — le relecteur disciplinaire le signale.

Le relecteur perspective

C'est le regard transdisciplinaire. Le relecteur perspective traque les angles morts : hypothèses non interrogées, voix de parties prenantes ignorées, problèmes de faisabilité pratique, manières dont vos résultats pourraient apparaître différents sous un autre angle disciplinaire.

Le devil's advocate

Le devil's advocate n'est pas un relecteur au sens classique — il ne note pas, ne recommande pas. Sa mission : éprouver votre argument. Trouver le maillon logique le plus faible, identifier les lacunes probantes, construire le contre-argument le plus solide possible, repérer les biais de confirmation.

Le devil's advocate pose la question : « Si quelqu'un voulait démolir cet article, par où commencerait-il ? » Cet angle adversaire reste difficile à appliquer à son propre travail.

Vérification d'intégrité (en parallèle)

Pendant que les relecteurs parcourent l'article, un processus distinct vérifie vos citations :

• Vérification des références : chaque référence est cherchée en ligne (et non un échantillon). Chacune est classée en VERIFIED (trouvée sur le site d'un éditeur avec métadonnées concordantes), NOT_FOUND (impossible à confirmer après plusieurs tentatives) ou MISMATCH (une publication similaire mais distincte existe — soupçon de fusion hallucinée).
• Exactitude du contexte de citation : un échantillon d'au moins 30 % de vos citations est recoupé pour vérifier que l'argument cité correspond bien à ce que dit la source d'origine.
• Cohérence des données : les mêmes chiffres apparaissent-ils de façon cohérente dans tout le manuscrit ? Le tableau 3 confirme-t-il les affirmations de la discussion ?
• Contrôle d'originalité : un échantillon de paragraphes est cherché en ligne pour signaler d'éventuelles correspondances étroites avec des publications existantes.

Le livrable est integrity_verification.json avec un détail par citation. Cette étape rattrape des problèmes que les relecteurs humains ratent parfois — notamment des références fabriquées ou partiellement hallucinées qui se glissent dans un manuscrit lorsque l'auteur reconstruit ses citations de mémoire.

Ce que produit chaque relecteur

Chaque relecteur rédige un rapport structuré comprenant :

• Recommandation : Accept / Minor Revision / Major Revision / Reject
• Score de confiance (1 à 5) : à quel point sont-ils certains de leur évaluation ?
• Points forts (3 à 5) : éléments précis que l'article réussit, avec citations des sections concernées ;
• Points faibles (3 à 5) : chacun étiqueté Critical, Major ou Minor ;
• Commentaires section par section : retour détaillé sur chaque partie ;
• Questions aux auteurs (2 à 4) : points qui demandent clarification ;
• Détails mineurs : langue, mise en forme, qualité des figures ;
• Scores par dimension : originalité, rigueur méthodologique, qualité des preuves, clarté de l'argument, qualité rédactionnelle.

Étape 4 : synthèse éditoriale

Le synthétiseur éditorial lit les cinq rapports et produit les livrables finaux. Il ne s'agit pas d'une simple moyenne : un processus d'arbitrage structuré est appliqué.

Classification du consensus

• Consensus à quatre voix : les quatre relecteurs principaux sont d'accord (EIC, méthodologie, disciplinaire, perspective). L'auteur doit traiter ces points.
• Consensus à trois voix : trois sur quatre sont d'accord. L'opinion dissidente est nommée explicitement, et l'auteur devrait suivre la majorité.
• Décision partagée : deux contre deux. L'EIC arbitre selon la qualité des preuves et l'alignement de l'expertise.

Pondération par confiance

Un relecteur dont le score de confiance est de 5 (expert du domaine, certain de son évaluation) pèse pleinement. Un score de 2 (hors de son champ principal) voit son poids réduit. Un score de 1 est noté en bas de page mais exclu du consensus.

Intégration du devil's advocate

Les remarques critiques du devil's advocate ne participent pas au décompte du consensus, mais elles sont prises en compte dans la décision éditoriale lorsque corroborées par au moins un relecteur principal. Cela évite que le DA fasse à lui seul basculer la décision vers un rejet, tout en garantissant que les critiques légitimes ne soient pas enterrées.

Principes d'arbitrage

En cas de désaccord, le synthétiseur applique une hiérarchie :

1. Priorité aux preuves : quel camp dispose du meilleur appui empirique ?
2. Priorité à l'expertise : le désaccord se situe-t-il dans ou hors du domaine d'expertise déclaré du relecteur ?
3. Principe de prudence : en cas d'incertitude, exiger une réponse de l'auteur plutôt que de trancher.
4. Autonomie de l'auteur : certains désaccords peuvent être laissés au jugement de l'auteur s'il en justifie le raisonnement.

Ce que vous recevez : six livrables

1. Rapport de relecture (PDF + DOCX)

Un document mis en forme qui consolide l'ensemble des retours. C'est le livrable principal — un rapport complet, lisible comme une véritable enveloppe de relecture journal. Il contient la décision éditoriale, les évaluations individuelles et l'annexe de vérification d'intégrité.

2. Décision éditoriale

Un fichier Markdown calqué sur une vraie lettre éditoriale. Il contient :

• la décision (Accept / Minor Revision / Major Revision / Reject) ;
• un score global (0 à 100) ;
• un décompte des points critiques ;
• une synthèse des points d'accord entre relecteurs ;
• une synthèse des désaccords et de la manière dont ils ont été tranchés ;
• les notes d'intégrité issues de la vérification des citations.

3. Feuille de route de révision

Une liste de contrôle priorisée des modifications à apporter. Les éléments sont organisés par priorité :

• Priorité 1 : corrections structurelles indispensables qui touchent le cœur de l'argument.
• Priorité 2 : contenus à ajouter ou à clarifier.
• Priorité 3 : finitions (langue, mise en forme, figures).

Chaque item indique le ou les relecteurs qui l'ont soulevé, la section concernée et une suggestion concrète de traitement.

C'est le livrable le plus actionnable. Au lieu de lire cinq rapports et de bricoler votre propre plan d'action, vous disposez d'une liste pré-organisée qui vous indique quoi corriger en premier.

4. Vérification d'intégrité

Le résultat complet de la vérification des citations au format JSON. Pour chaque référence : statut de vérification, détails de la recherche, notes éventuelles sur les écarts. Si vous avez 40 références et que 3 reviennent en NOT_FOUND, vous savez exactement lesquelles inspecter.

5. Relectures individuelles (ZIP)

Les rapports Markdown bruts de chaque relecteur, regroupés en archive ZIP. Pratique lorsque vous voulez comprendre le raisonnement complet d'un relecteur précis plutôt que la version synthétisée. Chaque fichier suit le gabarit structuré décrit plus haut.

6. Rapport de relecture DOCX

La version Word du rapport, pour annoter ou partager avec des collègues qui préfèrent les documents éditables.

Un scénario concret

Vous avez un article sur les effets du feedback adaptatif dans les environnements d'apprentissage en ligne. 22 pages, méthodes mixtes, ciblant une revue Q2 de technologie éducative. Vous téléversez le PDF et sélectionnez le mode complet.

45 minutes plus tard, votre tableau de bord affiche : Major Revision — Score 68 — 4 points critiques.

Vous ouvrez la décision éditoriale : la méthodologie est solide, mais la revue de littérature manque deux cadres clés (relevés par le relecteur disciplinaire), la section d'analyse qualitative manque de transparence sur les procédures de codage (signalé à la fois par le relecteur méthodologie et par le disciplinaire — consensus à trois voix), et la discussion sur-généralise depuis un échantillon mono-institutionnel (soulevé par le relecteur perspective, corroboré par le devil's advocate).

La feuille de route vous indique :

1. Documenter la procédure de codage (Priorité 1, ~2 heures)
2. Intégrer [le cadre identifié] dans la revue de littérature (Priorité 1, ~3 heures)
3. Ajouter un paragraphe sur les limites liées à l'échantillonnage mono-institutionnel (Priorité 2, ~1 heure)
4. Corriger 3 problèmes de format APA dans les citations (Priorité 3, ~20 minutes)

Le contrôle d'intégrité a vérifié 38 références sur 40, identifié 1 référence introuvable (un acte de conférence avec une année incorrecte) et 1 mismatch (vous citez la version 2022 alors que l'article a été révisé en 2024).

Vous avez désormais un plan clair. Plutôt que de soumettre et d'attendre 3 mois pour entendre des remarques similaires, vous traitez ces points dès maintenant et soumettez un manuscrit plus solide.

À qui cela s'adresse

Paper Review est conçu pour :

• les doctorant·e·s qui préparent leur première soumission à une revue, sans accès facile à des relecteurs expérimentés ;
• les équipes de recherche qui font des tours de relecture interne avant soumission externe et veulent un retour structuré et homogène ;
• les chercheurs solo sans pair local avec qui échanger des manuscrits ;
• les non-anglophones qui veulent un retour à la fois sur le contenu et sur la clarté rédactionnelle ;
• toute personne qui révise un article et souhaite vérifier que ses corrections traitent bien les points soulevés (via le mode re-review).

Articulation avec les autres produits

Les trois produits Data2Paper couvrent des étapes différentes :

• Generate Paper : données en entrée, article complet en sortie ;
• Research Report : sujet en entrée, revue de littérature en sortie ;
• Paper Review : article terminé en entrée, retour de relecture en sortie.

Paper Review est l'étape d'assurance qualité finale. Vous pouvez utiliser Generate Paper pour rédiger un brouillon à partir de vos données, puis Paper Review pour identifier ce qui doit être amélioré avant soumission. Ou rédiger entièrement votre manuscrit à la main et utiliser Paper Review comme contrôle pré-soumission.

Pour démarrer

Rendez-vous sur la page Paper Review pour téléverser un article. Sélectionnez la langue de retour et la profondeur souhaitée. Le pipeline démarre immédiatement, et vous recevez un e-mail dès la fin de la relecture.

Pour un retour utile, soumettez des manuscrits proches de la version finale. Le système apporte le plus de valeur sur des articles déjà passés par une auto-relecture de base — il est conçu pour repérer ce que les auteurs ne voient plus dans leur propre travail, pas pour corriger les défauts d'un premier jet.