L’étude étaye-t-elle votre note sectorielle ?
Ne vous arrêtez pas à la référence

Partez de l’affirmation que vos collègues pourraient reprendre, plutôt que de l’apparence de la bibliographie. Décrit-elle ce qu’une étude a évalué, suggère-t-elle une application au travail ou affirme-t-elle qu’une approche fonctionne aujourd’hui ? Une phrase peut mêler ces idées sans rendre leurs articulations visibles. Séparez-les avant de chercher leur fondement. Pour identifier la référence, nous proposons de comparer le titre, les auteurs et la notice avec ceux de l’éditeur ou du dépôt de recherche d’origine. Repérez la version disponible. Un lien qui s’ouvre donne accès à une page ; il ne démontre pas que cette page correspond au travail cité. Un résultat de recherche ou le résumé de l’assistant peut aider à retrouver la publication, mais ne remplace pas son ouverture. Si son identité reste incertaine, notez-le plutôt que de déclarer la référence inventée.

Trouver la bonne publication ne règle que la question de son identité. Il faut ensuite déterminer quel passage étaye quelle partie de la note. L’existence d’un article sur des réponses à des questions publiques accompagnées de citations ne démontre pas qu’un assistant sait examiner de manière fiable des documents fournisseurs. ALCE distingue utilement la fluidité du texte, la justesse de la réponse et l’appui fourni par les passages cités. Dans ses expériences historiques, des réponses produites sans documents récupérés pouvaient obtenir de bons résultats sur les mesures de justesse, tout en étant mal étayées lorsque des références étaient ajoutées après coup. Cela invite à examiner le lien entre phrase et source, pas simplement à joindre une bibliographie au brouillon terminé.

Ouvrez le résultat pertinent et lisez suffisamment de contexte pour comprendre la question des chercheurs et leur évaluation. S’agissait-il de produire une réponse, de retrouver une information ou de juger si une citation étayait une phrase ? Quels documents et systèmes ont été utilisés ? La note respecte-t-elle ces limites, ou transforme-t-elle discrètement une tâche de recherche en résultat professionnel ? ALCE portait sur des réponses à des questions à partir de collections sélectionnées de références publiques. Fournir des passages récupérés donnait de bons résultats parmi les approches testées ; sélectionner les réponses produites selon leur appui documentaire améliorait aussi la qualité des citations, y compris dans l’évaluation humaine. Ce sont des résultats positifs utiles, pas une raison de considérer toutes les citations comme peu fiables. Les auteurs reconnaissent également les imperfections de l’évaluation automatique, la couverture incomplète des réponses ouvertes et la difficulté à reconnaître un appui partiel. L’étude sur la recherche générative demandait séparément à des annotateurs humains si les phrases étaient entièrement étayées et si chaque citation apportait un appui complet, partiel ou nul. Plusieurs sources pouvaient étayer ensemble une phrase. Une citation qui ne soutient qu’une partie ne doit pas conférer une autorité empruntée au reste.

La personne chargée de la coordination peut conserver un lien, une version et l’emplacement d’une section ou d’un passage à côté du texte examiné. Notez ce que le passage étaye et ce qu’il laisse sans réponse. Si une phrase associe un résultat historique à une affirmation sur le traitement actuel de documents fournisseurs, conservez le résultat sans présenter l’application comme une observation établie. L’évaluation de la recherche générative relevait des réponses généralement fluides et apparemment utiles, ainsi que de nombreuses citations étayant bien les propos associés. Elle relevait aussi des affirmations non étayées et des citations inexactes. Les premières réponses complètes avaient été recueillies au début de 2023, et ne provenaient ni des assistants actuels ni de notes internes. Les différences de fréquence d’abstention compliquent en outre les comparaisons directes. Si l’interprétation exige une expertise, le responsable de la note peut solliciter un lecteur compétent. Si le passage original est inaccessible, laissez l’appui documentaire en suspens. Une autre explication fluide de l’assistant ne fournit pas le passage manquant.

Nous proposons une courte note de lecture reliant la phrase, la publication identifiée, les emplacements pertinents, la formulation étayée et les questions ouvertes. C’est une aide éditoriale, pas une procédure testée ou imposée par l’une des études. Le responsable peut conserver une description fidèle du résultat original, nuancer une déduction plus large, supprimer les affirmations non étayées ou différer la diffusion. Si plusieurs citations sont nécessaires, rendez leurs contributions respectives compréhensibles. Avant l’envoi, confrontez la phrase révisée à la note : une observation sur des systèmes historiques est-elle devenue, au fil des retouches, une affirmation sur leur fiabilité actuelle ? Même un compte rendu fidèle d’un article n’établit pas de façon indépendante que ses résultats sont vrais ou applicables à la décision envisagée. Les auteurs de l’étude sur la recherche générative distinguent explicitement la possibilité de vérifier les propos dans leurs sources de leur vérité factuelle. Une transmission utile indique donc ce que dit la source, dans quelles conditions et ce qui reste à clarifier. Elle ne déclare pas la note automatiquement vérifiée.