Abonnement, accès ouvert, hybride — et maintenant l'IA : le biais de preuve induit par l'IA dans le travail scientifique

Conception et objectif. Selon le résumé analysé, l'étude est de type transversal et exploratoire. Les auteurs ont invité neuf grands modèles de langage largement utilisés à générer du contenu soutenu par la littérature, puis ont comparé le statut d'accessibilité des références fournies avec le pourcentage d'enregistrements en accès ouvert identifiés via des recherches dans trois bases de données savantes. Ces éléments sont ceux rapportés par les auteurs dans le résumé ; l'analyse NeuroWatch les reprend sans les modifier. Résultats rapportés. Parmi 78 références vérifiables générées par les LLM, une moyenne de 95,38 % disposait d'un texte intégral librement disponible et 87,43 % étaient en accès ouvert. Le pourcentage moyen d'accès ouvert dans les résultats de recherche des bases de données savantes était de 57,83 %. Aucune mesure d'incertitude (intervalle de confiance) ni valeur p n'est rapportée dans le résumé pour ces comparaisons. Aucune donnée manquante n'est explicitement signalée dans le résumé. Les sources de financement et les conflits d'intérêts ne sont pas rapportés dans la source analysée. Évaluation méthodologique selon les critères NeuroWatch. La validité de la mesure a été jugée favorable : la comparaison directe entre le statut d'accessibilité des références générées et le pourcentage d'enregistrements en accès ouvert issus de bases de données constitue une mesure vérifiable, explicitement documentée dans le résumé. L'analyse statistique a également été jugée favorable, des statistiques descriptives (moyennes et pourcentages) étant rapportées pour les 78 références vérifiables et pour les résultats des bases de données. Le contrôle des facteurs de confusion est indéterminé : le résumé ne mentionne aucun contrôle des facteurs de confusion potentiels dans la comparaison entre les références générées par les LLM et les résultats des bases de données ; cette information n'est pas rapportée dans la source analysée, ce qui ne signifie pas que ce contrôle n'a pas été effectué. La sélection de la population fait l'objet d'une vigilance : les auteurs reconnaissent explicitement que l'étude est exploratoire et non généralisable, ce qui limite la portée des inférences. Conclusions des auteurs et analyse NeuroWatch. Les auteurs concluent que, bien qu'exploratoire et non généralisable, ces résultats soutiennent l'hypothèse selon laquelle la recherche et la synthèse assistées par IA peuvent surreprésenter la littérature accessible au public. L'analyse NeuroWatch relève que cette conclusion dépasse potentiellement les résultats présentés, car aucune inférence statistique formelle (valeur p, intervalle de confiance) n'est rapportée dans le résumé pour étayer la signification des écarts observés, et l'étude est elle-même décrite comme exploratoire et non généralisable. Les auteurs indiquent qu'une enquête empirique plus approfondie à travers les disciplines, les plateformes et les outils d'IA est nécessaire. Limites de l'analyse. Cette analyse est automatisée et repose uniquement sur le résumé de la publication ; le texte intégral n'a pas été lu. Par conséquent, les éléments méthodologiques non rapportés dans le résumé, notamment le contrôle des facteurs de confusion, la stratégie d'échantillonnage détaillée, les sources de financement et les conflits d'intérêts, restent indéterminés. La robustesse n'a pas pu être calculée et le niveau de confiance de l'analyse est faible, en raison de la nécessité du texte intégral. Aucune recommandation clinique n'est formulée.

Cette analyse est produite automatiquement par une IA à partir des sources indiquées, puis l’appréciation est calculée avec des règles versionnées (scientific_analysis_v2). Elle ne constitue ni une validation par un professionnel ni une recommandation clinique. Consulter la méthodologie.