Resumen
Objetivo. La capacidad de la revisión por pares para mejorar el quehacer científico, por ejemplo, la conducta, la presentación de resultados y la validez de los resultados de los estudios, se cuestiona cada vez más y se han hecho llamados para mostrar los cambios que se produjeron en cada estudio a partir de la revisión por pares. Hasta alcanzar dicha transparencia, nuestro objetivo es identificar y recopilar estudios que analicen las diferencias entre los preprints o los manuscritos que se entregan a las revistas y los artículos que se publican en las revistas después de la revisión por pares.
Diseño. Identificamos estudios basándonos en nuestro conocimiento del campo y revisando todas las investigaciones que se han presentado en congresos de revisión por pares (como ponencias o pósteres). También revisamos las referencias de los estudios identificados. Para todos los estudios que incluimos, extrajimos el año de publicación, el método de muestreo, los conflictos de intereses, la financiación, el intercambio de datos y de los protocolos, el número de versiones analizadas por pares, el cálculo del tamaño de la muestra, la disciplina académica, el método utilizado para comparar las versiones, las variables analizadas (es decir, las secciones del manuscrito) para identificar los cambios y la métrica con la que se cuantificaron o clasificaron cualitativamente los cambios. Los pasos futuros incluirán una búsqueda en bases de datos bibliográficas (y servidores que almacenan preprints) y el lanzamiento de un formulario en línea que permitirá que cualquiera envíe estudios que hayamos omitido para incluirlos en la revisión. Los resultados disponibles actualmente son sólo descriptivos, pero está previsto realizar metaanálisis.
Resultados. De los 25 estudios publicados entre 1990 y finales de 2021, 16 analizaron los cambios entre los artículos presentados y los publicados y 9 entre los preprints y los artículos publicados. Los cambios se analizaron, predominantemente, llenando cuestionarios o puntuando cada una de las dos versiones del manuscrito por separado (n=11) o comparándolas visualmente (n=6). La mediana del número de pares analizados en cada estudio fue de 59 (IQR, 41- 122). La mayoría de los estudios analizaron cambios en manuscritos de salud (n=18) o de ciencias sociales (n=4). En general, los estudios encuentran una similitud muy alta entre las versiones, y los mayores cambios se producen en la introducción y la discusión.
Conclusiones. Los resultados actuales indican que las versiones presentadas o preimpresas de los manuscritos y su versión revisada por pares son muy similares, y que los métodos (de análisis) y las conclusiones principales rara vez cambian. Todavía no se han cuantificado los resultados. Las grandes diferencias entre los estudios, el tipo de cambios y los métodos con los que se midieron indican que se requiere mayor colaboración en el campo de la revisión por pares y hay que establecer indicadore para identificar los cambios en las diferentes versiones de los manuscritos.