Cómo evaluar la validez de los resultados de la investigación en una revista académica

Lo primero que buscaría, si no es un experto en el campo, es si el argumento al menos tiene sentido coherente. ¿Están planteando una buena idea general de lo que quieren hacer, cómo quieren probarlo y qué pruebas afirman que probarán esa cosa (incluso si no saben cómo funcionan necesariamente esas pruebas)?

Otra cosa sería solo mirar el diario en sí. Es un buen diario, es una fuerte revisión por pares, etc. Y entonces, ¿cómo otros documentos realmente ven este en el mundo de la ciencia misma? Puede encontrar documentos que citan ese trabajo y ver lo que dicen. Se cita a menudo, y por otros documentos importantes (documentos en buenas revistas, con muchas citas, etc.). Si el documento está ayudando activamente al campo a avanzar, es probable que sea válido, y de hecho la cita de otros trabajos lo valida dentro de ese campo por parte de otros que realizan ese tipo de trabajo.

Una evaluación inicial implica evaluar la reputación general de la revista y la calidad de la junta editorial. Ver citas de artículos (cuántos, por quién) también puede ayudar. Las revistas crean reputación mediante la edición selectiva de un buen contenido, y por el uso considerado de las revisiones externas por parte de los expertos.

En última instancia, la evaluación requiere leer detenidamente los artículos y analizar las pruebas, volver a intentar los experimentos utilizando sus descripciones y determinar si las citas son correctas. De eso, ver si las conclusiones presentadas son correctas y el trabajo futuro basado en los resultados también es correcto también ayuda.

La ciencia se basa en la verificación, la refutación y la replicación. Necesitamos ser capaces de replicar experimentos y pruebas. Si no podemos, arroja dudas sobre los resultados. Necesitamos verificar hechos y experimentos. Y tenemos que tratar de refutar hipótesis con nuestros propios experimentos. Si no podemos verificar los resultados, eso agrega dudas. Si podemos refutar una hipótesis, eso habla por sí mismo.

Es muy simple, como un “investigador”, hago la pregunta:

¿Puedo reutilizar alguna idea, aspecto, fórmula, etc. de este trabajo para resolver MI problema?

Si es así, la investigación es valiosa para mí. Si no, no es valioso para mí.

Sin embargo, como revisor, la evaluación es completamente diferente. Luego hago preguntas como:

  • ¿Hace referencia al trabajo previo que debería?
  • ¿Alguien más, excepto el autor, se preocupa por este problema?
  • ¿Es nuevo?
  • ¿Tiene la metodología sentido?
  • ¿Los resultados tienen sentido?
  • ¿Agrega valor al campo?
  • etc.

Repita sus experimentos, luego saque sus propias conclusiones. Así es como se hace en Química.