Nuevo proceso de revisión de propuestas del Ciclo 8 de ALMA tuvo resultados exitosos

20 Abril, 2022 / Tiempo de lectura: 4 minutes

Cada ciclo de observación de ALMA recibe cerca de dos mil propuestas que deben pasar por un proceso de selección para preparar y optimizar el cronograma de observación. En el Ciclo 8, ALMA implementó cambios significativos en este proceso de revisión para que sea lo más justo posible para la comunidad y, al mismo tiempo, permita analizar mejor la gran cantidad de propuestas recibidas cada año. Dos artículos analizan en extenso los resultados: uno en el Boletín de la Sociedad Astronómica Estadounidense y otro en la Publicación de la Sociedad Astronómica del Pacífico. Resultados que han sido clave para mejorar aún más el proceso de revisión de propuestas del Ciclo 9 de ALMA, que comenzará en mayo de 2022.

¿Cuáles son los cambios implementados en el último ciclo? Se aplicó un sistema distribuido para hacer más sostenible e inclusivo el proceso de revisión de propuestas de observación. Esta consiste en que sean los mismos autores de las propuestas enviadas quienes participan en la evaluación de otras propuestas. Más de mil astrónomos de todo el mundo participaron en la evaluación de casi 1.500 propuestas. Este sistema distribuido se probó previamente en la convocatoria complementaria de propuestas del Conjunto Compacto de Atacama (ACA, por su sigla en inglés) del Ciclo 7.

"Este nuevo proceso de revisión distribuida ayudará al observatorio a enfrentar el desafío de tener que evaluar un número cada vez mayor de propuestas, al reducir la carga de trabajo de los revisores y hacer el proceso más sostenible", dijo Jennifer Donovan Meyer, científica del Centro de Ciencias ALMA de América del Norte (NAASC), organismo que forma parte del Observatorio Nacional de Radioastronomía (NRAO) de la Fundación Nacional de Ciencias de Estados Unidos. Después de analizar casi 15.000 ediciones enviados por los revisores y recopilar comentarios de los investigadores principales de las propuestas a través de encuestas, el equipo de manejo de propuestas concluyó que el 90 por ciento de las asignaciones de propuestas coincidían con la expertise del revisor. Además, los investigadores principales calificaron como útiles el 73 por ciento de los comentarios de los revisores, y además, estudiantes e investigadores principales proporcionaron comentarios igualmente valiosos. "Al correlacionar las clasificaciones y comentarios con varios datos demográficos, pudimos analizar exhaustivamente la sistemática e identificar áreas en las que el proceso de revisión se puede mejorar en los próximos ciclos", agregó Donovan Meyer.

"Estos resultados muestran que la revisión distribuida es un enfoque excelente para examinar una gran cantidad de propuestas", enfatizó Sean Dougherty, director de ALMA. "Con un grupo mucho más grande de revisores independientes se obtiene un proceso de revisión más justo, con una carga de trabajo reducida para cada uno y que ayuda a disminuir nuestra huella de carbono. Estamos muy agradecidos con el apoyo y colaboración de la comunidad para abordar exitosamente estos desafíos", agregó.

"ALMA implementó el sistema de doble anónimo en el Ciclo 8 para reducir los sesgos en el proceso de revisión por pares", explicó el Científico Jefe del Observatorio John Carpenter. Los investigadores no saben quién revisó sus propuestas y los revisores no conocen la identidad de los investigadores. "Nuestro análisis sugiere que ha habido sesgos potenciales relacionados con la antigüedad del investigador principal. Esta es una forma de hacer que el proceso de revisión sea más justo para todos".

A pesar de los cambios significativos aplicados entre el Ciclo 7 y el Ciclo 8 de 2021, el proceso de revisión funcionó bien. El equipo de manejo de propuestas recibió solo 153 solicitudes de soporte de más de mil revisores, y solo nueve propuestas tenían violaciones significativas de las pautas de doble anonimato. "Estos resultados indican que la comunidad se adaptó bien al nuevo formato de propuesta y al proceso de revisión", explicó Andrea Corvillón, líder del equipo de manejo de propuestas. "Los comentarios de la comunidad han sido constructivos y hemos realizado cambios para mejorar aún más el proceso de revisión en el Ciclo 9".

Información adicional

ALMA es una asociación entre ESO (en representación de sus estados miembros), NSF (EE.UU.) y NINS (Japón), junto con NRC (Canadá), MOST y ASIAA (Taiwán), y KASI (República de Corea del Sur), en cooperación con la República de Chile. El Joint ALMA Observatory es operado por ESO, AUI/NRAO y NAOJ.