Beyond Journals: Rethinking Research Evaluation in Hungarian Computer Science
Este estudio sostiene que el sistema de evaluación de la investigación centrado en revistas de Hungría se desalinea con las normas internacionales de la informática al infravalorar las publicaciones en conferencias de alto nivel, lo que provoca distorsiones de incentivos y la migración de investigadores exitosos al extranjero, y recomienda equiparar los artículos de conferencias CORE A* y A con las revistas D1 y Q1 en las evaluaciones nacionales.
Artículo original bajo licencia CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Esta es una explicación generada por IA del artículo a continuación. No ha sido escrita ni avalada por los autores. Para mayor precisión técnica, consulte el artículo original. Leer descargo de responsabilidad completo
La visión general: El "marcador equivocado"
Imagina una liga deportiva donde las reglas dicen que solo los goles anotados en los partidos lentos de la liga de 90 minutos cuentan para las estadísticas de la carrera de un jugador. Pero en este deporte específico (Ciencias de la Computación), los juegos más emocionantes, de alto riesgo e importantes se juegan en realidad en torneos rápidos de 3 días.
En Hungría, los "árbitros" (evaluadores universitarios y organismos de financiación) han estado llevando la puntuación basándose en los viejos partidos de la liga (revistas académicas o journals). Sin embargo, los mejores científicos de la computación del mundo están jugando en los torneos (conferencias). Debido a que el marcador húngaro no cuenta las victorias en los torneos, esto está creando una situación confusa donde los investigadores tienen que elegir entre jugar el juego que el mundo juega o jugar el juego que Hungría exige.
El problema central: Revistas vs. Conferencias
Durante mucho tiempo, la ciencia fue como una biblioteca. Escribías un libro largo y detallado (un artículo de revista), esperabas un año para que fuera editado y luego lo ponías en el estante. Este era el estándar de oro.
Pero la Computación es diferente. Es más como un festival de música en vivo.
- Velocidad: La música (las nuevas ideas) cambia tan rápido que esperar un año para publicar un "libro" significa que la canción ya es noticia vieja.
- El Escenario: Los descubrimientos más importantes ocurren en grandes festivales (conferencias de alto nivel como NeurIPS o ICSE), no en la tranquila biblioteca.
- La Clasificación: Existe una "Guía de Festivales" global llamada CORE. Esta clasifica estos festivales desde A* (los festivales más grandes y exclusivos) hasta C (pequeñas sesiones locales).
- A* es como tocar en el estadio de Wembley.
- A es como tocar en una gran arena.
- B y C son escenarios más pequeños.
El Problema Húngaro: El sistema de evaluación de Hungría sigue obsesionado con los "Libros de la Biblioteca" (Revistas). Trata un artículo en una conferencia de primer nivel (A*) como si fuera una publicación menor, o lo ignora por completo. Esto obliga a los investigadores húngaros a escribir "libros" solo para satisfacer las reglas locales, incluso si el mundo está escuchando la "música en vivo".
Lo que muestran los datos
Los autores analizaron los datos y encontraron algunos patrones interesantes:
La división "Teórica" vs. "Aplicada":
- La Ciencias de la Computación Teórica (la matemática y la lógica detrás del código) ha estado jugando en estos grandes festivales desde la década de 1970. Los investigadores húngaros en esta área se adaptaron rápidamente.
- La Ciencias de la Computación Aplicada (la construcción de software real e IA) comenzó a jugar en estos festivales más tarde (década de 1990). Los investigadores húngaros aquí todavía están luchando por acostumbrarse a las nuevas reglas.
El efecto "Fuga de Cerebros":
- El estudio encontró que los investigadores húngaros más exitosos (aquellos que juegan en los festivales A*) están dejando Hungría cada vez más.
- La Analogía: Imagina un equipo de fútbol local que se niega a dejar que sus estrellas jueguen en la Copa del Mundo porque "solo contamos los partidos de la liga local". Eventualmente, las estrellas se van para unirse a equipos en otros países que sí cuentan los partidos de la Copa del Mundo.
- Los datos muestran que muchos de los mejores investigadores húngaros ahora trabajan en el extranjero o en la industria internacional, mientras que aquellos que se quedan a menudo tienen que dividir su tiempo entre escribir "libros" para Hungría y "jugar festivales" para el mundo.
La pesadilla de la "Doble Contabilidad":
- Actualmente, un investigador puede publicar un gran avance en una conferencia de alto nivel (A*). Para obtener un ascenso o financiación en Hungría, a menudo tiene que tomar ese mismo trabajo, reescribirlo y publicarlo nuevamente en una revista.
- La Metáfora: Es como un chef que gana una medalla de oro en un concurso de cocina, pero el gobierno local dice: "Eso no cuenta. Debes escribir un libro de recetas de 50 páginas sobre el plato para obtener un salario". Es tiempo y energía desperdiciados.
Por qué esto es importante para todos
Los autores argumentan que esto no es solo un problema para los científicos de la computación; afecta a todo el país.
- La Analogía del "Sistema Operativo": La Computación es el sistema operativo de la investigación moderna. Ya sea que estés estudiando biología, medicina o ingeniería, necesitas expertos en computación para ejecutar las simulaciones y analizar los datos.
- Si los mejores científicos de la computación de Hungría se ven obligados a dejar de jugar el "juego global" para satisfacer las reglas locales, todo el país pierde. Es como un país que intenta construir una ciudad moderna pero se niega a usar la tecnología de construcción más reciente porque "solo usamos ladrillos de 1950".
La Solución Propuesta
Los autores sugieren un cambio de regla simple para arreglar el marcador:
- Tratar un artículo de Conferencia A como un artículo de Revista D1.* (El nivel más alto de las revistas).
- Tratar un artículo de Conferencia A como un artículo de Revista Q1. (El 25% superior de las revistas).
Argumentan que la clasificación CORE ya es confiable a nivel mundial (utilizada por China, Australia y otros) y es fiable. Hungría no necesita inventar su propia lista; solo necesita reconocer la existente.
La Conclusión
El artículo concluye que Hungría está dando pequeños pasos en la dirección correcta, pero debe ir más allá. Al alinear sus reglas con el resto del mundo, Hungará puede dejar de obligar a los investigadores a jugar dos juegos diferentes. Esto ayudará a mantener el talento joven en el país, asegurará que la ciencia húngara sea competitiva y evitará el "desperdicio" de reescribir artículos solo para encajar en un molde local.
En resumen: Dejen de juzgar a un pez por su habilidad para trepar un árbol. Si la Computación vive en las conferencias, empecemos a contar las conferencias.
¿Ahogado en artículos de tu campo?
Recibe resúmenes diarios de los artículos más novedosos que coincidan con tus palabras clave de investigación — con resúmenes técnicos, en tu idioma.