An Investigation of the NeurIPS and ICML 2025 Position Tracks
Este artículo audita las pistas de Posicionamiento (Position Tracks) de NeurIPS e ICML 2025 para argumentar que, si bien el actual conjunto de envíos está dominado por críticas reformistas, los eventos deberían solicitar explícitamente trabajos de fijación de dirección que proporcionen nuevos artefactos y programas experimentales para cambiar la agenda del campo.
Artículo original dedicado al dominio público bajo CC0 1.0 (http://creativecommons.org/publicdomain/zero/1.0/). Esta es una explicación generada por IA del artículo a continuación. No ha sido escrita ni avalada por los autores. Para mayor precisión técnica, consulte el artículo original. Leer descargo de responsabilidad completo
En el mundo de la investigación en inteligencia artificial, las conferencias actúan como los grandes guardianes del progreso. Cuando los científicos quieren compartir una nueva idea, la presentan a estos encuentros, donde un panel de pares decide si el trabajo es lo suficientemente bueno como para ser publicado y discutido. Entre estos encuentros, los más prestigiosos son NeurIPS e ICML, que marcan el tono de lo que todo el campo considera importante. Dentro de estas masivas conferencias, existe una sección especial llamada "Position Paper Track" (Vía de Artículos de Posición). A diferencia de los artículos de investigación estándar que presentan nuevos datos o una herramienta terminada, los artículos de posición están destinados a ser visionarios. Se supone que deben argumentar una nueva dirección, desafiar a la comunidad a pensar de manera diferente o proponer una forma fresca de resolver problemas. El objetivo no es solo corregir un pequeño error en un método existente, sino cambiar la agenda completa del campo, de forma muy similar a un capitán que dirige un barco hacia un nuevo horizonte en lugar de simplemente pulir la cubierta.
Sin embargo, una investigación reciente sobre las propuestas de 2025 para estas vías sugiere que la brújula podría estar apuntando en una dirección más estrecha de lo previsto. Los investigadores Fan Yang, Wenkai Li y Jun Liu decidieron auditar el conjunto de artículos disponibles públicamente de estas dos importantes conferencias para ver qué tipo de argumentos se estaban planteando realmente. Examinaron 191 artículos que habían sido revisados y encontraron un patrón sorprendente: la gran mayoría no estaba trazando nuevos rumbos. En su lugar, se centraban en arreglar lo que ya existía. Aproximadamente tres cuartas partes de los artículos eran "críticas reformistas", lo que significa que argumentaban que los referentes actuales, los métodos de evaluación o los conjuntos de datos eran defectuosos y necesitaban ajustes. Si bien estas críticas solían ser rigurosas y valiosas, representaban un tipo de trabajo diferente al de la visión audaz y de establecimiento de agendas para la que la vía fue diseñada. Los autores descubrieron que los artículos que proponían direcciones completamente nuevas eran escasos, y los que sí las proponían no necesariamente recibían puntuaciones más altas por parte de los revisores.
Los investigadores compararon este panorama actual con una "clase de referencia" de artículos famosos de la última década que lograron cambiar el enfoque del campo, como el trabajo que introdujo la arquitectura Transformer o el artículo que definió problemas concretos de seguridad en la IA. Estos puntos de inflexión históricos compartían un rasgo común: no solo argumentaban sobre lo que estaba mal; le daban a la comunidad algo nuevo sobre lo cual construir. Proporcionaban un nuevo protocolo de medición, una implementación de juguete, una ficha de datos o un experimento falsable que otros pudieran usar inmediatamente para probar la nueva idea. En contraste, el conjunto revisado de 2025 estuvo dominado por artículos que criticaban herramientas existentes sin ofrecer un nuevo marco operativo para reemplazarlas. El estudio sugiere que el proceso de revisión de las conferencias se ha convertido inadvertidamente en un filtro que favorece las correcciones incrementales y seguras sobre las propuestas visionarias y arriesgadas. Esto no se debe a que los revisores rechacen las ideas ambiciosas de antemano, sino a que el sistema recompensa el trabajo que es fácil de verificar a corto plazo, dejando el trabajo más difícil y especulativo de definir el futuro, en gran medida, inexplorado.
Para entender por qué existe este desequilibrio, los autores propusieron varias razones basadas en cómo operan los seres humanos y las instituciones. Primero, es más fácil demostrar que un método actual está roto que demostrar que una dirección nueva y no probada es la correcta. Una crítica a un referente actual puede probarse con un experimento simple, mientras que una propuesta para un nuevo camino de investigación requiere un salto de fe que es más difícil de defender en una revisión escrita. Segundo, la cultura del aprendizaje automático recompensa fuertemente los números empíricos y las pruebas rigurosas, lo que favorece naturalmente a los artículos que pueden producir datos inmediatos sobre aquellos que ofrecen una nueva perspectiva. Tercero, los incentivos de carrera juegan un papel importante; un investigador júnior podría sentir que proponer una nueva dirección radical es demasiado arriesgado para sus perspectivas laborales, mientras que criticar una práctica existente es una contribución segura y citable. La combinación de estas presiones crea un bucle de retroalimentación donde el conjunto visible de artículos enseña a los futuros autores que los "artículos de posición" son simplemente críticas al statu quo, en lugar de planos para el futuro.
Los autores no argumentan que las críticas reformistas sean malas o que deban ser eliminadas. De hecho, reconocen que estos artículos suelen ser de alta calidad y necesarios. El problema es de equilibrio. Si un espacio creado para establecer la agenda se ve dominado por artículos que solo ajustan la agenda actual, el campo puede perder su capacidad de pivotar hacia verdaderas nuevas fronteras. El estudio concluye que la solución no requiere una reforma completa del proceso de revisión, sino unos pocos impulsos específicos. Los autores sugieren que los organizadores de las conferencias podrían pedir explícitamente a los autores que declaren si su artículo es una crítica del presente o una propuesta para el futuro. También recomiendan exigir una frase que explique cómo una nueva idea podría ser refutada, obligando a los autores a hacer que sus afirmaciones sean más concretas. Finalmente, proponen que los organizadores deberían solicitar activamente artículos que combinen una nueva perspectiva con un artefacto tangible, como un nuevo conjunto de datos o un programa experimental sencillo, para hacer que la visión sea operativa. Al realizar estos pequeños cambios, la comunidad puede asegurar que la vía de los artículos de posición cumpla su promesa original: no solo arreglar lo que está roto, sino mostrarnos hacia dónde ir después.
¿Ahogado en artículos de tu campo?
Recibe resúmenes diarios de los artículos más novedosos que coincidan con tus palabras clave de investigación — con resúmenes técnicos, en tu idioma.