Wikipedia and Grokipedia: A Comparison of Human and Generative Encyclopedias

Planteamiento del Problema
Si bien los sistemas basados en Modelos de Lenguaje de Gran Escala (LLM) se utilizan cada vez más para la búsqueda, el resumen y la producción automatizada de texto, su papel específico en la mediación del contenido enciclopédico sigue siendo poco explorado. La investigación existente ha examinado extensamente Wikipedia como un sistema de conocimiento colaborativo, centrándose en el conflicto editorial, la polarización y la gobernanza. Por el contrario, la investigación sobre sistemas generativos se ha centrado principalmente en las alucinaciones, el sesgo y la precisión fáctica. Existe una brecha significativa en la comprensión de cómo los sistemas generativos interactúan con las infraestructuras de conocimiento de referencia establecidas. Específicamente, no está claro cómo la mediación generativa altera la organización estructural del contenido enciclopédico, incluyendo cómo se selecciona, reescribe, estabiliza y enmarca el contenido cuando se extrae de fuentes curadas por humanos como Wikipedia. Este estudio aborda esta brecha comparando sistemáticamente Wikipedia y Grokipedia, una enciclopedia generativa construida sobre Wikipedia, para determinar cómo la mediación generativa remodela el contenido de referencia más allá de los resultados individuales.

Metodología
Los autores realizaron una comparación sistemática a nivel de página entre Wikipedia y Grokipedia a través de tres dominios temáticos: política estadounidense, geopolítica y contenido relacionado con conspiraciones. El análisis se centró en cuatro dimensiones complementarias:

1. Selección de Contenido y Reescritura: El estudio modeló la inclusión de páginas en Grokipedia como una función de la popularidad de las páginas de Wikipedia (vistas), la densidad de referencias y la actividad editorial (ediciones y reversiones). Se utilizó la regresión logística para determinar la probabilidad de que una página de Wikipedia apareciera en Grokipedia y la probabilidad de que esa página incluida fuera reescrita generativamente. Las características se discretizaron en niveles ordinales (Bajo, Medio, Alto, Muy Alto) para manejar distribuciones de cola pesada.
2. Participación Editorial y Complejidad: Para evaluar los cambios en la dinámica editorial, los autores analizaron la actividad de edición en ambas plataformas durante un periodo específico (finales de octubre a noviembre de 2025). Aplicaron un marco de aptitud–complejidad (adaptado del análisis de productos económicos) a la matriz bipartita editor–página. En este modelo, los editores son tratados como "países" y las páginas como "productos", lo que permite estimar la complejidad de la página basándose en la "aptitud" (amplitud y experiencia) de los editores contribuyentes.
3. Estructura Narrativa: La organización narrativa se reconstruyó utilizando la Representación de Significado Abstracto (AMR) para extraer redes de actor–relación de los textos de los artículos. Las entidades sirvieron como nodos, y las aristas dirigidas codificaron las relaciones (agente–objetivo) con polaridades asignadas (favorable, conflictiva, neutral). Esto permitió la comparación de las estructuras narrativas globales y los equilibrios de sentimiento locales (salientes y entrantes) entre las dos fuentes.
4. Encuadre Evaluativo: Los autores analizaron la "sección de introducción" de los artículos (el texto introductorio antes del primer encabezado) para medir el encuadre a lo largo de dos dimensiones: encuadre laudatorio (elogio/admiración) y encuadre de conflicto/controversia (disputas). Se utilizó un LLM (gemma3:4b) para clasificar las oraciones dentro de las secciones de introducción, generando puntuaciones para la fracción de texto que exhibía estos encuadres.

Resultos Clave

• Selección No Uniforme: Grokipedia no muestrea Wikipedia de manera uniforme. La inclusión está correlacionada positivamente con la popularidad de la página, la densidad de referencias y la actividad editorial. Las páginas con mayor visibilidad y conflictos editoriales recientes tienen más probabilidades de ser incluidas.
• Patrones de Reescritura: Entre las páginas incluidas, la probabilidad de reescritura generativa está asociada positivamente con la densidad de referencias y la actividad editorial reciente (ediciones y reversiones). Por el contrario, las páginas altamente populares tienen más probabilidades de ser reproducidas textualmente. Esto sugiere que Grokipedia interviene con mayor frecuencia en páginas caracterizadas por la inestabilidad y el desacuerdo.
• Dinámicas Editoriales: Si bien ambas plataformas muestran picos de edición impulsados por eventos, los editores de Grokipedia concentraron su actividad en temas amplios y duraderos (por ejemplo, Elon Musk, figuras históricas) en lugar de los eventos de noticias específicos que impulsaron la edición en Wikipedia. El análisis de aptitud–complejidad reveló una débil correlación positiva en la complejidad de las páginas entre las dos plataformas, lo que indica que la composición de las comunidades de contribuyentes difiere significamente para los mismos temas.
• Estabilidad Narrativa: A pesar de la reescritura generativa, la estructura narrativa global permanece mayormente consistente. Las redes de actor–relación muestran niveles similares de reciprocidad y estructura cíclica, y la clasificación de las entidades prominentes es consistente entre las fuentes.
• Cambios de Encuadre: Aunque el encuadre general está correlacionado, ocurren cambios localizados. Grokipedia exhibe un encuadre más laudatorio y un menor énfasis en el conflicto para temas salientes específicos, particularmente dentro de la política de EE. UU. (por ejemplo, Donald Trump, Marjorie Taylor로 Taylor Greene) y el contenido relacionado con conspiraciones.

Contribuciones Clave
El artículo proporciona una comparación empírica sistemática de los sistemas enciclopédicos de referencia y generativos, yendo más allá de los errores fácticos aislados para analizar propiedades estructurales. Demuestra que los sistemas generativos preservan la organización narrativa central del contenido de referencia existente mientras alteran significativamente:

1. Selección: Priorizando páginas de alta visibilidad y alto conflicto.
2. Reescritura: Interviniendo más en páginas con alta densidad de referencias e inestabilidad editorial.
3. Encuadre: Introduciendo cambios localizados hacia un lenguaje más laudatorio y menos orientado al conflicto para actores específicos.

Significancia
El estudio sostiene que los sistemas enciclopédicos generativos no deben verse únicamente como generadores de texto, sino como capas mediadoras que reorganizan las infraestructuras de conocimiento existentes. Los hallazgos sugieren que las evaluaciones basadas únicamente en la precisión o el sesgo ideológico son insuficientes. En su lugar, el impacto de los sistemas generativos debe entenderse a través de la lente de la selección de contenido, la consolidación de material disputado mediante la reescritura y las alteraciones en el encuadre evaluativo en el punto de presentación. Los autores concluyen que, si bien la columna vertebral estructural del conocimiento enciclopédico se preserva, la capa de mediación generativa cambia fundamentalmente cómo se selecciona, estabiliza y presenta el contenido al usuario.