Beyond Journals: Rethinking Research Evaluation in Hungarian Computer Science
Este estudo argumenta que o sistema de avaliação de pesquisa centrado em periódicos da Hungria está desalinhado com as normas internacionais da ciência da computação ao subvalorizar publicações em conferências de alto nível, levando a distorções de incentivos e à migração de pesquisadores bem-sucedidos para o exterior, e recomenda equiparar artigos de conferências CORE A* e A com periódicos D1 e Q1 nas avaliações nacionais.
Artigo original sob licença CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Esta é uma explicação gerada por IA do artigo abaixo. Não foi escrita nem endossada pelos autores. Para precisão técnica, consulte o artigo original. Ler aviso legal completo
O Panorama Geral: O "Placar Errado"
Imagine uma liga esportiva onde as regras dizem que apenas os gols marcados nas lentas partidas da liga de 90 minutos contam para as estatísticas de carreira de um jogador. Mas neste esporte específico (Ciência da Computação), os jogos mais emocionantes, de alto risco e importantes são, na verdade, disputados em torneios rápidos de 3 dias.
Na Hungria, os "árbitros" (avaliadores universitários e órgãos de financiamento) têm mantido a contagem baseada nas antigas partidas da liga (periódicos acadêmicos/journals). No entanto, os melhores cientistas da computação do mundo estão jogando nos torneios (conferências). Como o placar húngaro não conta as vitórias nos torneios, isso está criando uma situação confusa onde os pesquisadores têm que escolher entre jogar o jogo que o mundo joga ou jogar o jogo que a Hungria exige.
O Problema Central: Periódicos vs. Conferências
Por muito tempo, a ciência era como uma biblioteca. Você escrevia um livro longo e detalhado (um artigo de periódico), esperava um ano para ser editado e depois o colocava na estante. Este era o padrão ouro.
Mas a Ciência da Computação é diferente. É mais como um festival de música ao vivo.
- Velocidade: A música (novas ideias) muda tão rápido que esperar um ano para publicar um "livro" significa que a canção já é notícia velha.
- O Local: As descobertas mais importantes acontecem em grandes festivais (conferências de topo como NeurIPS ou ICSE), não na biblioteca silenciosa.
- O Ranking: Existe um "Guia de Festivais" global chamado CORE. Ele classifica esses festivais de A* (os maiores e mais exclusivos festivais) até C (pequenas jams locais).
- A* é como tocar no Wembley Stadium.
- A é como tocar em uma grande arena.
- B e C são locais menores.
O Problema Húngaro: O sistema de avaliação da Hungria ainda é obcecado pelos "Livros de Biblioteca" (Periódicos). Ele trata um artigo em uma conferência de alto nível (A*) como se fosse uma publicação menor, ou o ignora inteiramente. Isso força os pesquisadores húngaros a escreverem "livros" apenas para satisfazer as regras locais, mesmo que o mundo esteja ouvindo a "música ao vivo".
O Que os Dados Mostram
Os autores analisaram os dados e encontraram padrões interessantes:
A Divisão "Teórica" vs. "Aplicada":
- Ciência da Computação Teórica (a matemática e a lógica por trás do código) tem jogado nesses grandes festivais desde a década de 1970. Os pesquisadores húngaros nessa área se adaptaram rapidamente.
- Ciência da Computação Aplicada (construir softwares e IA reais) começou a jogar nesses festivais mais tarde (década de 1990). Os pesquisadores húngaros aqui ainda estão lutando para se acostumar com as novas regras.
O Efeito "Fuga de Cérebros":
- O estudo descobriu que os pesquisadores húngaros mais bem-sucedidos (aqueles que jogam nos festivais A*) estão cada vez mais saindo da Hungria.
- A Analogia: Imagine um time de futebol local que se recusa a deixar seus jogadores estrelas jogarem a Copa do Mundo porque "nós só contamos os jogos da liga local". Eventualmente, os jogadores estrelas partem para se juntar a times em outros países que contam os jogos da Copa do Mundo.
- Os dados mostram que muitos pesquisadores húngares de elite agora trabalham no exterior ou na indústria internacional, enquanto aqueles que ficam muitas vezes precisam dividir seu tempo entre escrever "livros" para a Hungria e "jogar festivais" para o mundo.
O Pesadelo da "Contabilidade Dupla":
- Atualmente, um pesquisador pode publicar uma descoberta revolucionária em uma conferência de topo (A*). Para conseguir uma promoção ou financiamento na Hungria, eles frequentemente precisam pegar esse mesmo trabalho, reescrevê-lo e publicá-lo novamente em um periódico.
- A Metáfora: É como um chef ganhando uma medalha de ouro em uma competição de culinária, mas o governo local dizer: "Isso não conta. Você deve escrever um livro de receitas de 50 páginas sobre o prato para receber seu salário". É tempo e energia desperdiçados.
Por Que Isso Importa para Todos
Os autores argumentam que isso não é apenas um problema para os cientistas da computação; afeta todo o país.
- A Analogia do "Sistema Operacional": A Ciência da Computação é o sistema operacional para a pesquisa moderna. Quer você esteja estudando biologia, medicina ou engenharia, você precisa de especialistas em computação para rodar as simulações e analisar os dados.
- Se os melhores cientistas da computação da Hungria forem forçados a parar de jogar o "jogo global" para satisfazer regras locais, todo o país perde as ferramentas e técnicas mais recentes. É como um país tentando construir uma cidade moderna, mas recusando-se a usar a tecnologia de construção mais recente porque "só usamos tijolos de 1950".
A Solução Proposta
Os autores sugerem uma mudança simples de regra para consertar o placar:
- Tratar um artigo de Conferência A como um artigo de Periódico D1.* (O nível mais alto de periódicos).
- Tratar um artigo de Conferência A como um artigo de Periódico Q1. (Os 25% superiores dos periódicos).
Eles argumentam que o ranking CORE já é confiável globalmente (usado pela China, Austrália e outros) e é confiável. A Hungria não precisa inventar sua própria lista; ela só precisa reconhecer a lista existente.
A Conclusão Principal
O artigo conclui que a Hungria está dando pequenos passos na direção certa, mas precisa ir além. Ao alinhar suas regras com o resto do mundo, a Hungria pode parar de forçar os pesquisadores a jogarem dois jogos diferentes. Isso ajudará a manter o talento jovem no país, garantirá que a ciência húngara permaneça competitiva e evitará o "desperdício" de reescrever artigos apenas para se ajustar a um molde local.
Em resumo: Pare de julgar um peixe pela sua habilidade de escalar uma árvore. Se a Ciência da Computação vive em conferências, vamos começar a contar as conferências.
Afogado em artigos na sua área?
Receba digests diários dos artigos mais recentes que correspondam às suas palavras-chave de pesquisa — com resumos técnicos, no seu idioma.