CitiLink: Enhancing Municipal Transparency and Citizen Engagement through Searchable Meeting Minutes

Resumo Técnico: CitiLink

1. O Problema
As atas das reuniões dos conselhos municipais são documentos fundamentais para a transparência governamental, mas apresentam barreiras significativas de acessibilidade. Caracterizam-se por serem textos longos, formais, com estilo burocrático e jargão administrativo, o que dificulta a compreensão e a localização eficiente de informações por cidadãos e jornalistas. Embora publicamente disponíveis, a natureza não estruturada destes documentos torna a leitura um processo moroso e pouco intuitivo. A literatura existente foca-se frequentemente em gravações de vídeo, deixando as atas escritas, especialmente em português europeu, subexploradas.

2. Metodologia e Arquitetura do Sistema
O sistema CitiLink foi desenvolvido para transformar atas municipais não estruturadas em dados estruturados e pesquisáveis, utilizando um pipeline que integra Processamento de Linguagem Natural (PLN) e Recuperação de Informação (RI).

• Pipeline de Processamento:

  • Modelo de Linguagem (LLM): Utiliza o Gemini 2.0 Flash com técnicas de prompt engineering para analisar o texto bruto das atas.
  • Extração de Informação: O LLM extrai três camadas de dados:
    1. Metadados: Participantes, localização, data e tipo de reunião.
    2. Assuntos de Discussão: Tópicos específicos tratados (ex: "Modificação de regulamentos de trânsito").
    3. Resultados de Votação: Posições dos vereadores (a favor, contra, abstenção).
  • Validação Humana (Human-in-the-Loop): Existe uma área restrita (back-office) onde o pessoal municipal pode carregar atas e validar os dados extraídos, garantindo a qualidade e consistência.
  • Armazenamento e Indexação: Os dados são armazenados no MongoDB Atlas. A indexação suporta pesquisa de texto completo utilizando o algoritmo BM25 e filtragem facetada.

• Interface do Utilizador (Front-end):

  • Desenvolvida em React com uma API Flask.
  • Oferece múltiplas visualizações: visão geral por município, lista de atas, linha do tempo cronológica e página detalhada de cada ata.
  • Inclui funcionalidades de pesquisa facetada (por tópico, partido ou participante) e pesquisa de texto completo.

3. Contribuições Principais

• Plataforma CitiLink: Uma solução web funcional que demonstra como a IA pode democratizar o acesso a dados governamentais locais.
• Corpus de Dados: Criação e disponibilização de um conjunto de dados composto por 120 atas de seis municípios portugueses (Alandroal, Campo Maior, Covilhã, Fundão, Guimarães e Porto), anonimizados manualmente.
• Versatilidade Linguística: Demonstração das capacidades multilingues do sistema através de uma versão do conjunto de dados traduzida para inglês (via DeepL).
• Avaliação de Desempenho: Uma análise rigorosa da eficácia do LLM na extração de informações complexas de textos administrativos.

4. Resultados e Avaliação
A avaliação foi conduzida em duas frentes: usabilidade com pessoal municipal e desempenho técnico do modelo de IA.

• Avaliação de Usabilidade:

  • Realizada com 8 sessões de teste (50 min cada) envolvendo funcionários administrativos e responsáveis pelas atas.
  • Utilizou a metodologia think-aloud.
  • Resultado: Todos os participantes consideraram a navegação intuitiva; 6 dos 8 indicaram que utilizariam a plataforma novamente. O feedback levou a refinamentos centrados no utilizador.

• Avaliação Técnica (Desempenho do LLM):

  • Metadados: Alcançou um F1 Macro de 0,84, indicando consistência na extração de campos estruturados.
  • Assuntos de Discussão: Devido à natureza de texto livre, a comparação foi feita via similaridade de cosseno com embeddings BERTimbau. Os resultados foram ROUGE-L: 0,31 e BLEU: 0,21, sugerindo que o modelo captura a estrutura e o conteúdo, apesar de variações na formulação.
  • Votações: O modelo identificou corretamente a posição de voto (a favor, contra, abstenção) com um F1 Macro de 0,67. Este valor mais baixo reflete a maior complexidade desta tarefa em comparação com a extração de metadados.

5. Significado e Impacto
O CitiLink demonstra que a aplicação de LLMs e técnicas de RI pode transformar documentos governamentais burocráticos em recursos de informação acessíveis e pesquisáveis. O sistema não só moderniza o acesso às atas, facilitando a fiscalização cidadã e o trabalho jornalístico, como também estabelece um modelo escalável para arquivos municipais maiores. A validação com utilizadores reais confirma a viabilidade da ferramenta no contexto administrativo, enquanto os resultados técnicos apontam para a necessidade de refinamento contínuo, especialmente em tarefas de extração semântica complexa, motivando o uso futuro de modelos de código aberto e feedback mais amplo de cidadãos.