Doberman: a modular and distributed slow control system for small- to medium-scale experiments

O artigo apresenta o Doberman, um sistema de controle lento modular, distribuído e de código aberto, projetado para preencher a lacuna entre soluções industriais pesadas e métodos ad hoc em experimentos de física de pequena a média escala, oferecendo uma interface web para monitoramento e controle em tempo real que já foi validada em diversas instalações experimentais.

O essencial

Imagine que você está cuidando de uma casa muito complexa. Você precisa monitorar a temperatura, a pressão da água, se as luzes estão acesas, se o gás está fluindo e garantir que nada queime ou vaze. Se a casa for pequena, você pode usar um post-it na geladeira ou um aplicativo simples no celular. Se for uma usina nuclear, você precisa de um sistema industrial supercaro e complicado, com centenas de engenheiros especializados.

Mas e se você tiver um laboratório de física no meio do caminho? Um lugar com equipamentos sensíveis, mas sem orçamento para sistemas industriais gigantes e sem uma equipe de 50 pessoas para vigiar tudo 24 horas por dia?

É aí que entra o Doberman.

O que é o Doberman?

O Doberman é como um sistema nervoso inteligente e leve para experimentos científicos. Ele foi criado por físicos da Universidade de Freiburg na Alemanha para preencher o espaço entre "fazer tudo na mão com scripts bagunçados" e "usar sistemas industriais pesados demais".

A ideia principal é simples: monitorar, controlar e alertar sobre o estado dos equipamentos de um experimento, sem precisar de um doutor em computação para mantê-lo funcionando.

Como ele funciona? (A Analogia da Orquestra)

Pense no Doberman como uma orquestra bem organizada, onde cada músico tem uma função específica, mas todos tocam juntos:

1. Os "Músicos" (Monitores e Sensores):
   Imagine que cada sensor (que mede temperatura, pressão, etc.) é um músico. O Doberman usa pequenos programas chamados "Monitores" que vão até esses sensores, perguntam "como você está?" e anotam a resposta. Se um sensor estiver longe (em outro prédio ou no subsolo), um "Músico Secundário" vai lá buscar a informação e manda de volta. Isso garante que, se um computador falhar, apenas uma parte da orquestra pare, e o resto continue tocando.

2. O "Maestro" (Hypervisor):
   No centro de tudo, existe o Hypervisor. Ele é o maestro da orquestra. Ele não toca os instrumentos, mas garante que todos os músicos estejam presentes, respondendo aos sinais. Se um músico ficar mudo (o computador travar), o maestro tenta acordá-lo ou chama um substituto. Ele também distribui as "partituras" (comandos) para que todos saibam o que fazer.

3. Os "Arranjadores" (Pipelines):
   Às vezes, você não quer apenas ouvir a nota, quer criar uma melodia. As Pipelines são como arranjadores de música. Eles pegam dados brutos (ex: "a temperatura subiu 1 grau") e fazem cálculos ou tomam decisões automáticas.

   • Exemplo: Se o nível de nitrogênio líquido estiver baixo, o arranjador decide: "Ok, vamos abrir a válvula para encher o tanque". Tudo isso acontece automaticamente, sem que um humano precise apertar um botão.

4. O "Sistema de Alarme" (Alarm Monitor):
   Se algo der errado (ex: a temperatura ficar perigosa), o sistema não entra em pânico. Ele segue uma escala de urgência. Primeiro, ele avisa o técnico de plantão por e-mail. Se ninguém responder e o problema piorar, ele liga para o especialista e, se for grave, manda uma mensagem de texto para o chefe. É como um alarme de incêndio que não para de tocar até que alguém resolva o problema.

A Interface Visual (Doberview)

Toda essa complexidade técnica fica escondida atrás de uma interface web bonita e fácil de usar, chamada Doberview.

Imagine um painel de controle de um trem de alta velocidade ou um jogo de estratégia. Em vez de ver linhas de código, o cientista vê um desenho do experimento.

• Se uma válvula está aberta, ela fica verde.
• Se o tanque de nitrogênio está cheio, você vê uma barra de nível subindo.
• Se algo está errado, a cor fica vermelha e pisca.

Isso permite que qualquer pessoa, mesmo sem ser expert em programação, veja o que está acontecendo em tempo real e tome decisões rápidas.

Onde ele já foi usado?

O Doberman provou sua utilidade em três cenários diferentes, como se fosse um "coringa" que se adapta a qualquer situação:

1. GeMSE (O Guardião Silencioso): Um detector de raios gama escondido em uma caverna nas montanhas da Suíça. Como ninguém vive lá, o Doberman cuida de tudo sozinho, garantindo que o detector não esquentou e que o nitrogênio não acabou, funcionando por anos sem interrupção.
2. XeBRA (O Laboratório de Testes): Um pequeno tanque de xenônio usado para testar novas ideias. Como os equipamentos mudam frequentemente, o Doberman se adapta rápido, como um LEGO, conectando novos sensores sem precisar de obras pesadas.
3. PANCAKE (O Gigante): Um tanque enorme de xenônio líquido (com 400 kg!) usado para detectar matéria escura. Aqui, o Doberman gerencia cerca de 300 sensores diferentes. É como gerenciar o tráfego de uma cidade inteira, garantindo que a pressão, a temperatura e o nível de líquido estejam perfeitos para que os cientistas possam coletar dados valiosos.

Por que isso é importante?

Antes do Doberman, muitos laboratórios pequenos ficavam presos entre fazer tudo manualmente (arriscado e cansativo) ou tentar usar sistemas industriais caros demais (difíceis de instalar e manter).

O Doberman é gratuito (código aberto), leve e flexível. Ele permite que cientistas foquem na física e na descoberta, enquanto o sistema cuida da segurança e da estabilidade do experimento. É como ter um assistente pessoal superinteligente que nunca dorme, nunca se distrai e avisa você antes que algo dê errado.

Em resumo: O Doberman é a cola que mantém os experimentos científicos modernos seguros, estáveis e funcionando, permitindo que a ciência aconteça mesmo quando ninguém está olhando.

Resumo técnico

1. O Problema

Muitos experimentos de física dependem de sistemas de controle lento (slow control) para monitorar e regular parâmetros auxiliares (tensões, correntes, pressões, temperaturas, vazões de gás, etc.).

• A Lacuna: Existem soluções robustas para grandes experimentos, como sistemas industriais SCADA ou frameworks de código aberto abrangentes como o EPICS. No entanto, essas soluções são frequentemente complexas demais, consomem muitos recursos ou são custosas para experimentos de pequena e média escala e plataformas de P&D.
• A Situação Atual: Como resultado, muitos laboratórios operam com scripts ad hoc ou sem uma infraestrutura unificada de controle lento. Isso compromete a estabilidade de longo prazo, a integridade dos dados e a segurança operacional, além de dificultar a resposta rápida a condições anômalas.

2. Metodologia e Arquitetura

O Doberman (Detector OBsERving and Monitoring ApplicatioN) foi desenvolvido para preencher essa lacuna. É um sistema leve, modular, de código aberto e baseado em uma arquitetura distribuída.

• Modelo de Implantação: O sistema suporta desde instalações em um único host Linux até implantações distribuídas em múltiplos hosts.
  • Hypervisor: Um processo central de coordenação que supervisiona a saúde dos componentes, roteia comandos e gerencia o heartbeat (batimento cardíaco) do sistema.
  • Monitores (Monitors): A unidade fundamental do sistema. São processos de longa duração que gerenciam threads independentes para leitura de sensores, automação e distribuição de alarmes.
  • DeviceMonitors: Responsáveis pela leitura direta dos dispositivos físicos, podendo ser executados em hosts secundários próximos ao hardware experimental para reduzir cabos e aumentar a resiliência.
• Banco de Dados: Utiliza uma arquitetura de banco de dados dupla:
  • MongoDB: Para configurações (documentos JSON flexíveis) e logs.
  • InfluxDB: Para dados de séries temporais de medições de controle lento e métricas de saúde do sistema.
• Integração de Dispositivos (Plugins): O sistema utiliza uma arquitetura baseada em plugins em Python. Dispositivos são definidos por documentos de configuração e plugins específicos que lidam com a lógica de comunicação (Ethernet, serial, etc.), permitindo a integração de instrumentos comerciais e personalizados.
• Pipelines (Tubulações): Implementam lógica de processamento contínuo e automação sobre os dados dos sensores. São representados como grafos direcionados de nós (fontes, intermediários e sumidouros) e divididos em três tipos:
  • Alarme: Detecta condições anormais.
  • Conversão: Calcula grandezas derivadas (ex: taxa de consumo de nitrogênio).
  • Controle: Executa ações (ex: abrir válvulas) baseadas em lógicas de controle.
• Interface Gráfica (Doberview): Uma interface web baseada em Node.js e Bootstrap que oferece visualização em tempo real, inspeção de sensores, controle de atuadores e gerenciamento de pipelines. Permite o uso de diagramas SVG interativos para representar o experimento.

3. Contribuições Chave

• Arquitetura Híbrida e Escalável: Combina a robustez de sistemas industriais com a leveza necessária para laboratórios menores, escalando de um único PC a centenas de sensores distribuídos.
• Resiliência Operacional: O sistema foi projetado para tolerar falhas individuais de dispositivos ou hosts sem comprometer a funcionalidade global. A distribuição de leitura de dispositivos e o mecanismo de heartbeat externo previnem falhas silenciosas.
• Automação e Gerenciamento de Alarmes: Um framework integrado que executa ações de controle e notificações (e-mail, SMS, chamadas telefônicas) baseadas em níveis de alarme escalonáveis, reduzindo a necessidade de supervisão humana constante.
• Código Aberto e Modular: Todo o software, documentação e exemplos de integração de dispositivos são publicamente disponíveis sob licenças permissivas, facilitando a adoção e a contribuição da comunidade.

4. Resultados e Implantações

O Doberman foi validado em diversos experimentos do grupo de Física de Astropartículas da Universidade de Freiburg:

• GeMSE (Espectrômetro de Raios Gama): Operação remota totalmente autônoma em um laboratório subterrâneo na Suíça, supervisionando tensões e resfriamento criogênico por anos sem tempo de inatividade não planejado.
• XeBRA (Plataforma de Teste de Xenônio): Suporte a um ambiente de P&D com mudanças frequentes de hardware, demonstrando a facilidade de integração de novos instrumentos através dos plugins.
• PANCAKE (Instalação de Xenônio Líquido em Grande Escala): A implantação mais complexa até o momento, monitorando cerca de 300 sensores em dezenas de instrumentos. Utilizou hosts secundários (Revolution Pi) para leitura distribuída. O sistema garantiu a operação estável e segura de uma Câmara de Projeção Temporal (TPC) por cerca de 60 dias, gerindo resfriamento, preenchimento e condições de alta tensão.

5. Significância

O Doberman representa uma solução madura e funcional que democratiza o acesso a sistemas de controle de dados de alta qualidade para experimentos de física de pequena e média escala.

• Ponte Tecnológica: Elimina a necessidade de scripts frágeis sem sacrificar a confiabilidade de sistemas SCADA pesados.
• Validação Prática: Sua aplicação em ambientes críticos e remotos (como o GeMSE) e em grandes instalações (PANCAKE) comprova sua robustez e flexibilidade.
• Futuro: O sistema está pronto para ser adotado em novos projetos, como o experimento de matéria escura leve DELight, e continua a evoluir com contribuições da comunidade, mantendo-se como uma ferramenta essencial para a infraestrutura experimental moderna.