Elasticsearch, Kibana e Logstash (Pilha ELK): transformando dados brutos em informações poderosas de forma rápida e eficiente

Resumo

Elasticsearch, Kibana e Logstash são softwares Open Source que compõem a pilha ELK. Com esse conjunto de ferramentas é possível centralizar e armazenar bilhões de registros, efetuar buscas instantâneas, importar dados de diferentes formatos, coletar métricas de desempenho, gerar relatórios combinando vários filtros e criar dashboards dinâmicos, que transformam dados em informação com apenas alguns cliques. No Instituto de Biologia da Unicamp, com o objetivo de transformar dados brutos em informações relevantes que possam ser utilizadas como base para a tomada de decisão, otimização e melhorias em processos de diferentes áreas, a Pilha ELK foi integrada ao serviço de monitoramento de logs, Syslog, e também a 17 módulos do sistema Intranet.