Visão geral
Análise e evolução de observabilidade e custos em plataformas cloud de grande escala.
Contexto
Em ambientes com muitos workloads, observabilidade é simultaneamente uma necessidade operacional e uma parcela relevante do custo.
Desafio
Preservar os sinais necessários para operação e investigação sem coletar ou reter dados sem propósito claro.
Minha atuação
- Análise de custos de logs e métricas
- Troubleshooting de Kubernetes e CloudWatch
- Avaliação de alternativas com S3 e Athena
- Investigação de tráfego, NAT, transferência e compute sizing
Arquitetura
O desenho considerava diferentes destinos e períodos de retenção conforme o valor operacional do dado, separando consulta recorrente de investigação eventual.
Decisões técnicas
- Granularidade orientada pelo uso
- Retenção proporcional à necessidade
- Análise baseada em dados antes de otimizar
- Avaliação conjunta de compute, observabilidade e networking
Automação
Consultas e processos repetíveis apoiavam a identificação de grandes consumidores e a comparação entre alternativas.
Desafios de engenharia
Reduzir custo sem eliminar sinais necessários exigia compreender padrões de acesso, investigação e operação.
Resultados
- Maior clareza sobre direcionadores de custo
- Melhor equilíbrio entre visibilidade e retenção
- Decisões de otimização com contexto técnico