Importação e atualização de métricas de mailings lenta
Resolved
Jun 20 at 01:00pm GMT-3
Hoje, às 09:50, após a liberação de uma nova versão de uma de nossas aplicações, uma query específica começou a aumentar gradualmente a carga em nosso banco de dados. Esse crescimento não foi detectado imediatamente por nossos alertas de integridade.
Às 10:25, recebemos os primeiros relatos de clientes sobre baixa agressividade no mailing. Devido ao feriado, o sistema operava com um limite reduzido de ligações (10:1 / 15:1). Ao retornarmos ao limite normal (30:1), o impacto no banco de dados começou a se tornar mais evidente após ter um volume mais alto de operações no banco de dados.
Às 11:25, nossos gráficos de saúde do banco de dados sinalizaram um comportamento atípico, e identificamos que existiam operações lentas no banco de dados que impactava diretamente a importação e atualização das estátisticas de mailings. Nossa equipe atuou de forma imediata.
Às 11:50, publicamos uma correção, e desde então, o sistema está estável e a importação e atualização dos dados de Mailings segue normalizada. Seguimos monitorando ativamente em tempo real para garantir a continuidade dos serviços.
Affected services
Vox - Back-end CLI