Nosso time está investigando a causa das falhas que foram identificadas em alguns usuários e clientes mas não foram automaticamente detectadas por nosso monitoramento e sistemas de health-check.

POSTMORTEM: Abandono Indevido de Ligações - 28 de Janeiro

Resumo do Incidente

• Incidente: Abandono Indevido de Ligações
  
• Primeira Identificação: 28 Jan, 10:06am GMT-3
  
• Serviços Afetados:
  
  • Socket Realtime
    
  • Controle de Telefonia
    
  • Telefonia - Agentes
    
  • Telefonia - Ligações
    
• Resolução Final: 28 Jan, 04:31pm GMT-3
  

Indisponibilidades Totais Durante o Período

1. 28 Jan, 10:06am - 10:10am → 4 minutos
   
2. **28 Jan, 11:1...

Visão Geral do Incidente

Nos dias recentes, a plataforma 3C Plus experienciou instabilidades significativas que resultaram em downtime. Foi observado um grande volume de chamadas sendo abandonadas, apesar da disponibilidade de agentes para atender a essas chamadas. Este relatório visa documentar as causas, impactos e medidas corretivas adotadas para resolver a situação.

Descrição do Incidente

• Datas dos Incidentes: Dois dias consecutivos 21 e 22 de Janeiro de 2024
• Horários dos Picos...

Visão Geral do Incidente

Nos dias recentes, a plataforma 3C Plus experienciou instabilidades significativas que resultaram em downtime. Foi observado um grande volume de chamadas sendo abandonadas, apesar da disponibilidade de agentes para atender a essas chamadas. Este relatório visa documentar as causas, impactos e medidas corretivas adotadas para resolver a situação.

Descrição do Incidente

• Datas dos Incidentes: Dois dias consecutivos 21 e 22 de Janeiro de 2024
• Horários dos Picos...

Procedimento de normalização finalizado.
Todos os serviços foram restabelecidos.

A API da META retornou, porém com certa lentidão

O monitoramento continua demonstrando que a plataforma está totalmente normalizada após a instabilidade.

Nossa equipe está alocada na investigação da causa inicial do problema que ocorreu.

Até o momento, verificamos que o Cluster GKE sofreu eventos de atualização e estamos buscando mais informações sobre o que iniciou esse processo.

Durante a fase de atualização, o cluster deixa de disponibilizar micro-serviços utilizados para a descoberta de instâncias ativas, necessários para o correto f...

Testes realizados e todos os serviços foram normalizados.

Procedimentos finalizados. Plataforma normalizada.

Monitoramento e testes confirmam normalização das falhas.

A causa inicial do incidente está em investigação.

CRM normalizado.

[Post-Mortem - Incidente de indisponibilidade de serviços]

Com este post-mortem, queremos fornecer uma compreensão completa do ocorrido na data de hoje, que causou uma interrupção dos nossos serviços. Queremos assegurar a nossos clientes que já tomamos medidas necessárias para prevenir tal problema e para melhorar a nossa resposta em futuras ocorrências.

RESUMO

Data & Hora: 12 de Novembro
Hora inicial: 04:30pm GMT-3
Horário de Resolução: 04:5...

Correção aplicada, todos os serviços foram normalizados.

Identificamos a causa raiz das falhas.

O mecanismo responsável por iniciar e preparar as instâncias às 7h45 apresentou problemas, o que impediu o escalonamento preventivo adequado da estrutura. Aplicamos um patch ao script e, após testes, confirmamos que a falha foi solucionada.

Revisamos todos os aspectos e, com a correção implementada, garantimos que o problema não ocorrerá novamente no futuro.

Pedimos desculpas pela indisponibilidade e pelos transtornos causados. Reforçamos nosso compro...

Procedimentos executados e finalizados com sucesso. Plataforma 100% operacional.