Voltar para visão geral
Tempo de inatividade

Incidente Base Histórica 3C Plus

18 Out, 08:32am GMT-3
Serviços afetados
Back-end API
Front-end 3C+
Socket Realtime
Monitoramento Heartbeat
Gravação de Ligações
Controle de Telefonia
Telefonia - Agentes
Telefonia - SBC Agentes
Telefonia - Ligações
Detecção de Caixas Postais

Resolvido
21 Out, 11:21pm GMT-3

Finalizamos a investigação e também o desenvolvimento do plano de ação.

Uma manutenção preventiva foi programada para o próximo sábado (28) onde realizaremos a migração do ambiente de base histórica do 3C Plus para um novo cluster de replicaset dedicado.

Atualizado
18 Out, 11:47am GMT-3

Seguimos monitorando e investigando a causa raíz do problema enfrentado na manhã de hoje. Manteremos este incidente aberto até que a causa seja completamente identificada e possamos traçar o plano de ação para evitar que este problema ocorra novamente no futuro.

Atualizado
18 Out, 11:27am GMT-3

Concluímos todos os procedimento de limpeza e reinicialização, nosso time de QAs iniciou testes completos na aplicação, sistema estava novamente 100% operacional.

Atualizado
18 Out, 11:10am GMT-3

Após a recuperação finalizada, realizamos os testes de integridade da base e tendo a confirmação de que tudo estava 100% iniciamos então os procedimentos de limpeza e reinicialização das camadas de telefonia e aplicação, para que a plataforma voltasse ao ar.

Atualizado
18 Out, 11:09am GMT-3

Acompanhamos o processo de reparação e infelizmente não foi possível estimar corretamente o tempo total necessário. Estressamos todas as possibilidades para tentar acelerar o processo mas nenhuma mostrou-se eficaz.

O procedimento de recuperação da base concluiu por completo as 11h09.

Criado
18 Out, 08:32am GMT-3

Na manhã de hoje sofremos nova instabilidade, desta vez na base histórica de ligações do 3C Plus.

A falha iniciou hoje as 8h32 quando detectamos falhas em respostas no sistema de armazenamento do histórico de ligações e mailings.

Ainda estamos investigando a fundo a causa desta falha porém, para garantir a integridade de dados e nenhuma perda de informação, foi necessário iniciar um procedimento de recuperação completo da base histórica de ligações e mailing da plataforma 3CPlus.