Incidente Base Histórica 3C Plus
Resolvido
21 Out, 11:21pm GMT-3
Finalizamos a investigação e também o desenvolvimento do plano de ação.
Uma manutenção preventiva foi programada para o próximo sábado (28) onde realizaremos a migração do ambiente de base histórica do 3C Plus para um novo cluster de replicaset dedicado.
Serviços afetados
Back-end API
Gravação de Ligações
Monitoramento Heartbeat
Controle de Telefonia
Telefonia - Agentes
Telefonia - Ligações
Detecção de Caixas Postais
Front-end 3C+
Socket Realtime
Telefonia - SBC Agentes
Atualizado
18 Out, 11:47am GMT-3
Seguimos monitorando e investigando a causa raíz do problema enfrentado na manhã de hoje. Manteremos este incidente aberto até que a causa seja completamente identificada e possamos traçar o plano de ação para evitar que este problema ocorra novamente no futuro.
Serviços afetados
Back-end API
Controle de Telefonia
Telefonia - Agentes
Telefonia - Ligações
Front-end 3C+
Socket Realtime
Atualizado
18 Out, 11:27am GMT-3
Concluímos todos os procedimento de limpeza e reinicialização, nosso time de QAs iniciou testes completos na aplicação, sistema estava novamente 100% operacional.
Serviços afetados
Back-end API
Controle de Telefonia
Telefonia - Agentes
Telefonia - Ligações
Front-end 3C+
Socket Realtime
Atualizado
18 Out, 11:10am GMT-3
Após a recuperação finalizada, realizamos os testes de integridade da base e tendo a confirmação de que tudo estava 100% iniciamos então os procedimentos de limpeza e reinicialização das camadas de telefonia e aplicação, para que a plataforma voltasse ao ar.
Serviços afetados
Back-end API
Controle de Telefonia
Telefonia - Agentes
Telefonia - Ligações
Front-end 3C+
Socket Realtime
Atualizado
18 Out, 11:09am GMT-3
Acompanhamos o processo de reparação e infelizmente não foi possível estimar corretamente o tempo total necessário. Estressamos todas as possibilidades para tentar acelerar o processo mas nenhuma mostrou-se eficaz.
O procedimento de recuperação da base concluiu por completo as 11h09.
Serviços afetados
Back-end API
Controle de Telefonia
Telefonia - Agentes
Telefonia - Ligações
Front-end 3C+
Socket Realtime
Criado
18 Out, 08:32am GMT-3
Na manhã de hoje sofremos nova instabilidade, desta vez na base histórica de ligações do 3C Plus.
A falha iniciou hoje as 8h32 quando detectamos falhas em respostas no sistema de armazenamento do histórico de ligações e mailings.
Ainda estamos investigando a fundo a causa desta falha porém, para garantir a integridade de dados e nenhuma perda de informação, foi necessário iniciar um procedimento de recuperação completo da base histórica de ligações e mailing da plataforma 3CPlus.
Serviços afetados
Back-end API
Controle de Telefonia
Telefonia - Agentes
Telefonia - Ligações
Front-end 3C+
Socket Realtime