Incidente Base Histórica 3C Plus
Resolved
Oct 22, 2023 at 2:21am UTC
Finalizamos a investigação e também o desenvolvimento do plano de ação.
Uma manutenção preventiva foi programada para o próximo sábado (28) onde realizaremos a migração do ambiente de base histórica do 3C Plus para um novo cluster de replicaset dedicado.
Affected services
Updated
Oct 18, 2023 at 2:47pm UTC
Seguimos monitorando e investigando a causa raíz do problema enfrentado na manhã de hoje. Manteremos este incidente aberto até que a causa seja completamente identificada e possamos traçar o plano de ação para evitar que este problema ocorra novamente no futuro.
Affected services
Updated
Oct 18, 2023 at 2:27pm UTC
Concluímos todos os procedimento de limpeza e reinicialização, nosso time de QAs iniciou testes completos na aplicação, sistema estava novamente 100% operacional.
Affected services
Updated
Oct 18, 2023 at 2:10pm UTC
Após a recuperação finalizada, realizamos os testes de integridade da base e tendo a confirmação de que tudo estava 100% iniciamos então os procedimentos de limpeza e reinicialização das camadas de telefonia e aplicação, para que a plataforma voltasse ao ar.
Affected services
Updated
Oct 18, 2023 at 2:09pm UTC
Acompanhamos o processo de reparação e infelizmente não foi possível estimar corretamente o tempo total necessário. Estressamos todas as possibilidades para tentar acelerar o processo mas nenhuma mostrou-se eficaz.
O procedimento de recuperação da base concluiu por completo as 11h09.
Affected services
Created
Oct 18, 2023 at 11:32am UTC
Na manhã de hoje sofremos nova instabilidade, desta vez na base histórica de ligações do 3C Plus.
A falha iniciou hoje as 8h32 quando detectamos falhas em respostas no sistema de armazenamento do histórico de ligações e mailings.
Ainda estamos investigando a fundo a causa desta falha porém, para garantir a integridade de dados e nenhuma perda de informação, foi necessário iniciar um procedimento de recuperação completo da base histórica de ligações e mailing da plataforma 3CPlus.
Affected services