Resolved -
Incidente solucionado!
Segue abaixo a cronologia de eventos:
- 15h35 foi identificado um aumento abrupto na quantidade de requisições para o Hiper Gestão;
- 15h35 o banco de dados principal teve um aumento significativo na quantidade de consultas em execução, ocasionando bloqueios;
- 15h38 o tempo de reposta das aplicações foi afetado;
- 16h00 identificamos a possível causa do incidente como sendo uma manutenção realizada às 15h30. A manutenção em questão tinha como objetivo mitigar bugs relacionados à situação tributária 00;
- 16h10 o tempo de resposta do Hiper Gestão aumentou consideravelmente, ocasionando lentidão;
- 16h40 os bloqueios no banco de dados foram eliminados e a quantidade de consultas reduziu;
- 17h00 foi identificado que os servidores de hospedagem do Hiper Gestão estavam saturados e iniciou-se o processo de reciclagem;
- 17h10 o tempo de resposta do Hiper Gestão normalizou e o impacto foi totalmente contido.
Mar 24, 18:05 GMT-03:00
Update -
Atualização do caso: após aplicar ações de mitigação para o problema de performance identificado, foi possível restabelecer a performance do Hiper Gestão. Nossos times seguem acompanhando o caso para garantir que nenhum impacto residual seja identificado.
Impacto: sem impactos no momento.
Mar 24, 17:24 GMT-03:00
Update -
Atualização: o serviço de sincronização não deve mais apresentar lentidão, nossos esforços estão concentrados em mitigar o impacto gerado no Hiper Gestão.
Impacto: lentidão para acessar e utilizar o Hiper Gestão.
Mar 24, 16:59 GMT-03:00
Monitoring -
Atualização: identificamos a possível causa raiz do incidente. Neste momento, a carga do banco de dados principal está normalizada. Nossos esforços estão concentrados em reduzir o tempo de resposta das aplicações, através de ajustes na infraestrutura de hospedagem do produto.
Impacto: lentidão para acessar e utilizar o Hiper Gestão. A sincronização também pode estar sendo afetada.
Mar 24, 16:48 GMT-03:00
Identified -
Descrição do caso: identificamos à partir das 15h35 um aumento significativo no tempo de resposta do Hiper Gestão, motivado por uma carga considerável de consultas em execução do banco de dados principal do produto. A origem do incidente está sendo investigada. Neste momento, nosso times estão atuando com o objetivo de reduzir o impacto gerado por esta instabilidade.
Impacto: lentidão para acessar e utilizar o Hiper Gestão. A sincronização também pode estar sendo afetada.
Mar 24, 16:00 GMT-03:00