Este relatório reúne informações referentes ao incidente do dia 17 de Junho de 2022. Neste dia, o painel apresentou lentidão parcial no carregamento de determinados recursos.
Linha do tempo:
📆 17/06/2022 20:05 (GMT-3): Recebimento de notificações associadas ao incidente 📆 17/06/2022 20:10 (GMT-3): Início da análise 📆 17/06/2022 20:25 (GMT-3): Identificação da causa raiz 📆 17/06/2022 20:45 (GMT-3): Normalização total da base de clientes.
Causa raiz do incidente:
Após análise, identificamos que a lentidão no carregamento foi ocasionada por uma sobrecarga nos servidores que ocorreu devido ao incremento repentino no response time das requisições de envios de mensagens de um dos provedores de Whatsapp que integramos. Por volta de 19:56 do dia 17/06, o response time de cada requisição para este provedor foi de uma média de 150ms, para 2 segundos, ocasionando assim, uma sobrecarga no processamento do servidor. Ao disponibilizar um maior poder de processamento, conseguimos estabilizar o acesso ao painel da Huggy.
Impacto:
Os impactos agregados nesse evento foram lentidões no carregamento de partes específicas do painel, como listagem de chats pela tela de atendimentos, lentidão no carregamento das mensagens ao acessar um chat e lentidão na listagem de partes do módulo de atendimentos.
Plano de ação:
Estamos trabalhando para remover as dependências hoje existentes no servidores entre o tráfego de mensagens dos canais e o carregamento do painel da Huggy, desta forma, agregando em uma maior resiliência e estabilidade em sua utilização.