Lentidão nos disparos de campanhas agendadas
Incident Report for OmniChat
Postmortem

O que aconteceu?

Entre 16:00 de 29 de Janeiro de 2024 e 19:30 de 29 de Janeiro de 2024, a plataforma da OmniChat apresentou um problema que causou atraso no envio de mensagens da plataforma.

Causa Raiz:

A Engenharia da OmniChat identificou uma falha decorrente da atualização de um dos serviços. Onde a incompatibilidade de dependências gerou inúmeras tentativas de execução, sobrecarregando o sistema, e dessa forma impactando diversos serviços.

Resolução e prevenção:

A Engenharia da OmniChat identificou o problema às 16h00 do dia 29 de Janeiro, através do acionamento do suporte. Desde então a engenharia da OmniChat trabalhou para isolar e atenuar o problema.

Foram executadas análises em todos os serviços que foram afetados pelo mau funcionamento, a fim de isolar a encontrar a causa raiz .

Às 19:30:00h do dia 29 de Janeiro a engenharia da OmniChat encontrou a causa do problema e executou o procedimento de manutenção emergencial para que o problema fosse sanado.

Houve uma lentidão na entrega de mensagens até as 19:30h pelo alto volume de carga a ser processada.

Para evitar a recorrência do problema, agir de forma ativa e mais assertiva, a equipe de engenharia está tomando as seguintes ações:

  • Execução de medidas preventivas para auto resolução em caso de falha no componente afetado.
  • Alarme e Monitoramento no processo impactado

A OmniChat está comprometida em melhorar continuamente nossa tecnologia e operações para evitar interrupções e degradações do serviço. Agradecemos sua paciência e pedimos desculpas por qualquer impacto em sua organização.

Posted Feb 26, 2024 - 09:38 GMT-03:00

Resolved
O problema foi resolvido. Durante o nosso extenso monitoramento, não encontramos novos casos de atraso no disparo de campanhas.
Tenha certeza de que a confiabilidade do plataforma é uma prioridade para a Omnichat.
O postmortem será publicado nos próximos dias com maiores detalhes sobre o incidente.
Posted Jan 30, 2024 - 16:18 GMT-03:00
Monitoring
Identificamos que as campanhas voltaram executar normalmente. O time de engenharia da OmniChat continua monitorando o ambiente produtivo para garantir que o problema tenha sido resolvido.
Posted Jan 29, 2024 - 19:48 GMT-03:00
Identified
O time de engenharia da OmniChat identificou que existe uma fila interna que está com atraso para ser consumida. Foram feitos alguns ajustes e continuamos investigando uma melhor forma para resolver o problema da forma mais rápida possível.
Posted Jan 29, 2024 - 18:34 GMT-03:00
Investigating
Estamos investigando um problema relacionado à lentidão na execução de campanha agendadas. Assim que possível traremos maiores informações sobre o caso.
Posted Jan 29, 2024 - 16:47 GMT-03:00
This incident affected: Marketing Studio.