OmniChat incident

Falha em mensagem com whizz

Resolved after 1 hour 48 minutes, affecting Whizz Agent, on December 18, 2025.

postmortem Dec 26, 2025, 12:29 PM UTC

**O que aconteceu?** Entre 09:45 de 18 de dezembro de 2025 e 10:20 desse mesmo dia, o Whizz apresentou problemas no envio de mensagens, causando lentidão e possíveis falhas na comunicação com os agentes. **Causa Raiz:** Foi implementada uma melhoria no fluxo de processamento de mensagens do Whizz, com o objetivo de otimizar a performance e reduzir o tempo de resposta dos agentes. Em condições específicas de operação, especialmente sob maior volume de mensagens, identificou-se um comportamento inesperado na gestão dessas mensagens. Esse cenário acabou evidenciando uma limitação na solução aplicada, que se manifestou somente quando submetida a uma carga mais elevada de processamento **Resolução e prevenção:** O Time de engenharia identificou o problema logo após a melhoria ir para o ar, por volta das 9:50, e imediatamente reverteu a solução para estabilizar a plataforma. Às 10:40 o serviço entrou em estabilidade, e as mensagens passaram a serem processadas normalmente. Para evitar ocorrência desse tipo no futuro, nosso time de engenharia está tomando as seguintes ações: * Como parte das iniciativas preventivas, o time de engenharia está conduzindo aprimoramentos contínuos nos processos de validação e implantação de mudanças, além de reforçar critérios operacionais para a introdução de evoluções de maior impacto, priorizando sempre a estabilidade do serviço. A OmniChat está comprometida em melhorar continuamente nossa tecnologia e operações para evitar interrupções e degradações do serviço. Agradecemos sua paciência e pedimos desculpas novamente por qualquer impacto em sua organização.

Started
Dec 18, 2025, 01:37 PM UTC
Resolved
Dec 18, 2025, 03:26 PM UTC
Duration
1h 48m
Detected by Pingoru
Dec 18, 2025, 01:37 PM UTC

Affected components

Whizz Agent

Update timeline

  1. investigating Dec 18, 2025, 01:37 PM UTC

    Foi identificado problema no sincronismo de mensagens do whizz, algumas conversas podem ser impactadas. A equipe está trabalhando na tratativa do problema.

  2. identified Dec 18, 2025, 02:06 PM UTC

    O problema foi identificado e o serviço já foi restabelecido. Seguimos monitorando o ambiente.

  3. resolved Dec 18, 2025, 03:26 PM UTC

    O problema com a plataforma foi resolvido. Lamentamos o transtorno e agradecemos a paciência. Tenha certeza de que a confiabilidade do sistema é uma prioridade para a Omnichat, estamos fazendo aprimoramentos contínuos para tornar a sua experiência cada vez melhor. O postmortem será publicado nos próximos dias com maiores detalhes sobre o incidente

  4. postmortem Dec 26, 2025, 12:29 PM UTC

    **O que aconteceu?** Entre 09:45 de 18 de dezembro de 2025 e 10:20 desse mesmo dia, o Whizz apresentou problemas no envio de mensagens, causando lentidão e possíveis falhas na comunicação com os agentes. **Causa Raiz:** Foi implementada uma melhoria no fluxo de processamento de mensagens do Whizz, com o objetivo de otimizar a performance e reduzir o tempo de resposta dos agentes. Em condições específicas de operação, especialmente sob maior volume de mensagens, identificou-se um comportamento inesperado na gestão dessas mensagens. Esse cenário acabou evidenciando uma limitação na solução aplicada, que se manifestou somente quando submetida a uma carga mais elevada de processamento **Resolução e prevenção:** O Time de engenharia identificou o problema logo após a melhoria ir para o ar, por volta das 9:50, e imediatamente reverteu a solução para estabilizar a plataforma. Às 10:40 o serviço entrou em estabilidade, e as mensagens passaram a serem processadas normalmente. Para evitar ocorrência desse tipo no futuro, nosso time de engenharia está tomando as seguintes ações: * Como parte das iniciativas preventivas, o time de engenharia está conduzindo aprimoramentos contínuos nos processos de validação e implantação de mudanças, além de reforçar critérios operacionais para a introdução de evoluções de maior impacto, priorizando sempre a estabilidade do serviço. A OmniChat está comprometida em melhorar continuamente nossa tecnologia e operações para evitar interrupções e degradações do serviço. Agradecemos sua paciência e pedimos desculpas novamente por qualquer impacto em sua organização.

Your product runs on more than OmniChat

Add the vendors you depend on and get one message when any of them reports trouble. Free for 3 vendors, no card.

Add your stack →