360dialog - Проблема с доставкой сообщений через локальный API – Детали инцидента

Все системы работают

Проблема с доставкой сообщений через локальный API

Решено
Производительность снижена
Началось 11 месяцев назаддлился 8 дней

Затронутые

Мета-инфраструктура

Производительность снижена от 10:35 AM до 8:55 AM

Meta/Facebook WhatsApp Business API (доставка сообщений)

Производительность снижена от 10:35 AM до 8:55 AM

Обновления
  • Решено
    Решено

    Проблема решена:


    Описание проблемы и последствия:
    17 января 2024 г. мы получили сообщения от некоторых клиентов о задержке веб-перехватчиков сообщений и статусов.

    Причина проблемы:
    Мы обнаружили проблему с внутренним компонентом (обратным вызовом), у которого были проблемы с последним развертыванием, что приводило к задержкам.

    Шаги по смягчению последствий/краткое описание:
    Мы отменили развертывание до тех пор, пока не сможем устранить основные проблемы.

    Профилактика рецидивов:
    Мы завершили внутреннюю проверку с соответствующими командами и сейчас работаем над дальнейшим укреплением нашей службы обратного вызова.

  • Мониторинг
    Мониторинг

    Мы устраняем проблему, которая повлияла на доставку сообщений локального API с ~6:20 до ~12:20 UTC 17 января. Ситуация стабилизировалась, и мы продолжаем наблюдение.

  • Изучается
    Изучается

    Мы получаем сообщения о задержках обмена сообщениями для локальных установок. Наша инженерная группа в настоящее время расследует это.