Система работает исправно

Последние инциденты

пятница 29 ноября 2024

Neuro ASR service Проблема с отсутствием распознавания в звонках

Наблюдаем проблемы с отсутствием распознавания в звонках. Время обнаружения - 15:41. Исследуем проблему для определения причины произошедшего. Остановлен трафик на 2, 7 и 8 пулах.

  • В 20:35 со стороны Яндекса получено подтверждение устранения инцидента. Трафик на всех пулах восстановлен.

  • Со стороны Яндекса наблюдаются задержки в предоставлении апдейтов. Выполнение операций с сетевыми дисками в зоне ru-central1-a остаётся замедленным. Начинаем постепенный процесс восстановления работоспособности компонентов и запуска трафика. Полное восстановление трафика на всех пулах ожидаем в течение часа при корректном поведении системы.

  • По информации от Яндекса связность облачных ресурсов полностью восстановлена, но операции Compute с сетевыми дисками замедлены. Восстановление ожидается в течение получаса.

  • Проблема затронула работу разных компонентов, в т.ч. наблюдаются перебои со входом в CMS.

  • Причина инцидента подтверждена - проблемы с внешней сетевой связностью в зоне ru-central1-a на стороне Yandex Cloud. Остановлен трафик на всех пулах CMS Neuro до устранения инцидента на стороне Яндекса.

  • Отмечаются проблемы с внешней сетевой связностью в зоне ru-central1-a на стороне Yandex Cloud.

    • четверг 28 ноября 2024

    Без происшествий

    среда 27 ноября 2024

    Паузы в звонках и проблемы с распознаванием

    Обнаружена проблема с наличием пауз и перебоями в распознавании, влияющая на звонки на 2, 7 и 10 пулах. Трафик на этих пулах остановлен. Время обнаружения проблемы - 10:55 Проблема исследуется командой разработки. Делаем всё возможное, чтобы как можно скорее устранить её.

  • В рамках работы над инцидентом был осуществлён откат обновления NLU Engine 3.12 до версии 3.11.1. Проблема устранена. Трафик на указанных пулах запущен и проанализирован.

  • Причина установлена. Ошибка в работе одного из компонентов платформы после прошедшего обновления. В текущий момент работаем над устранением проблемы. Ориентировочное время решения - 1 час.

    • вторник 26 ноября 2024

    Без происшествий

    понедельник 25 ноября 2024

    Без происшествий

    воскресенье 24 ноября 2024

    CMS Portal v3 Проблемы с доступом на https://cms-v3.neuro.net/

    Обнаружена проблема невозможности входа под частью УЗ пользователей на https://cms-v3.neuro.net. Время обнаружения 09:00.

  • В 13:45 проблема была устранена. Работоспособность CMS восстановлена.

  • Продолжаем исследовать проблему совместно с разработчиками, задача с критическим приоритетом

    • суббота 23 ноября 2024

    Без происшествий

    пятница 22 ноября 2024

    Без происшествий

    четверг 21 ноября 2024

    Без происшествий

    среда 20 ноября 2024

    Без происшествий

    вторник 19 ноября 2024

    Без происшествий

    понедельник 18 ноября 2024

    Без происшествий

    воскресенье 17 ноября 2024

    Без происшествий

    суббота 16 ноября 2024

    Без происшествий