Недоступность большинства сервисов

Статус:
инцидент устранен, сервис работает в штатном режиме.

Статус:
инцидент остается в работе.

Сообщение от провайдера:

С момента последнего обновления статуса проблем с доступностью ресурсов не наблюдалось. DDoS-атака больше не оказывает существенного влияния на сетевую доступность инфраструктуры.

Всю ночь инженерная команда проводила работы по оптимизации комплекса фильтрации, конфигурации сети и правил маршрутизации. Работы продолжатся и сегодня: они направлены на снижение риска повторного влияния атаки и повышение стабильности сети.

Из-за особенностей работы комплекса фильтрации часть легитимных маршрутов может быть заблокирована. Если вы сталкиваетесь с проблемами сетевой связанности между вашими ресурсами, пожалуйста, обратитесь в поддержку — мы проверим затронутые маршруты и при необходимости внесем ручные корректировки.

Мы продолжаем внимательно следить за ситуацией и сообщим о значимых изменениях. Подробные разъяснения об атаке и наших действиях в ходе инцидента мы дадим после того, как ее последствия будут полностью устранены.

Статус:
инцидент остается в работе.

Сообщение от провайдера:

После переключения конфигурации сети и перенаправления трафика на развернутые комплексы фильтрации нам удалось практически полностью устранить влияние активной DDoS-атаки на инфраструктуру.

Сетевая связанность ресурсов во всех регионах восстановлена. Налажена работа панели управления, отображения и управления ресурсами. Решены проблемы с локальными DNS-резолверами.

Временно могут наблюдаться проблемы в работе VPN-соединений между регионами, увеличение задержек, а также false positive-срабатывания комплекса защиты от DDoS, при которых блокируется легитимный трафик.

Мы продолжаем работы по тонкой настройке системы фильтрации, конфигурации сети и устранению последствий атаки.

Статус:
инцидент остается в работе.

Сообщение от провайдера:

Процесс реконфигурации сетевого оборудования и настройки средств фильтрации успешно завершен.

В регионе Ташкент команда уже выполнила переключение на новую схему защиты. Предварительно сетевая связность в регионе восстановлена, ожидается постепенное возвращение доступности всех ресурсов в штатный режим.

Мы просим клиентов проверить работоспособность ваших сервисов со своей стороны и убедиться в их доступности.

Статус:
инцидент остается в работе.

Сообщение от провайдера:

Наша команда совместно с операторами связи продолжает перенастройку и адаптацию сетевой инфраструктуру для отражения мощной DDoS-атаки.

Изоляция внешнего трафика помогла восстановить сетевую доступность виртуальных машин в сетях TAS-IX, UZ-IX и KAZ-GOV-IX. Сейчас мы занимаемся решением проблемы резолва DNS для восстановления работы кластеров Kubernetes и Баз данных в регионах Ташкент и Алматы.

Работа по настройке систем фильтрации внешнего трафика для его очистки продолжается. После завершения работ на комплексе очистки, весь внешний трафик будет перенаправлен туда.

Статус:
инцидент остается в работе.

Сообщение от провайдера:

В рамках работ по отражению DDoS-атаки на сетевую инфраструктуру в регионе Узбекистан, мы временно изолировали внешний интернет-трафик от внутренних сетей TAS-IX и UZ-IX.

Благодаря этому шагу доступ к сервисам, размещенным в регионе Ташкент, для пользователей из Узбекистана постепенно восстанавливается. Мы продолжаем работу над устранением инцидента и возвращением глобальной сетевой доступности.

Статус:
инцидент остается в работе.

Сообщение от провайдера:

В рамках работ по отражению DDoS-атаки на сетевую инфраструктуру в регионе Алматы, мы временно изолировали внешний интернет-трафик от внутренних сетей KAZ-GOV-IX.

Также для фильтрации внешнего трафика мы организовали служебный GRE-туннель для перенаправления трафика к развернутым комплексам фильтрации наших партнеров и приступаем к блокировке.

Статус:
инцидент остается в работе.

Сообщение от провайдера:

Совместно с операторами связи мы продолжаем расширять пропускную способность каналов и настраивать дополнительную фильтрацию.
Также мы привлекли партнеров для настройки новых маршрутов, чтобы перенаправить часть трафика на специализированные центры очистки.
Следующее обновление статуса мы предоставим по мере появления новой информации.

Проблема:
Большая часть наших сервисов недоступна в связи с проблемами на стороне нашего провайдера.

Влияние:
пользователи не могут пользоваться сайтом и лаунчером.

Что делаем:
https://selectel.live/incidents/371831