Аварии на подводных кабелях и международных линиях Submarine cable fault

ID причины isp-cable · Основной ответственный Внешние стороны · Внешние стороны · Совместно Команда инфраструктуры · Сетевая инфраструктура

Открыть карточку в основной версии с иллюстрациями и экспериментами →

После обрыва подводного кабеля трафик несколько недель (иногда месяцев), пока идёт ремонт, ходит дальними обходными маршрутами, а оставшиеся линии перегружены.

Почему Обрыв кабеля или отказ оборудования → Следствие Трафик уходит на дальние обходные маршруты и оставшиеся линии → На экране У зарубежных игроков резко растёт пинг и появляются потери, это длится от нескольких дней до нескольких недель

Симптомы: Задержка ввода, Телепортация
Факторы: Задержка, Потери
У кого: Один регион или провайдер
Когда: Всегда
Ответственные: Основной ответственный Внешние стороны · Внешние стороны · Совместно Команда инфраструктуры · Сетевая инфраструктура
Команда инфраструктуры: задачи: Иметь линии по другим маршрутам и при аварии переводить трафик на них.
Внешние стороны: задачи: Сообщить зарубежным игрокам причину и ожидаемый срок восстановления, запросить у оператора линии график ремонта.
На графике: Ступенька вверх с определённого момента · RTT (по зарубежным странам)
Где смотреть: Найти на графиках RTT и потерь по странам момент роста, сверить его со сводками интернет-сбоев Cloudflare Radar и объявлениями операторов подводных кабелей, по traceroute проверить, не идёт ли маршрут через другой континент
Подтверждает: С какого-то момента RTT для определённого зарубежного региона поднимается ступенькой и держится от нескольких дней до нескольких недель, на то же время приходятся сообщения об аварии на кабеле. Маршрут меняется на непривычно дальний обход
Опровергает: Если всё возвращается за несколько дней и сообщений об авариях нет, это «Смена маршрута BGP и сходимость» или участок сети провайдера
Чем проверить: Инструменты инфраструктуры (игровой код не нужен)

Источники

AAE-1 & SMW5 cable cuts impact millions of users across multiple countries Cloudflare
Для ремонта подводного кабеля нужно отправить ремонтное судно, поэтому он обычно занимает от нескольких дней до нескольких недель (в случае Тонги 38 дней), при обрыве растут задержка и потери на участке Европа–Азия
Q2 2024 Internet disruption summary Cloudflare
Кабели в Красном море, повреждённые в феврале 2024 года, в июле всё ещё ремонтировались (зона конфликта), обрыв EASSy и Seacom в мае устранили за 19 дней
Q1 2024 Internet disruption summary Cloudflare
Обрыв кабелей у Западной Африки (14 марта) устранили через 3–6 недель, всё это время трафик переводили на другие кабели

Смотрите также

Тот же слой: L4 Интернет-маршрут

Причины с тем же симптомом (Задержка ввода) на других слоях

Нагрузка на рендеринг при большом скоплении игроков L1 Процесс игрового клиента
Узкое место: обработка пакетов в главном потоке L1 Процесс игрового клиента
V-Sync и очередь рендеринга L1 Процесс игрового клиента
Энергосбережение и тепловой троттлинг L2 ОС и устройство клиента
Другие приложения на устройстве забирают пропускную способность L2 ОС и устройство клиента
Задержка дисплея, устройств ввода и генерации кадров L2 ОС и устройство клиента
Перегруженный радиоканал Wi-Fi L3 Домашняя сеть
Bufferbloat (очередь в роутере) L3 Домашняя сеть

Карточка в основной версии с иллюстрациями и экспериментами