Cactus провайдер

Работы по восстановлению кабельной канализации продолжаются, ожидаемое окончание 22-23 часа. У нас пока все работает в обычном режиме. Фотографиями поделились коллеги из GlobalNet. Современный высокоскоростной интернет выглядит именно так. Каждый кабель может содержать десятки оптических волокон и по каждому можно передавать сотни гигабит трафика. И эта незримая для обычного пользователя сеть окутывает улицы, города и страны.

Появилось немного информации по происшествию - https://www.fontanka.ru/2025/12/11/76167285/ , пока наши линии связи не падали, возможно и обойдется, но работы на месте еще не окончены. Сегодня ночью провели работы, перераспределили внешние каналы, чтобы в случае отключения связь оставалась на максимально комфортном уровне. Ждем официальных сообщений об окончании работ.

Только, что пришло оповещение от ГлобалНет, на проспекте Науки, авария у Ростелекома в кабельной канализации. Завтра с утра они начнут восстановительные работы. В зоне проведения работ оказались кабели сразу двух наших независимых магистральных каналов связи на точки обмена трафиком. И они могут быть оборваны завтра при проведении работ. 12 декабря в течение дня могут быть проблемы со связью, со своей стороны постараемся обеспечить максимальную работоспособность сервисов, у нас должен остаться еще один канал связи в работе. Пожалуйста, планируйте завтрашний день с учетом того, что связь может отсутствовать несколько часов с утра и днем. И не только у нас, как у провайдера.

Заменили, запустили, все должно работать примерно уже с час. Если вдруг не работает , наберите , пожалуйста, +7(812) 456-50-50.

Коммутатор подготовили, везем через пробки на узел для замены. Отключились Шувалова 2, 4, 4/1 , Охт 14, 16 , А. Балтики 3.

Ну вот только написали, как получили оповещение от узлового коммутатора на Охтинской 14 о низком заряде его аккумуляторов. Видимо отказ блока питания. Требуется замена, готовим новый коммутатор под замену.

В Западном Мурино сегодня днем произошла авария по электропитанию.  Напряжение где-то поднималось до 273 Вольт, а где-то пропадало совсем. На фоне продолжающихся с ночи  проблем с мобильным интернетом. Подвисшее и отказавшее оборудование проводных операторов связи стало очень неприятным сюрпризом. У нас отключение прошло нормально и для пользователей прошло в основном незаметно. Отказал один канал связи и маршрутизатор, но их функции автоматом были переведены на резервное оборудование. А после возврата питания все коммутаторы вернулись в работу. В очередной раз нормально себя показывают реле зашиты Меандр УЗМ-50Ц. Такое и домой можно ставить. Из приятных особенностей - включение нагрузки при переходе через ноль. Чтобы плавно включать оборудование в работу. Без резких скачков тока с возможным отключением автоматов защиты.

Сегодня подняли еще один линк Мурино-Санкт-Петербург на 100G. На фотке, транзитный узел связи на проспекте Просвещения, модуль qsfp28 100G, уровень излучения с него и поднявшийся порт связи на коммутаторе Mikrotik CRS510-8XS-2XQ.

Время удивительных историй! Мы в телекоме как-то привыкли, а вот со стороны это будет странно. Дело в том, что покупая, серьезное сетевое оборудование очень известных производителей типа Интел, Циско или том подобных Нвидиа, вы как бы подписываете странный контракт, нигде не его реально не подписывая. Вам вменяют в обязанность использования в тех самых высокоскоростных портах устройств на 10-25-40-100 и тому подобное гигабит, трансиверов только одобренных с барского плеча производителя. Которых и в лучшее времена днем с огнем было не найти. Вы просто так не можете взять любую сетевую карту Интел с портом 10G SFP+, и воткнуть в нее любой нужный вам 10G SFP+ трансивер. Нет! В ряде случаев вы получите сообщение драйвера о том, что ваш модуль не поддерживается, и идите лесом. Самое эпичное происходит, когда такое заявляет во время загрузки обновленный драйвер сетевого устройства. Вот 15 минут назад, все было ок и работало месяцами без проблем, а тут вы обновили систему и все, она уже более недоступна, прилетаете на место, включаетесь в сервер, и видите такую пакость, а даже откатить не можете, сети то нет. Все ради надежности и бесперебойности! Индустрия приспособилась, существуют под Linux патчи драйверов и прошивки сетевых адаптеров, ну вот например - https://github.com/bibigon812/xl710-unlocker . Хотя производители порой, нехотя и добавили всякие фичи драйверов и коммутаторов, такие как параметр модуля ядра ixgbe allow_unsupported_sfp=1 , но работают они не всегда. Поэтому когда мы покупаем оптические модули, нам приходится тестировать даже далеко не дешевые WDM 100G qsfp28 модули. И во время покупки мы просим поставщиков прошить нам их определенной прошивкой. Вот нам залили на 2 модуля прошивку для Микрота, а на точно такие два остальных прошивку под Cisco. Так и живем. Все модули надо проверять непосредственно на своем оборудовании перед установкой. Готовим дальнейший апгрейд каналов связи, уже очень хорошо себя показал во время аварии новый 100G, канал. А еще я никак не могу объяснить себе тот факт, что qsfp 100G модули для связи по одному волокну существуют, а модули qsfp 40G работают минимум на двух волокнах. Поэтому чаще всего с 10 гигабит перейти сразу на 100G проще, чем на 40G.

Вот так в 19:31 отвалились все наши рабочие l2tp каналы связи, РКН сегодня официально заявил о блокировке нескольких протоколов. https://www.rbc.ru/technology_and_media/04/12/2025/692edb139a79470afc90db77 Ждем завтра с утра вал заявок от клиентов как мы блокируем им рабочие VPN соединения :( Мы то быстро махнули на рабочие протоколы, а вот разного рода корпоративщики, порой не вселяют надежды на оперативность их решений. Для организации VPN подключений в рабочих целях мы активно использовали оборудование MikroTik и протокол L2tp, который отлично поддерживается большим количеством оборудования и не требует установки дополнительного софта, от рабочих станций Windows до телефонов Android и Apple. Сейчас переползли на SSTP, но на Микротиках, даже на очень серьезных , выжать из него более 30-40 мегабит не получится. Для работы сотрудника за глаза, но вот для удаленного выноса сетей - не хватает. Для этих задач подняли IPIP тоннели с аппаратным IPSEC, работает без ощутимых ограничений скорости. Но IPIP требует реальных IP адресов с обоих концов соединения, для мобильных клиентов не подойдет. Так что сотрудники на SSTP, сети на IPIP.

Поставили тут на зависающий маршрутизатор memtest86 и memtest86+, и сразу на первых же секундах тестирования поймали глухое зависание, и на одной и на другой версии софта и в SMP, и в однопроцессорном режиме. Подумалось - вот ОНО!!! Но нет почитав форумы, оказалось, что не самая новая версия софта может не знать особенностей процессора и приводить к зависанию. Залили версию 7.20 запустили, отработал много часов, ошибок с железом не обнаружилось. Сам же маршрутизатор выведенный из работы тоже отлично работает. Ищем дальше.

Простите за неудобства связанные с периодическим отсутствием связи, все исправим. Прошлой ночью провели работы, подготовили новое оборудование. Сейчас во время сбоя, с 23:57:35 по 00:05:51 , оно отлично отработало. Был заметен не сколько сам сбой, сколько момент включения обратно. Не хотелось трогать на выходных, но достало, терпеть невозможно. Мы с трех часов ночи сегодня переведем маршрутизатор на другое железо. На фотке, сверху вниз, текущий маршрутизатор 2x100G DAC, сервер виртуализиции 2x10G DAC, маршрутизатор, который введем в работу 2x40G AoC.

Так, опять повисло, включился автоматом резерв, маршрутизатор перезагрузился минут через 15. Но на старте, на пару минут была заминка, ночью вместо router написал outer. Не удалились маршруты на наши сети с резервного маршрутизатора. Ситуация неприятная, но сильно лучше чем 2 дня назад. Будем вводить в работу старый маршрутизатор. Выехали, подготовим сегодня ночью все для переключения на стабильную, проверенную, железку.

Работали почти неделю с единственным,  маршрутизатором в резервной серверной и получили отказ, просто глухое зависание без логов в системе и без каких либо аппаратных ошибок.  По итогу попробовали ввести вручную в  строй еще один ререзервный сервер маршрутизаци из еще одной дополнительной серверной. Завелся, хоть и не сразу, минут 40 лежали, но новые карты mellanox connect-x5 под такой нагрузкой еще так долго  у нас не находились. Были глюки. Перезагрузили  и ввели в работу зависший, все мигом нормализовалось. Причина зависания ясна не стала. Оборудование новое, тут всякое может быть. Пока включили ipmi watcdog, который гарантированно(надеюсь)  перезапустит сервер  в подобной ситуации минут за 10.  И настроили третий резервный маршрутизатор, на автоматический ввод в работу. А часа через четыре после устранения, нам, наконец, вернули 2 канала связи поврежленные дорожниками в прошлую пятницу. Работаем, делаем все для сохранения живучести сети несмотря на всякого рода экскаваторщиков. Вот не смутил дорожников люк кабельной канализации, и аккуратно вбили опоры с двух сторон люка. Явно солнечные вспышки действуют на умы отключабще.

Коллеги восстанавливают оптическую магистраль в Санкт-Петербург. Вот так в волокна подается видимый глазу оптический сигнал, при малейшем изгибе волокна или на его оборванном торце видно красное свечение на дистанции в несколько километров. С той стороны сейчас сидит инженер - сварщик оптических волокон. Находит их по свечению и сваривает. Сигнал от обычных трансиверов не виден глазу, хотя он порой и более мощный. А мобильный телефон увидеть может, возьмите пульт от телика, когда вы кнопочки нажимаете, камера телефона покажет невидимые глазу огоньки в окошке передатчика. Обычно пульты передают сигнал на длине волны 940нм, это совсем невидимый глазу человека сигнал. 850нм часто используется в ИК подсветках, камер видеонаблюдения. Глазом он немного заметен как слабое красное свечение в ночи. А в оптических волокнах есть 2 основных окна прозрачности 1310 и 1550 нанометров, и точно на них или рядом с ними и передают все современные системы оптической связи.

Поймали деградацию инета сейчас, думали включились какие-то из каналов обратно, но работает плохо - нет, все чисто. DDoS атак не наблюдается, нагрузка упала вечерняя. Вообще все хорошо должно быть. Канал единственный оставшийся в отличном состоянии. Оказалось, что , запустился сервис Conntrackd, который ну ОЧЕНЬ нагружает систему. И используется нами только в ручном режиме короткое время для незаметного перевода трафика с одного NAT маршрутизатора на другой. Да но кто запустил, лишний сессий нет, точно никто не делал. Оказалось, что в сервисе Logrotate раз в 2 недели, при архивировании логов. Conntrackd запускается сам.... Отродясь такого не было и вот опять. Выковыряли! Маршрутизатор новый, всякое всплывает. Но сколько лет занимаюсь linux, чтобы сервис запускался системой сам - вижу первый раз! Хороших выходных! Надеемся все будет хорошо!

В Мурино и Новом Девяткино - вторые сутки неполадки с интернетом из-за обрыва кабеля По телефону техподдержки интернет-провайдера еТелеком сообщили, что восстановительные работы пока продолжаются.  Регламентный срок проведения работ – до 48 часов, но специалисты прилагают усилия, чтобы закончить раньше.  В Мурино в зону работ попали: №63, 65Т, 67, 93, 95 на ул. Шоссе в Лаврики; №10 на ул. Северный проезд. В Новом Девяткино: ул. Энергетиков, 5 и ул. Арсенальная, 11. Есть пострадавшие и в Петербурге и пригородах.  В управляющей компании ПИК-Комфорт жителей ЖК "Заречный парк" в Новом Девяткино в пятницу вечером предупредили, что из-за аварии на интернет-сетях пропал доступ в интернет и к телевидению. Перестало работать приложение для контроля доступа в подъезд, жителей призывали пользоваться обычными ключами.  ЖК комфорт-класса включает восемь домов от 15 до 24 этажей. 47news Девяткино онлайн ✅

Ух ты с этими проблемами уже и в новости попали, восстановить не удалось пока. Нашли место повреждения в районе моста предварительно. Строители похоже вбили в месте прохождения канализации металлическую опору. Но в таком месте, что не понятно как это разбирать, не разбирая сам мост.