Перейти к содержимому
Калькуляторы

Когда STP не помогает....

Упрощенно ситуация такая:

Есть два коммутатора, соединены патч-кордом, на обоих включен STP

Есть два сервера, на серверах CentOS и по два Ethernet порта.

Каждый сервер вставлен одним портом в один коммутатор, а другим - в другой. Порты на сервере объединены в Bridge.

STP разобрался и отключил порты на подчиненном коммутаторе.

А теперь фокус: Когда перезагружаешь один из серверов, он гасит на секунду свои интерфейсы, а потом поднимает. На несколько секунд возникает петля (Видимо STP не так быстро сходится)

Пока петля существует - второй сервер ее обнаруживает и на 90 секунд гасит оба интерфейса. Спустя 1,5 минуты все начинает работать. Но это пока серверов два, а если их будет 3 и более ? Это же колебательная система получится...

Единственная мысль приходит в голову - включить на серверных бриджах STP=yes. Но это не универсальное решение. Не факт что завтра не появится железка которая так не умеет... Да и не работает нормально MSTP на зоопарке разных брендов...

ЧТо скажете насчет такой проблемы ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Сделайте на серверах master/slave bonding

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

5 hours ago, grifin.ru said:

Упрощенно ситуация такая:

Есть два коммутатора, соединены патч-кордом, на обоих включен STP

Есть два сервера, на серверах CentOS и по два Ethernet порта.

Каждый сервер вставлен одним портом в один коммутатор, а другим - в другой. Порты на сервере объединены в Bridge.

STP разобрался и отключил порты на подчиненном коммутаторе.

А теперь фокус: Когда перезагружаешь один из серверов, он гасит на секунду свои интерфейсы, а потом поднимает. На несколько секунд возникает петля (Видимо STP не так быстро сходится)

Пока петля существует - второй сервер ее обнаруживает и на 90 секунд гасит оба интерфейса. Спустя 1,5 минуты все начинает работать. Но это пока серверов два, а если их будет 3 и более ? Это же колебательная система получится...

Единственная мысль приходит в голову - включить на серверных бриджах STP=yes. Но это не универсальное решение. Не факт что завтра не появится железка которая так не умеет... Да и не работает нормально MSTP на зоопарке разных брендов...

ЧТо скажете насчет такой проблемы ?

 

 

Бридж на сервере убрать , на коммутаторах настроить portfast + bpdguard , что уберёт stp tcn. Для отказоустойчивость на серверах настроить bonding aka nic teaming без lacp

 

Серверам доверять вещи типа stp некомильфо, если стабильность сети волнует хоть как то 

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

9 часов назад, grifin.ru сказал:

включить на серверных бриджах STP=yes.

при нестартовавшей ос это поможет, да.

 

еще раз повторюсь - stp для этого не предназначен

 

вероятность отказа свитча сильно ниже, чем этих костылей с ласпами и стп

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

В 04.02.2018 в 09:32, EvgeniySerb сказал:

 

 

Бридж на сервере убрать , на коммутаторах настроить portfast + bpdguard , что уберёт stp tcn. Для отказоустойчивость на серверах настроить bonding aka nic teaming без lacp

 

Серверам доверять вещи типа stp некомильфо, если стабильность сети волнует хоть как то 

 

Настроил по Вашему совету Teaming в режиме active-backup, возник вопрос способа мониторинга отказа.

Просто Link State меня не устраивает, ибо это защищает только от отказа всего свитча. Если сломается, скажем, порт который идет к коммутатору то линк не упадет... А вот как настроить альтернативный link whatcher в схеме, когда на team Интерфейсе нет IP адреса (он член бриджа (сервер с виртуалками на KVM))

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

arp -n | wc наверное может быть использован. Если нет записей, то переключаться.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

@dignity А можно ссылочку где почитать про все возможные линквотчеры и способы их настройки ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

К сожалению, мы не в интеллектуальном казино "Что? Где? Когда?"...

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

у bond модуля есть встроенный способ мониторинга.. http://xgu.ru/wiki/Linux_Bonding#ARP_Monitor_Operation

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

1 hour ago, grifin.ru said:

Настроил по Вашему совету Teaming в режиме active-backup, возник вопрос способа мониторинга отказа.

Просто Link State меня не устраивает, ибо это защищает только от отказа всего свитча. Если сломается, скажем, порт который идет к коммутатору то линк не упадет... А вот как настроить альтернативный link whatcher в схеме, когда на team Интерфейсе нет IP адреса (он член бриджа (сервер с виртуалками на KVM))

Lacp поддерживается на KVM vswich ? Если да то проще его использовать. Ситуаций когда порт «сломался» но при этом остался в up не помню на своей практике 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

@EvgeniySerb 

Сломался другой порт, который смотрит в маршрутизатор. Этот порт не сломался и поэтому остался в UP, но связи коммутатора с маршрутизатором нет.

@zhenya` 

Оно будет работать если на интерфейсе нет адреса ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

23 minutes ago, grifin.ru said:

@EvgeniySerb 

Сломался другой порт, который смотрит в маршрутизатор. Этот порт не сломался и поэтому остался в UP, но связи коммутатора с маршрутизатором нет.

@zhenya` 

Оно будет работать если на интерфейсе нет адреса ?

Lacp использует собственные l2 bpdu . Если под адресом имеется ввиду IP address , то IP address не нужен 

если «сломался» порт за свитчами куда включён сервер - что то не так с дизайном , подобный отказ никак не должен влиять на сервера подключённые к свитчу  и их связь с маршрутизатором . Для подобных случаев используется NHRP протоколы, типа vrrp/hsrp/glbp/ garp etc 

 

4 minutes ago, EvgeniySerb said:

Lacp использует собственные l2 bpdu . Если под адресом имеется ввиду IP address , то IP address не нужен 

если «сломался» порт за свитчами куда включён сервер - что то не так с дизайном , подобный отказ никак не должен влиять на сервера подключённые к свитчу  и их связь с маршрутизатором . Для подобных случаев используется NHRP протоколы, типа vrrp/hsrp/glbp/ garp etc 

Про адрес вопрос кажись был не ко мне, так что, прошу пардона 

Если после свитчей натмаршрутизатор l3 Линки , тогда динамическая маршрутизация либо на худой конец IP SLA

если l2 , тогда nhrp , подразумевая что маршрутизатора два. 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

10 минут назад, EvgeniySerb сказал:
40 минут назад, grifin.ru сказал:

@EvgeniySerb 

Сломался другой порт, который смотрит в маршрутизатор. Этот порт не сломался и поэтому остался в UP, но связи коммутатора с маршрутизатором нет.

@zhenya` 

Оно будет работать если на интерфейсе нет адреса ?

Lacp использует собственные l2 bpdu . Если под адресом имеется ввиду IP address , то IP address не нужен

Про LCAP пока речи не идет. Там есть мониторинг на базе ARP IP Targets, оно будет работать если на интерфейсе нет IP адреса ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

у него разные свитчи и слишком простые. какое там лацп) явно mlag не поддерживается.

 

он про лацп бпду. для них ип не нужен. для арп мониторинга нужен айпишник.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

В 11.02.2018 в 09:28, zhenya` сказал:

явно mlag не поддерживается

А где он поодерживается, кроме цисок, хуавеев и естримов ? В mid-price сегменте (типа того-же HP) есть такие решения ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Вроде на hp6600-24xg аналог mlag есть.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Cisco, (даже на дешевых n3k), juniper, arista hp, Etc и даже прости господи nortel 

Что такое mid-price , я не много не в теме , это сколько за за свитч ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Гость
Ответить в тему...

×   Вставлено в виде отформатированного текста.   Вставить в виде обычного текста

  Разрешено не более 75 смайлов.

×   Ваша ссылка была автоматически встроена.   Отобразить как ссылку

×   Ваш предыдущий контент был восстановлен.   Очистить редактор

×   Вы не можете вставить изображения напрямую. Загрузите или вставьте изображения по ссылке.