Связка UCS + Fabric Interconnect

[myst]

Доброго времени суток уважаемые. Есть у меня на попечении конторка где есть пачка Cisco USC шасскиков + B22m5 + ucs-fi-6248up в качестве фабрик интерконнект.

Появилась задачка ввести в строй ещё один сайт на таком же железе. Уперлись именно в ucs-fi-6248up. Они EoL EoS и прочие oL. 

Есть мысля заменить их нехусами 5548up, но сейчас  ucs-fi-6248up управляется из единого интерфейса UCS Manager (это важно, обслуживается это всё другим персоналом), а как дела с этим обстоят у нексуса? Ну либо натолкните на другое решение?

 

 

[fractal]

2 часа назад, myst сказал:

Доброго времени суток уважаемые. Есть у меня на попечении конторка где есть пачка Cisco USC шасскиков + B22m5 + ucs-fi-6248up в качестве фабрик интерконнект.

Появилась задачка ввести в строй ещё один сайт на таком же железе. Уперлись именно в ucs-fi-6248up. Они EoL EoS и прочие oL. 

Есть мысля заменить их нехусами 5548up, но сейчас  ucs-fi-6248up управляется из единого интерфейса UCS Manager (это важно, обслуживается это всё другим персоналом), а как дела с этим обстоят у нексуса? Ну либо натолкните на другое решение?

 

 

насколько я знаю просто так нет, Вам нужна фабрика ACI

[myst]

15 часов назад, fractal сказал:

насколько я знаю просто так нет, Вам нужна фабрика ACI

Ну вот я тоже понял что нет, но какая именно фабрика нужна решительно не понятно. Я про конкретные модели.

[fractal]

Ну, это решение дорогое, там минимальное это apic m3, + допустим 2 spine nexus 9332c + 2 leaf допустим nexus 93180YC-EX для двух разнесенных цод (серверных) 

 

18 часов назад, myst сказал:

ucs-fi-6248up. Они EoL EoS и прочие oL. 

С этим ещё до 2024 живёте 

[myst]

1 час назад, fractal сказал:

Ну, это решение дорогое, там минимальное это apic m3, + допустим 2 spine nexus 9332c + 2 leaf допустим nexus 93180YC-EX для двух разнесенных цод (серверных) 

 

С этим ещё до 2024 живёте 

 

20 часов назад, myst сказал:

Появилась задачка ввести в строй ещё один сайт

 

 

похоже, придется брать 5548UP, никаких там подводных камней нету со скрещиванием этого дела с UCS?

[fractal]

34 минуты назад, myst сказал:

5548UP

Так и ему скоро на покой, честно, не скрещивал с ucs, можно спросить на Cisco community русском, может проще взять 93180YC-EX и юзать в режиме nx-os? 

[myst]

1 час назад, fractal сказал:

Так и ему скоро на покой, честно, не скрещивал с ucs, можно спросить на Cisco community русском, может проще взять 93180YC-EX и юзать в режиме nx-os? 

Я с ними дела не имел, на пальцах можно пояснить в чем проще?

[fractal]

40 минут назад, myst сказал:

Я с ними дела не имел, на пальцах можно пояснить в чем проще?

проще в том, что они в полной мере поддерживаются, ну а cli прям почти cisco like

[EvgeniySerb]

А что имеется виду под скрещиванием ? У fi 6248 и 5548 из общего только железо и то есть нюансы . Nexus не поддерживает управление blade серверам в принципе . Но естественно никаких проблем нет использовать его как свитч(и) для stand-alone ucs серверов (C серия ) . Так как 5548 создавался как л2 свитч то с поддержкой l3 есть проблемы . В общем вопрос открыт, что скрещиваем ? 
 

прямая замена fi6248 это fi 6332 и тому подобные . 6400 серию не рекомендую 

Edited May 30, 2021 by EvgeniySerb

[myst]

21 час назад, EvgeniySerb сказал:

его как свитч(и) для stand-alone ucs серверов (C серия )

у меня Name:Cisco UCS 5108

21 час назад, EvgeniySerb сказал:

В общем вопрос открыт, что скрещиваем ? 

По сути, нужен l2 эзернет и FC об объединении этого хозяйства (есть несколько сайтов по соседству в одинаковым набором оборудования) в одну фабрику похоже придется забыть. 

[EvgeniySerb]

Ucs 5108 это blade chassis , которое через IO fex adapter подключается к FI и только к FI . На новом сайте какое оборудование стоит или купили ? 

[myst]

4 часа назад, EvgeniySerb сказал:

Ucs 5108 это blade chassis , которое через IO fex adapter подключается к FI и только к FI . На новом сайте какое оборудование стоит или купили ? 

в том то и дело что стоит такое же только без FI, покупалась эта вся фигня без меня, а тут они налипли на то что на ucs-fi-6248up нет нотификации и через границу данное железо не провезти. Вот и думаю варианты как на этой все фигне взлететь.

[EvgeniySerb]

Какие IO модули стоят в шасси ? Смотри бу FI 6200 либо 6300 

[myst]

1 час назад, EvgeniySerb сказал:

Какие IO модули стоят в шасси ? Смотри бу FI 6200 либо 6300 

 Модули стоят 2208ХP...

 

Так в том то и проблема что даже БУ привезти не вариант. 6200 заворачивают на таможне, нет нотификации, легально ввезти не реально.

[EvgeniySerb]

Локально тоже нету ? С 2208хр выше 6200 серии прыгать смысла особо нет . Но взлетит на 6300 тоже . В худшем случае шасси в легаси дата центр а для нового искать сервера  C серии с VIC модулями и в пару классических свитчей northbound. Ethernet и FC  на свитчах разгребать . В этом случае нехус 5672 и выше будет правильней . 5500 рассматривать в крайнем случае 

[myst]

9 часов назад, EvgeniySerb сказал:

Локально тоже нету ? С 2208хр выше 6200 серии прыгать смысла особо нет . Но взлетит на 6300 тоже . В худшем случае шасси в легаси дата центр а для нового искать сервера  C серии с VIC модулями и в пару классических свитчей northbound. Ethernet и FC  на свитчах разгребать . В этом случае нехус 5672 и выше будет правильней . 5500 рассматривать в крайнем случае 

понял, спасибо за ликбез, буду искать. локально я нашел конечно но за тонну нефти.

[myst]

Коллеги, а поможите с мыслью.

Как оказалось FI в страну никак не ввести.

Что если две площадки объединить по iCSI или FCoE?

Имеется 1 UCS 5108 c UCS 2208XP I/O Module, 2 x 3750x с 4м 10G. Этот UCS подключен через FI к VNX5100.

На новой площадке 1 UCS 5108 c UCS 2208XP I/O Module, 2 x 3750x с 4м 10G. И так же VNX5100 но не FI.

На лезвиях поднята VmWare.

Нужно:

1) синхронизация MSSQL master-master

2) синхронизация пользовательских данных

3) FT от vmware

 

Собственно вопрос, если на второй площадке подключить UCS без FI хранилку подключить к ucs (виртуалкам) по iSCSI или FCoE. Все репликации/синхронизации делать средтвами OS гостевых машин, Типа always-on mssql итд.

Соединить хранилку на второй площадке по 10G Ethernet, объединить площадки по 10G Ethernet.

Такое может сработать  (интересует больше настройка UCS без FC)?

 

То, что написано в DS у хранилки пока вселяет оптимизм " At the same time, it supports iSCSI, Fibre Channel, and FCoE access for high-bandwidth and latency-sensitive block applications"

[jffulcrum]

Для vMotion тип хранилища не важен. Вам вообще незачем хранилки объединять, лишь бы была связность по L3. Для HA кластера, в рамках которого нужен FT, нужно совпадение железа по CPU и версий ESXI и vSphere на концах. Конкретно для FT нужна связь 10 Гбит/с между площадками - и она реально проверяет при попытке включить. И отъедает под гигабит на синхронизацию перманентно, даже в отсутствие изменений. FT защищает одну машину, лимит вроде 4 ядра и 64 Гб RAM, может уже расширили в последних обновлениях, не смотрел. 

 

AlwaysOn MSSQL бывает синхронный и асинхронный. Синхронный требует поднятия службы кластера и нужен witness - сойдет файловая шара в третьем месте. Также, там транзакция считается выполненной только после того как оба узла отчитаются, что выполнили. Если на втором узле дисковая система или память медленнее -  считай, настолько замедлится и работа базы. В асинхронном режиме кластер не нужен, за транзакцию отвечает только рабочий узел. Но, соответственно, переключение при падении для приложений придется делать вручную и может что-то потеряться на момент сбоя. 

 

синхронизация пользовательских данных - тут уточняйте, что именно. Файлопомойки винды синхронизируются отлично по DFS. Linux - делается rsync в кроне. Вообще решается репликацией виртуальных машин через Veeam неплохо. Расписание составил и вперед. Может даже сам реплики стартовать, если основная площадка отвалилась. Но сам он должен быть при этом в третьем месте. 

 

 

[kapydan]

В 31.05.2021 в 02:04, myst сказал:

По сути, нужен l2 эзернет и FC об объединении этого хозяйства (есть несколько сайтов по соседству в одинаковым набором оборудования) в одну фабрику похоже придется забыть. 

почему же, есть у циски и такие комбайны nexus 9300-fx серия, как раз поддерживают fc.

 

https://www.cisco.com/c/en/us/products/collateral/switches/nexus-9000-series-switches/datasheet-c78-742284.html

[myst]

В 23.08.2021 в 21:05, kapydan сказал:

почему же, есть у циски и такие комбайны nexus 9300-fx серия, как раз поддерживают fc.

 

https://www.cisco.com/c/en/us/products/collateral/switches/nexus-9000-series-switches/datasheet-c78-742284.html

покупать не вариант по политическим причинам

 

В 20.08.2021 в 23:24, jffulcrum сказал:

Для vMotion тип хранилища не важен. Вам вообще незачем хранилки объединять, лишь бы была связность по L3. Для HA кластера, в рамках которого нужен FT, нужно совпадение железа по CPU и версий ESXI и vSphere на концах. Конкретно для FT нужна связь 10 Гбит/с между площадками - и она реально проверяет при попытке включить. И отъедает под гигабит на синхронизацию перманентно, даже в отсутствие изменений. FT защищает одну машину, лимит вроде 4 ядра и 64 Гб RAM, может уже расширили в последних обновлениях, не смотрел. 

 

AlwaysOn MSSQL бывает синхронный и асинхронный. Синхронный требует поднятия службы кластера и нужен witness - сойдет файловая шара в третьем месте. Также, там транзакция считается выполненной только после того как оба узла отчитаются, что выполнили. Если на втором узле дисковая система или память медленнее -  считай, настолько замедлится и работа базы. В асинхронном режиме кластер не нужен, за транзакцию отвечает только рабочий узел. Но, соответственно, переключение при падении для приложений придется делать вручную и может что-то потеряться на момент сбоя. 

 

синхронизация пользовательских данных - тут уточняйте, что именно. Файлопомойки винды синхронизируются отлично по DFS. Linux - делается rsync в кроне. Вообще решается репликацией виртуальных машин через Veeam неплохо. Расписание составил и вперед. Может даже сам реплики стартовать, если основная площадка отвалилась. Но сам он должен быть при этом в третьем месте. 

 

 

да вопрос то не FT и прочем, а может ли UCS и хранилка в эзернет

[jffulcrum]

45 минут назад, myst сказал:

а может ли UCS и хранилка в эзернет

Посмотрел, именно 5100 умела только FC, и в ней нет места для плат расширения. Так что без FC к UCS вам её не подключить.

[myst]

28 минут назад, jffulcrum сказал:

Посмотрел, именно 5100 умела только FC, и в ней нет места для плат расширения. Так что без FC к UCS вам её не подключить.

там на борту есть 10G

 

точнее 2 10G вопрос можно ли через них подключить хранилку

 

 

В 20.08.2021 в 23:24, jffulcrum сказал:

10 Гбит/с между площадками - и она реально проверяет при попытке включить.

у меня на 1Г замечательно работает.

[jffulcrum]

2 часа назад, myst сказал:

там на борту есть 10G

Нету. Это кастрат, умеет только в block FC. ПДФку даже нашел. Ну или это у вас НЕ 5100.

vnx.pdf

[kapydan]

5 часов назад, myst сказал:

В 23.08.2021 в 14:05, kapydan сказал:

почему же, есть у циски и такие комбайны nexus 9300-fx серия, как раз поддерживают fc.

 

https://www.cisco.com/c/en/us/products/collateral/switches/nexus-9000-series-switches/datasheet-c78-742284.html

покупать не вариант по политическим причинам

конкретно эту модель или вообще циску?

 

просто у циски появились еще более новые серии 9300 fx2 и fx3.

[myst]

21 час назад, jffulcrum сказал:

Нету. Это кастрат, умеет только в block FC. ПДФку даже нашел. Ну или это у вас НЕ 5100.

vnx.pdf

проверю