Посоветуйте железо для 7-10gbit bgp

[mishasat]

Прошу совета и помощи. Нужно в 1u поставить сервер для BGP ожидаемая нагрузка 7 гбит с запасом 10.

В работе стоит amd 8350 и двух глазая сетевая 82599eb только зебра, прокачивает 4 гбита, и проц упарается по прерываниям.

Вопрос что поставить для 7-10 гбит. Какой пооц?

Интел? Какой?

А оптерон 6300 16 ядер ( 8 пакетов по 2 ядра) это 16 физ прерываний или всетаки 8.

Очень бы хотелось поднять вопрос о физ прирываниях амд, да они медленее по тестам но нам сетевикам может быть физ прерывания дадут то что надо? Или всетаки интел?

[vlad11]

Если только BGP, то делайте внутри сети роут-сервер.

[mishasat]

Мне надо трафик прогнать через сервер, роут сервер не подойдет.

[NiTr0]

У интела намного меньше латентность кешей и памяти. Ну и плюшки типа dca. Потому - да, только интел.

[vitalyb]

mishasat

что за ПО на сервере? смотрели perf top?

 

Касаемо процессора... на счет фул-вью не скажу, но 10к маршрутов с натом E5-2650 в перманентном турбобусте на 2.4 с лопатит 4 гига с загрузкой 30%. Два четырехядерника процентов на 30-40 масштабируются хуже.

 

Ну и плюшки типа dca.

кстати, кто-нибудь мерял эффект на современных системах? А то я пробовал выключать, когда баги искал, эффекта не заметил особо. В частноти, на вышеобозначенной системе оно выключено.

[pavel.odintsov]

vitalyb, а не поделитесь опытом преелопачивания 10Ge? Есть машинка на E5-2620 (numa, но процессор стоит один) и пачка Intel X520. Пока на тестах весьма и весьма фигово все :(

[vitalyb]

pavel.odintsov

Как поведет себя эта машинка на 10г сложно сказать, пока нет возможности проверить (есть внешние относительно сервера ограничения).

 

Главное не вкючать интеловскую аппаратную IO виртуализацию VT-d. Хоть она не используется, но всё умирает на гигабите уже. Ну и как обычно, резмеры всяких хешей, прерывания, и прочее, вплоть до выпиливания ipsec чтобы skbuf уменьшиить, список приличный. У того же X520 и его драйвера есть несколько режимов работы и всякие улучшайзеры-оффлоадеры для отдачи и приема контента, мешающие роутингу неочевидным образом. perf top, исходники в руки и вперед тюнить под конкретную задачу, рецептов на все случаи жизни довольно мало.

 

У NUMA в придачу ко всему прерывания с определенных слотов "заведены" на определенные процы аппаратно - тоже надо учитывать и не всегда есть физическая возможность (сервер 1U, например) повесить сеть на нужый проц. Прерывание и всё остальное, конечно, можно обрабатывать и на другом процессоре, но скорости это не добавляет.

[vadimv2]

asr esp20 поставить и не морочить себе голову....

[telecom]

резмеры всяких хешей, прерывания, и прочее, вплоть до выпиливания ipsec чтобы skbuf уменьшиить, список приличный.

Огласите, плиз, весь список!

[vitalyb]

Огласите, плиз, весь список!

1. Нагрузить систему

2. Найти узкое место

3. Устранить узкое место или понять почему это сделать нельзя

4. Перейти к п.1.

 

:)

 

Вообще, весь тюнинг зависит от задачи. Как бы в этом и есть весь смысл тюнига.

[telecom]

Огласите, плиз, весь список!

1. Нагрузить систему

2. Найти узкое место

3. Устранить узкое место или понять почему это сделать нельзя

4. Перейти к п.1.

 

:)

 

Вообще, весь тюнинг зависит от задачи. Как бы в этом и есть весь смысл тюнига.

Это все общие слова....

Мне интересен Ваш реальный опыт))))

[VVSina]

была на наге где-то статейка про то как 10г на линухе шейпили...

Найти с наскоку неполучилось ;(

[s.lobanov]

Огласите, плиз, весь список!

1. Нагрузить систему

2. Найти узкое место

3. Устранить узкое место или понять почему это сделать нельзя

4. Перейти к п.1.

 

:)

 

Вообще, весь тюнинг зависит от задачи. Как бы в этом и есть весь смысл тюнига.

Это все общие слова....

Мне интересен Ваш реальный опыт))))

 

Это методика. На все случаи жизни заранее нельзя сказать как сделать из линукса конфетку. Максимум что можно ещё сказат это список инструментов с помощью которых искать узкое место. А как их искать - читать документацию на эти инструменты.

[Wingman]

2*E5-2670 + x520-DA2 у нас молотил до 5g in + 3g out с lISG, nat, полисерами и нагрузкой на процы до 60%

 

Думаю, если отключить коннтрак (нат же не нужен?), промолотит до десятки совсем свободно

[Painter]

Встал вопрос выбора процессора для нового бордера. Трафик 4 гигабита. Есть какие-нибудь общие рекомендации по выбору процессора? например что лучше - 8 ядер 2.7ГГц 20Мб кэша или 2x4ядра 3.3ГГц 10мб кэша по примерно одинаковой цене? Есть ли какая-то деградация при увеличении количества ядер? например если будет 24 ядра в сервере.

[vitalyb]

Painter

Обычно есть деградация при увеличении количества процессоров (реальных или когда в одном пакадже 2 отдельных кристалла без общего L3/L4). Лучше один на 8 ядер.

[mishasat]

Нужен совет коллектива. Что лучше i7 4770 или 4930

У 4770 более свежее ядро хасвел и значит более быстрый кеш Л1, а у второго на два ядра больше и четырех канальная память и Л3 кеш больше

Что лучше взять для прогона трафика на BGP машине

[snark]

6500 + sup720-3bxl подойдет идеально, но в 1U уже не впишется :(

[nuclearcat]

BGP прием или только анонсы?

А то если роутов немного - может 4948 с 10G пойдет. У Наг-а такие есть, и недорого относительно. wirespeed, в отличии от писюков, если ресурсы не превышать.