[mousus]

Ерунду не надо писать. Бывает pci32/66, бывает pci-x, да и pci-e уже несколько лет везде используется. Если у вас на роутерах дисковый обмен, то Вы показываете яркий пример - как не надо делать роутеры.

да да да, есть в том серваке и слоты pci-x и вообще вот мать http://www.nix.ru/autocatalog/motherboards...tATX_17683.html динозавр собсно говоря, и приведён был как пример, и в самом жирном месте там стоит скази контролеер и вообще сервак под виндой большую часть времени mssql рулит, оказалось что именно это он делает лучше всего. да и приведён был как пример того что и на серверных матерях может плохо работать сеть.

 

[jab]

 

Ну и чего ? Три слота PCI-X/100 мало ? Мать-то там при чем ?

[bitbucket]

В чем смысл этих именно этих команд ? :)

Посмотреть что и как... Теперь мне понятно: 7.2 может жевать ~200kpps на ядро-карточку. Воткните 5 карточек на 5 ядер,

эксклюзивно приклепывая каждое emX taskq к отдельному ядру - получим 1мппс в сумме. В правильный тазик пихается 6 портов 1ге вполне легко, дальше видимо упрется в шину.

 

Мне сейчас более интересно добиться значения 500-600кппс на порт-ядро (с фаерволом и роутингом, разумеется).

 

И, вы таки удивитесь, но - да в ipfw у меня шесть правил всего.

# ipfw list | wc
       6      56     297

Ну такое не у всех: многие фильтруют сразу на бордере, так как это удобно.

Изменено 8 января, 2010 пользователем bitbucket

[Dm1try]

Ну такое не у всех: многие фильтруют сразу на бордере, так как это удобно.

Это примерно так же как:

У каждой проблемы существует очевидное простое НЕПРАВИЛЬНОЕ решение.

 

L3 в центре сети зачем стоит?

 

А с окончанием праздников буду пробовать либо добить по 4-е вместо 2-х em(4) и еще один процессор или igb(4).

[bitbucket]

L3 в центре сети зачем стоит?

Не думайте, что у всех сети одинаковые.

 

[TiFFolk]

Ну такое не у всех: многие фильтруют сразу на бордере, так как это удобно.

Это примерно так же как:

У каждой проблемы существует очевидное простое НЕПРАВИЛЬНОЕ решение.

 

Что же вам не нравится в фаерволле на краю сети? Как раз их и ставят между wan и lan.

[jab]

Что же вам не нравится в фаерволле на краю сети? Как раз их и ставят между wan и lan.

И что с того ? Файерволл целесообразно размещать вместе с шейпером, а шейпер для эффективного использования L2/L3 cache лучше уносить от бордеров.

Не важно где он, главное - чтобы он был. У меня например пакет от юзера до аплинка проходит три файерволла, не жалуюсь.

 

irq256: em0 9999 0

irq257: em1 7673736736 419

irq258: em2 18298089992 1000

irq259: em3 16007774299 875

irq260: em4 15825221795 865

irq261: em5 15981158464 873[/code]

Не совсем понятно, как осуществляется резервирование такого пепелаца ?

[Ivan_83]

ну тут именно я упомянул nginx который работает на фронт-энде кластера вэб-серверов, тоесть он по сути является такимже маршрутизатором, но именно http трафика -- принимает запрос, проксирует запрос и отдаёт ответ, работая при этом на самом высоком уровне и как пришли все к выводу что упирается в производительности в малоэффективные медные гигабитные сетевухи, которые в силу своей архитектуры тупо не могут и 700 мегабит прогнать, а еще и в производительность самой шины и северного и южного моста чипсета ---- эксперименты ставили ставили в разные компы 10G стеклянные сетевухи и по результатам бенчмарков выжимали только 4.5 гигабита, при том упирались именно в шину на мамке, при том что даже мегапроизводительный проц тупо простаивал...

А нефик было 10GE тыкать в PCI-E x1, у него одного как раз скорость 5 гигабит.

 

Недавно глядел современные мамки.

Такое впечатление что интел опять кинул народ с 1356 сокетом, прямо как с 423 когда то.

Смотрел на 1156 в связке с P55, там ICH нет. Интересно.

Но есть наипалово с SATA3 и USB3: двух портовые контролёры стоят на PCI-E x1, те полную скорость что сата3 что юзби3 может выдать одновременно только один на порт.

 

[mousus]

хаааа, вы Ivan_83 чертовски правы, в том числе и не только производители мамок так делают --- на многих "крутых" аудиосистемах пишут надписи вида "стопицот ватт" явно не указывая что эти ваты аппарат в силах дунуть только в пике и только в один и нескольтких каналах и только на определённой частоте и только определённое ограниченое время. вот и с комповым железом таже варежка ---- вот про усб 2.0 песни про четыреста мегабит давно поют --- чистый маркетинг --- вы мне таки покажите хоть одну из железок в наших магазинах, которую по этому самому усб 2.0 подключают и она дует все эти сотни мегабит... вот ип про мамки таже песня --- нам громко орут про очередной стандарт передачи, про контроллер этого стандарта, про скорость и вот мы наслушавшись этой бредятины думаеи что мы воткнули в суперсовременную мать очередное дитя инженерной мысли, в нескольких замерах увидели примерно цифру с яркой упаковки и в очередной раз забыли про то что гдетот нас могли наколоть

 

вот выше я писал про старый сервак на прошлой работе, еще один из примеров где гнилая шина сводила на нет все понты: в очереднойиз апгрейдов я воткнул в сервак для бэкапов сата контроллер и парочку дисков в довесок к 3 сказёвым уже имевшимся на борту и начал гонять тесты копируя толстые файлы ---- долговременная стабильная скорость обмена на сата с сата на сата винты была около 95-100 мегабайт в секунду, старенькие сказёвики выжимали около 80 мегабайт в секунду, но когда я запускал паралельно копирование и с сата на сата, и со скази на скази всё вставало раком не показывая и больше 10 - 20 мегабайт в секунду на обоих операциях, ну и когда я еще добавлял нагрузки по сети запуская iperf то всё вообще накрывалось медным тазом --- тупо не справлялась шина, процы были не загружены, а вот прерыванияи прочая железная фигня просто душили систему

 

и после всего этого начинает сдаваться что тут беда именно в шине, архитектуре и в более принципиальных вопросах схемотехники нежели мегагерцы, гигабиты и прочие пакетрейты...

 

[Dm1try]

Не совсем понятно, как осуществляется резервирование такого пепелаца ?

Да, так же как и у всех - рядом стоит такой же. Раньше просто нужно было переключить нужные провода, с нового года добавим еще L3-свитч и просто нужно будет перекинуть нужные VLAN-ы в нужные порты. Да и вообще у меня все серверы на одной аппаратной платформе и различаются только количеством/тактовой частотой Xeon-ов и набором сетевых карт.

Вот только нет слотов PCI-E v2, igb-карты наверное не получится попробовать в работе или получится но в режиме совместимости какой-нибудь, еще не прочитал.

Изменено 10 января, 2010 пользователем Dm1try

[bitbucket]

Да, так же как и у всех - рядом стоит такой же.

Вот это как раз и есть "очевидное НЕПРАВИЛЬНОЕ решение". Так как к вашим "тазикам" еще и круглосуточный человек нужен, который vlan переключит...

[terrible]

Вот это как раз и есть "очевидное НЕПРАВИЛЬНОЕ решение". Так как к вашим "тазикам" еще и круглосуточный человек нужен, который vlan переключит...

почему неправильное? написали же:

с нового года добавим еще L3-свитч и просто нужно будет перекинуть нужные VLAN-ы в нужные порты.

если добавить немного правильной автоматики - человек не нужен

 

[jab]

нам громко орут про очередной стандарт передачи, про контроллер этого стандарта, про скорость и вот мы наслушавшись этой бредятины думаеи что мы воткнули в суперсовременную мать очередное дитя инженерной мысли, в нескольких замерах увидели примерно цифру с яркой упаковки и в очередной раз забыли про то что гдетот нас могли наколоть

вот выше я писал про старый сервак на прошлой работе, еще один из примеров где гнилая шина сводила на нет все понты:

Может стоит начать читать документацию вместо рекламы ?

 

Да, так же как и у всех - рядом стоит такой же.

Вот это как раз и есть "очевидное НЕПРАВИЛЬНОЕ решение". Так как к вашим "тазикам" еще и круглосуточный человек нужен, который vlan переключит...

У вас что, нет круглосуточного человека ?

[bitbucket]

У вас что, нет круглосуточного человека ?

Даже если и есть человек - время простоя будет всегда больше, нежели 100% автоматическое решение, основанное на резервировании через многоточечные стыки и распределении нагрузки между несколькими устройствами.

[jab]

У вас что, нет круглосуточного человека ?

Даже если и есть человек - время простоя будет всегда больше, нежели 100% автоматическое решение, основанное на резервировании через многоточечные стыки и распределении нагрузки между несколькими устройствами.

:-)) Мой опыт ( И опыт СШГЭС ) говорит, что при 100% автоматических решениях время простоя в разы больше, чем ручное управление. Рекомендую читать законы Мэрфи на досуге. ;-)

[mousus]

Может стоит начать читать документацию вместо рекламы ?

ага, есть инженеры а есть менеджеры, кто у нас рулит --- манагеры: --- мы вам с циферками и да еще и новое подогнали, а вы что не инженеры чтобы заставить это Г. работать? ---вот примерно такой подход, да еще и и стандартный аргумент "Ведь оно же НОВОЕ!" .... йа плачу....

 

не, я конечно помню времена когда паял спектрумы, изгалялись тогда на ассемблере выжимая все соки из выжатого лимона --- но это был спорт, при том захватывающий, и схемы спека были тогда зазубрены по полной программе, но вот вы объясните простому обывателю даже не показывая электрическую принципиальную, а простую блочную схему мамки 86 архитектуры того или иного посола и при том объясните так чтобы он сделал правильный выбор модели под те или иные задачи --- чёрта с два что получится, проще этикетку с циферкой повкуснее...

[jab]

ага, есть инженеры а есть менеджеры, кто у нас рулит --- манагеры: --- мы вам с циферками и да еще и новое подогнали, а вы что не инженеры чтобы заставить это Г. работать? ---вот примерно такой подход, да еще и и стандартный аргумент "Ведь оно же НОВОЕ!" .... йа плачу....

Вы действительно не инженеры, вместо чтения документации и покупки одной нормальной сетевухи устроили абсолютно ненужные пляски с биосом. Кто хочет - тот работает, кто не хочет - ищет

оправдания... манагеры виноваты, производители материнок, писатели рекламы...

 

но вот вы объясните простому обывателю даже не показывая электрическую принципиальную, а простую блочную схему мамки 86 архитектуры того или иного посола и при том объясните так чтобы он сделал правильный выбор модели под те или иные задачи --- чёрта с два что получится, проще этикетку с циферкой повкуснее...

Я этим занимался много лет. И вполне успешно. Другое дело, что сейчас технологии и цены на мамки такие, что никакой разницы в выборе для потребителя нет. Важнее - чтобы магазин был поближе к дому. Сложнее объяснять не обывателю, а тем, кто считает себя крутыми инженерами а весь лоб в шишках от граблей. :-)

 

 

[mousus]

Вы действительно не инженеры, вместо чтения документации и покупки одной нормальной сетевухи устроили абсолютно ненужные пляски с биосом. Кто хочет - тот работает, кто не хочет - ищет

оправдания... манагеры виноваты, производители материнок, писатели рекламы...

да вы не так поняли --- одно дело когда профи делает проект и всё ставит в каждый узел по феншую и то что должно там стоять, а тема то изначально про новичков, которым 1) надо 2) как можно оптимальнее 3) грамотнее но у них мало опыта, вот тут и задача не сесть в лужу

 

кстати по какимже признакам новичок должен определить что например сетевуха "нормальная" вот пример:

 

витрина-----сетевуха1---сетевуха 2

---------------ценник1-----ценник2

 

и ценники 1 и 2 отличаются мало, хотя железно например сетевуха 2 по ТТХ превосходит первую с завидным разрывом по всем фичам

[bitbucket]

:-)) Мой опыт ( И опыт СШГЭС ) говорит,

На СШГЭС "Чубайс болты откручивал", автоматика там не при чем. :)

 

что при 100% автоматических решениях время простоя в разы больше, чем ручное управление. Рекомендую читать законы Мэрфи на досуге. ;-)

Работа bgp4 ведь автоматика ? Как ни странно, но оно работает, и у многих.

 

ЗЫ: Может быть закомы Мэрфи на Татуине более сильно действуют ?

[jab]

Работа bgp4 ведь автоматика ? Как ни странно, но оно работает, и у многих.

Давно флапы не ловили и вручную acl не прописывали ? :-))) Расслабились.

[Dm1try]

Как новичек скажу - прочитать, что нужно в общем смысле, без конкретной привязки к железу:

1. Сетевые с наибольшим аппаратным буфером;

2. Процессор с приемлемой тактовой частотой и наибольшем кэшем;

3. Мат. плата с шиной способной 'прожевать' вышеперечисленное с запасом.

Далее:

1. Прочитать документацию - выбрать железо удовлетворяющее требованиям;

2. Исходя из денег в наличии - выбрать производителя;

3. Если по железу еще возникают - доставать support производителя или продавца;

3. Узнать у продавца насколько сложно добрать необходимую комплектацию будет в дальнейшем, купить одну железку.

4. Собрать/оттестировать - если все в порядке, купить партию.

 

Вот и все.

[jab]

кстати по какимже признакам новичок должен определить что например сетевуха "нормальная" вот пример:

А он и не должен определять. Пусть платит профессионалу. А то новички повадились безопасные фейерверки взрывать, аппендицит вырезать, деривативы выпускать.

[Dm1try]

Работа bgp4 ведь автоматика ? Как ни странно, но оно работает, и у многих.

ЗЫ: Может быть закомы Мэрфи на Татуине более сильно действуют ?

А теперь на минуту подумаем зачем магистральным провайдерам, КРУГЛОСУТОЧНО, требуются люди следящие именно за BGP?

 

P.S> Последний пост в этой теме - надоело.

 

[bitbucket]

4. Собрать/оттестировать - если все в порядке, купить партию.

Этот пункт как раз самый сложный: оттестировать и оценить производительность очень сложно.

[bitbucket]

А теперь на минуту подумаем зачем магистральным провайдерам, КРУГЛОСУТОЧНО, требуются люди следящие именно за BGP?

Судя по опыту взаимодействия с крупными операторами, там за состоянием bgp в большей части роботы следят. У некоторых следят, а у некоторых крупных смена "собак кормит и ничего не трогает".

 

P.S> Последний пост в этой теме - надоело.

Правильно, нефиг тут с нами оффтопик разводить. :)

 

ЗЫ: я про то, как в сумме 1мппс сделать угадал ? Если да, то ничего сверхестественного в этом достижении (1мппс) нет - jab и nuclearcat по нескольку раз рассказывали тут народу про правильный путь допиливания "тазика".