ledge5 Posted April 25, 2017 (edited) Господа, помогите разобраться как определить что за тип трафика генерируется в таком количестве. Имеется сеть внутри датацентра на нексусах и каталистах Я взял новый 7-тонник, абсолютно пустой, подключил только одним 10гбитным портом порт-чаннелом к корневому свитчу и поднял только один (служебный) влан, в котором трафика нет , от силы мегабит изза всяких мониторинговых сервисов типа nagios, solarwinds и тд. А мне туда дуром прет 1,5 гигабита непонятного трафика Пробовал смотреть по debug ip - ничего крамольного не увидел кроме редких запросов по snmp от nagios и проч. Откуда там 1,5 гигабита ума не приложу как разобраться? Никаких левых бродкастов и мультикастов там тоже нет. вот статистика интерфейса: sh interface ethernet 7/2 Ethernet7/2 is up admin state is up, Dedicated Interface Belongs to Po203 Hardware: 10000 Ethernet, address: 588d.092a.bd21 (bia 588d.092a.bd21) MTU 1500 bytes, BW 10000000 Kbit, DLY 10 usec reliability 255/255, txload 1/255, rxload 1/255 Encapsulation ARPA, medium is broadcast Port mode is trunk full-duplex, 10 Gb/s, media type is 10G Beacon is turned off Auto-Negotiation is turned off Input flow-control is off, output flow-control is off Auto-mdix is turned off Rate mode is shared Switchport monitor is off EtherType is 0x8100 EEE (efficient-ethernet) : n/a Last link flapped 47week(s) 0day(s) Last clearing of "show interface" counters never 1 interface resets Load-Interval #1: 30 seconds 30 seconds input rate 411440 bits/sec, 274 packets/sec 30 seconds output rate 32 bits/sec, 0 packets/sec input rate 411.44 Kbps, 274 pps; output rate 32 bps, 0 pps Load-Interval #2: 5 minute (300 seconds) 300 seconds input rate 518456896 bits/sec, 392109 packets/sec 300 seconds output rate 248 bits/sec, 0 packets/sec input rate 518.46 Mbps, 392.11 Kpps; output rate 248 bps, 0 pps RX 61090394002 unicast packets 786080060 multicast packets 1076931002 broadca st packets 62953405064 input packets 11054425864888 bytes 0 jumbo packets 0 storm suppression packets 0 runts 0 giants 0 CRC/FCS 0 no buffer 0 input error 0 short frame 0 overrun 0 underrun 0 ignored 0 watchdog 0 bad etype drop 0 bad proto drop 0 if down drop 0 input with dribble 689370 input discard 0 Rx pause TX 19927366 unicast packets 1424129 multicast packets 3 broadcast packets 21351498 output packets 4502242438 bytes 0 jumbo packets 0 output error 0 collision 0 deferred 0 late collision 0 lost carrier 0 no carrier 0 babble 0 output discard 0 Tx pause sh port-channel sum Flags: D - Down P - Up in port-channel (members) I - Individual H - Hot-standby (LACP only) s - Suspended r - Module-removed S - Switched R - Routed U - Up (port-channel) M - Not in use. Min-links not met -------------------------------------------------------------------------------- Group Port- Type Protocol Member Ports Channel -------------------------------------------------------------------------------- 203 Po203(SU) Eth LACP Eth7/2(P) interface port-channel203 switchport switchport mode trunk switchport trunk allowed vlan 7,9,24,31,95,100,521-522 spanning-tree port-priority 192 spanning-tree cost 200000000 logging event port link-status logging event port trunk-status ------------------------------------------------------------------------------- Interface Secondary VLAN(Type) Status Reason ------------------------------------------------------------------------------- Vlan1 -- down Administratively down Vlan9 -- up -- Vlan265 -- down VLAN is down Software BIOS: version 3.22.0 kickstart: version 6.2(14) system: version 6.2(14) BIOS compile time: 02/20/10 kickstart image file is: bootflash:///n7000-s1-kickstart.6.2.14.bin kickstart compile time: 7/27/2015 9:00:00 [08/27/2015 22:41:26] system image file is: bootflash:///n7000-s1-dk9.6.2.14.bin system compile time: 7/27/2015 9:00:00 [08/28/2015 00:31:27] Hardware cisco Nexus7000 C7010 (10 Slot) Chassis ("Supervisor Module-1X") Intel® Xeon® CPU with 8260692 kB of memory. Где покопаться, чтобы определить что это за трафик? Edited April 25, 2017 by ledge5 Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
orlik Posted April 25, 2017 копаться на коробке куда подключили . может это unknown unicast ? а вообще у вас вроде и трафика не много. Load-Interval #1: 30 seconds 30 seconds input rate 411440 bits/sec, 274 packets/sec 30 seconds output rate 32 bits/sec, 0 packets/sec Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maxkst Posted April 25, 2017 Load-Interval #1: 30 seconds 30 seconds input rate 411440 bits/sec, 274 packets/sec 30 seconds output rate 32 bits/sec, 0 packets/sec input rate 411.44 Kbps, 274 pps; output rate 32 bps, 0 pps Трафик судя по этому интервалу не постоянный. Почему бы не активировать SNMP и не порисовать графики для этого физ.интерфейса и вилана отдельно? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
catalist Posted April 25, 2017 30 seconds input rate 411440 bits/sec, 274 packets/sec всего то 0,4 мегабита, где вы тут 1.5 гигабита увидели? заверините в миррор спан и там смотрите. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
uxcr Posted April 25, 2017 У вас при включении нового устройства в какой-то толстый влан с кучей сетей произошёл сброс топологии spanning-tree. Да, явно unknown unicast. orlik Полгига в 300seconds Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
ledge5 Posted April 25, 2017 как только сюда написал, трафик тут же и упал :) сделал график в cacti, посмотрим, что завтра будет, трафик судя по всему не постоянный Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maxkst Posted April 25, 2017 Просто интересуюсь, а в дата-центрах используют STP? как только сюда написал, трафик тут же и упал :) сделал график в cacti, посмотрим, что завтра будет, трафик судя по всему не постоянный Статистика с какого устройства идет? трафик то исходящий рисуется, а вначале был input rate 518.46 Mbps, 392.11 Kpps; Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
ledge5 Posted April 25, 2017 Статистика с какого устройства идет? трафик то исходящий рисуется, а вначале был input rate 518.46 Mbps, 392.11 Kpps; с того, в который я 7митонник воткнул Ну на самом 7митоннике эта стата тоже видна Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
ilili Posted April 26, 2017 786080060 multicast packets 1076931002 broadcast packets Что-то подозрительно ) Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maxkst Posted April 26, 2017 62953405064 input packets 61090394002 unicast packets а это не подозрительно? :-) Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
YuryD Posted April 26, 2017 Ну подозрительно, а контрольный вопрос - счётчики обнуляли ? А то за лет пяток там и не такое накапает. Похоже на криво сконфигурованное кольцо, не все вланы в нём прописаны. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maruk Posted April 26, 2017 Просто интересуюсь, а в дата-центрах используют STP? бывает... особенно когда старый DC работает на 65К и не в VSS и требуется плавно смигрировать на Nexus-ы. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
rover-lt Posted April 27, 2017 (edited) Просто интересуюсь, а в дата-центрах используют STP? Просто интересуюсь, а есть другие варианты? Или надо его просто отключать? Ну, чтоб модно было, стильно и молодежно. Просто интересуюсь, а в дата-центрах используют STP? бывает... особенно когда старый DC работает на 65К и не в VSS и требуется плавно смигрировать на Nexus-ы. то есть на нексусах СТП не нужен? Edited April 27, 2017 by rover-lt Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maxkst Posted April 27, 2017 Просто интересуюсь, а есть другие варианты? Или надо его просто отключать? Ну, чтоб модно было, стильно и молодежно. Я просто думал, что в датацентрах это на L3 реализовано... Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maruk Posted April 27, 2017 то есть на нексусах СТП не нужен? ненужен если fabricpath, если нет fabricpath то все по классике, STP со всеми вытекающими вкусняшками, с той лишь разницей, что CORE и EDGE свитчи группируются в vPC и подключаются между собой port channel. Просто интересуюсь, а есть другие варианты? Или надо его просто отключать? Ну, чтоб модно было, стильно и молодежно. Я просто думал, что в датацентрах это на L3 реализовано... если взрослая схема, когда в ядре N77K а на агрегацию N55(56) и с лицензией feature-set fabricpath то будет L3, ну точней ISIS в качестве Control Plane для коммутации. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
applx Posted April 28, 2017 помимо ваших устарелых FabricPath / TRILL есть VXLAN / EVPN, STP полюбому есть на ToR свичах смотряшии на хосты Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maruk Posted April 28, 2017 есть VXLAN согласен, модный тренд... STP полюбому есть на ToR свичах смотряшии на хосты с чего бы это? STP на ToR свичах это опционально, нафига мне STP если у меня Po и vPC в сторону хостов? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
applx Posted April 30, 2017 есть VXLAN согласен, модный тренд... STP полюбому есть на ToR свичах смотряшии на хосты с чего бы это? STP на ToR свичах это опционально, нафига мне STP если у меня Po и vPC в сторону хостов? best practice. ну а то что дурак залупит вам два порта и положет весь ДЦ? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maruk Posted April 30, 2017 best practice. это спорный best practice ну а то что дурак залупит вам два порта и положет весь ДЦ? давайте разберем конкретные примеры. полно хостов которые банально не умеют работать даже с STP, начиная от standalone, на которых собираются bonding active - active линки, или к примеру HP Virtual Connect FlexFabric. В ситуациях когда подключаются корзины блейд-центров с полноценным коммутатором, этот коммутатор должны настраивать те же сетевые специалисты, которые администрируют и Nexus-ы. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
applx Posted May 1, 2017 best practice. это спорный best practice тоесть с вендором вы спорить будите какой у них best practice? почитайте Cisco CVD. ну а то что дурак залупит вам два порта и положет весь ДЦ? давайте разберем конкретные примеры. полно хостов которые банально не умеют работать даже с STP, начиная от standalone, на которых собираются bonding active - active линки, или к примеру HP Virtual Connect FlexFabric. В ситуациях когда подключаются корзины блейд-центров с полноценным коммутатором, этот коммутатор должны настраивать те же сетевые специалисты, которые администрируют и Nexus-ы. STP Toolkit без STP работать не будет. вы STP глобально вурубаите как здешние народые умельцы? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted May 1, 2017 ну, на абонентских портах точно вырубаю Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
maruk Posted May 2, 2017 ну, на абонентских портах точно вырубаю именно! STP выключен на downlink в сторону хостов/серверов. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
uxcr Posted May 2, 2017 bpdufilter мало. Гугл "topology change bit" и "unicast flood". Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
applx Posted May 3, 2017 ну, на абонентских портах точно вырубаю именно! STP выключен на downlink в сторону хостов/серверов. молодцы конечно... Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted May 4, 2017 молодцы конечно... А нафига он там нужен? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...