Turbid

Ничего не понел. Такая схема резервирования+агрегации каналов, например на филиалы, очень популярная: через несколько каналов разных операторов собираются L2TP/IPSec-туннели, поверх низ EoIP, которые уже собираются в Bonding. С 41 страницы: https://mum.mikrotik.com/presentations/RU17N/presentation_4141_1490078529.pdf

А если EoIP добавлен в Bonding?

А никого это не смущает? Мы также покупали давно партию snr-sfp-w35-20 и snr-sfp-w53-20, и одни из них показывают 10km, другие - 20km.

#sh ver | inc Uptime Uptime is 0 weeks, 3 days, 3 hours, 37 minutes

Короче я не знаю что это было, долго возились с ТП, воспроизвели баг на резервной железке с таким же конфигом, высылали какую-то отладочную инфу.. Речь зашла уже об замене железок, в итоге мы устали и просто забили. На этой неделе обновил прошивку: SoftWare Version 7.0.3.5(R0102.0283) Проверил - вроде не воспроизводится. Будем наблюдать дальше.

Перезагрузил свитч, не помогло, обновил прошивку - тоже. SNR-S2990G-48T Device, Compiled on Feb 08 15:08:27 2018 sysLocation Building 57/2,Predelnaya st, Ekaterinburg, Russia CPU Mac f8:f0:82:75:31:b7 Vlan MAC f8:f0:82:75:31:b6 SoftWare Version 7.0.3.5(R0102.0266) BootRom Version 7.1.41 HardWare Version R01 CPLD Version N/A Serial No.:SW041610G109000265 Copyright (C) 2018 NAG LLC All rights reserved Last reboot is warm reset. Uptime is 0 weeks, 0 days, 0 hours, 2 minutes

snr1#ping 10.15.15.1 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.15.15.1, timeout is 2 seconds. !!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 0/3/16 ms snr1# snr1#sh arp | inc 10.15.15.1 10.15.15.1 4c-5e-0c-23-ee-b2 Vlan1 Ethernet1/0/45 Dynamic 1184 1 snr1# snr1#conf t snr1(config)#int et 1/0/44 snr1(config-if-ethernet1/0/44)#shut snr1(config-if-ethernet1/0/44)# snr1#ping 10.15.15.1 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.15.15.1, timeout is 2 seconds. ..... Success rate is 0 percent (0/5), round-trip min/avg/max = 0/0/0 ms snr1# snr1# snr1#conf t snr1(config)#int et 1/0/44 snr1(config-if-ethernet1/0/44)#no shut snr1(config-if-ethernet1/0/44)# snr1#ping 10.15.15.1 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.15.15.1, timeout is 2 seconds. !!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 0/0/0 ms

Вы имели в виду с 1/0/45-го?

snr1(config)#int eth 1/0/44 snr1(config-if-ethernet1/0/44)#shut snr1(config-if-ethernet1/0/44)# snr1#clear mac-address-table dynamic interface ethernet 1/0/45 snr1#clear counters interface ethernet 1/0/45 snr1#clear arp-cache snr1#ping 10.126.0.254 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.126.0.254, timeout is 2 seconds. ..... Success rate is 0 percent (0/5), round-trip min/avg/max = 0/0/0 ms snr1#show mac-address-table dynamic interface ethernet 1/0/45 ^ % Invalid input detected at '^' marker. snr1#show mac-address-table interface ethernet 1/0/45 Read mac address table.... Vlan Mac Address Type Creator Ports ---- --------------------------- ------- ------------------------------------- 1 4c-5e-0c-23-ee-bc DYNAMIC Hardware Ethernet1/0/45 snr1#show interface ethernet 1/0/45 Interface brief: Ethernet1/0/45 is up, line protocol is up Ethernet1/0/45 is layer 2 port, alias name is gw_eth11, index is 45 Hardware is Gigabit-TX, address is f8-f0-82-75-31-b7 PVID is 1 MTU 1500 bytes, BW 1000000 Kbit Time since last status change:0w-1d-5h-36m-8s (106568 seconds) Encapsulation ARPA, Loopback not set Auto-duplex: Negotiation full-duplex, Auto-speed: Negotiation 1G bits FlowControl is off, MDI type is auto Transceiver info: Statistics: 5 minute input rate 508 bits/sec, 1 packets/sec 5 minute output rate 44679 bits/sec, 69 packets/sec The last 5 second input rate 509 bits/sec, 1 packets/sec The last 5 second output rate 40986 bits/sec, 63 packets/sec Input packets statistics: 81 input packets, 5184 bytes, 0 no buffer 0 unicast packets, 81 multicast packets, 0 broadcast packets 0 input errors, 0 CRC, 0 frame alignment, 0 overrun, 0 ignored, 0 abort, 0 length error, 0 undersize 0 jabber, 0 fragments, 0 pause frame Output packets statistics: 5602 output packets, 456158 bytes, 0 underruns 299 unicast packets, 283 multicast packets, 5020 broadcast packets 0 output errors, 0 collisions, 0 late collisions, 0 pause frame snr1#show arp ARP Unicast Items: 9, Valid: 8, Matched: 8, Verifying: 0, Incomplete: 0, Failed: 1, None: 0 Ethernet Manager Port ARP Items: 0 Address Hardware Addr Interface Port Flag Age-time(sec) subvlanVID 10.126.0.1 d4-ca-6d-73-b9-81 Vlan200 Ethernet1/0/48 Dynamic 1199 200 10.126.0.3 f8-f0-82-73-f1-4d Vlan200 Ethernet1/0/47 Dynamic 1196 200 10.126.0.4 1c-bd-b9-56-8e-60 Vlan200 Ethernet1/0/46 Dynamic 1185 200 10.126.0.20 5c-f3-fc-b8-32-60 Vlan200 Ethernet1/0/46 Dynamic 1179 200 10.126.0.31 74-46-a0-f4-e6-68 Vlan200 Ethernet1/0/46 Dynamic 1186 200 10.126.0.50 0c-c4-7a-03-84-9c Vlan200 Ethernet1/0/46 Dynamic 1170 200 10.126.0.105 e2-01-26-15-9d-1b Vlan200 Ethernet1/0/46 Dynamic 1173 200 10.126.0.110 92-42-a2-94-b6-2e Vlan200 Ethernet1/0/46 Dynamic 1199 200 snr1(config)#int et 1/0/45 snr1(config-if-ethernet1/0/45)#shut snr1(config-if-ethernet1/0/45)#no shut snr1(config-if-ethernet1/0/45)#exit snr1(config)#exit snr1#ping 10.126.0.254 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.126.0.254, timeout is 2 seconds. ..... Success rate is 0 percent (0/5), round-trip min/avg/max = 0/0/0 ms snr1#conf t snr1(config)#int et 1/0/44 snr1(config-if-ethernet1/0/44)#no shut snr1(config-if-ethernet1/0/44)# snr1#ping 10.126.0.254 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.126.0.254, timeout is 2 seconds. !!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 0/3/16 ms На другие порты вроде не влияет. Прошить конечно можно, но хотелось бы решить без изменения аптайма - железка в работе.

С самого свитча, просто на нем есть ip из mgmt-vlan 200. Но отрубается не только он - изначально о проблеме заметили по 137-му vlan, которого на 44-ом вообще нет

Имеется: SNR-S2990G-48T Device, Compiled on Sep 26 15:29:03 2016 sysLocation Building 57/2,Predelnaya st, Ekaterinburg, Russia CPU Mac f8:f0:82:75:31:b7 Vlan MAC f8:f0:82:75:31:b6 SoftWare Version 7.0.3.5(R0102.0182) BootRom Version 7.1.40 HardWare Version R01 CPLD Version N/A Serial No.:SW041610G109000265 Copyright (C) 2016 NAG LLC All rights reserved Last reboot is cold reset. Uptime is 67 weeks, 0 days, 5 hours, 19 minutes Железка с ip 10.126.0.254 подключена в 45-ый порт: #show arp | inc 10.126.0.254 10.126.0.254 4c-5e-0c-23-ee-b2 Vlan200 Ethernet1/0/45 Dynamic 1182 200 #ping 10.126.0.254 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.126.0.254, timeout is 2 seconds. !!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 0/0/0 ms Выключаем соседний 44-ый: #conf t (config)#int Ethernet1/0/44 (config-if-ethernet1/0/44)#shut (config-if-ethernet1/0/44)# И теперь через 45-ый не идет трафик: #ping 10.126.0.254 Type ^c to abort. Sending 5 56-byte ICMP Echos to 10.126.0.254, timeout is 2 seconds. ..... Success rate is 0 percent (0/5), round-trip min/avg/max = 0/0/0 ms #show arp | inc 10.126.0.254 10.126.0.254 4c-5e-0c-23-ee-b2 Vlan200 Ethernet1/0/45 Dynamic 1130 200 #sh mac-address-table vlan 200 interface ethernet 1/0/45 Read mac address table.... Vlan Mac Address Type Creator Ports ---- --------------------------- ------- ------------------------------------- 200 4c-5e-0c-23-ee-b2 DYNAMIC Hardware Ethernet1/0/45 200-ый vlan тут просто для примера. Помимо него на 45-ом еще несколько, никак не пересекающихся с теми, что есть на 44. Включаем 44-ый обратно и все опять норм. Что за чертовщина?

Все, разобрались - проблема была действительно в неправильно прописаны шлюзах на серверах, а не на роутере. Всем огромное спасибо.

а как вы прописываете маршрут?

взаимоисключающие строчки :) упс, поправил Через несколько свитчей от роутера по vlan-каналу. C роутера пингуется.