myth Posted January 22, 2018 Всем привет. Собрали с аплинком LACP. С нашей стороны LACPом командует Eltex MES2324B. Проблема проявляется в том, что не могу нагрузить канал свыше 1 гигабита. Выглядит это так, как будто юзеры столько не хотят. Но скорости в вечернее время сильно проседают Конфиг Элтекса #do sh run no spanning-tree ! vlan database vlan 2,2001,4092-4093 exit ! Port-Channel load-balance src-dst-mac-ip-port ! logging host 192.168.35.2 logging console alerts ! username admin password encrypted XXXXX privilege 15 ! snmp-server server encrypted snmp-server community hXKI/nU2kUzqKGixTrnUEJk2X9/GnPd4ihiuEf9vIco= ro view Default ! aaa authentication login admin local enable aaa authentication enable admin line enable ! clock timezone 3 0 minutes 0 clock source sntp ! sntp unicast client enable sntp unicast client poll sntp server 192.168.35.2 ! interface gigabitethernet1/0/1 flowcontrol auto description TTK channel-group 1 mode auto exit ! interface gigabitethernet1/0/2 flowcontrol auto description TTK channel-group 1 mode auto exit ! interface gigabitethernet1/0/12 description "Mirror RKN" port monitor tengigabitethernet1/0/1 rx exit ! interface gigabitethernet1/0/13 description MGMT switchport mode trunk switchport trunk allowed vlan add 2 switchport trunk native vlan 2001 exit ! interface gigabitethernet1/0/23 description "IPMI Border" switchport access vlan 2001 exit ! interface tengigabitethernet1/0/1 description "Border IN (WAN)" switchport access vlan 4093 exit ! interface tengigabitethernet1/0/2 description "Border OUT (LAN)" switchport mode trunk switchport trunk allowed vlan add 2,2001 switchport trunk native vlan 4092 exit ! interface tengigabitethernet1/0/4 switchport access vlan 4092 exit ! interface Port-channel1 flowcontrol auto loopback-detection enable description TTK switchport access vlan 4093 exit ! interface vlan 2 name BGP exit ! interface vlan 2001 ip address 192.168.35.37 255.255.240.0 exit ! interface vlan 4092 name "Link NAS" exit ! interface vlan 4093 name TTK exit ! ! Да, трафик по протам размазывается примерно поровну, судя по SNMP с портов. Как видно из конфига, свитч занимается зеркалом для ркн и перекладыванием пакетов из Po1 в 10г Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 Как протестировать получившийся канал? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
vurd Posted January 22, 2018 Графики покажите в том числе и по pps. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 pps не ведутся. По трафику приложил. Скорость бонда должна быть 1500 мегабит Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
vurd Posted January 22, 2018 Рисуйте по ппс. Я не даром говорю, такие полки бывает не видно по объему, но видно по пакетам. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 Результирующее PPS, проходящее через сервера не соответствует 1,5г Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
vurd Posted January 22, 2018 А вообще балансируется у вас всё четко, 99% что проблема не на свитче, а где-то дальше или раньше. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 Как можно протестировать пропускную способность LACP? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
vurd Posted January 22, 2018 Ну и проверьте тупо торрентом с компа в гиговом порту, поставьте там блю рип какой-нибудь на гигов 60+, чтобы на график вылезти им. Будет все видно, даже если пойдет по одному линку, все равно. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 Гигабит у меня утилизируется и так. Вопросы появляются после гигабита Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
vurd Posted January 22, 2018 Вы не поняли. Я предлагаю в текущий момент, не снимая трафик, добавить еще, чтобы увидеть график с чистой полкой, который вы потом пошлете в ттк с вопросом "вы чё?". Еще погуглите pktgen, но это дольше и разбираться. С двух сторон нужно тем более. Но это все хрень, свитч 99% все гоняет без проблем, имхо. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 А если не свитч, то что на серверах может такое давать? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
alibek Posted January 22, 2018 На каких серверах? На BRAS, если интерфейсы гигабитные и балансируются плохо, тоже может быть полка. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 и на бордере, и на насе 10г Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 Попробовал скачать торрент с бордера. Выше 150мегабит не разгоняется. Трафик при этом - пик после 23:20 Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 22, 2018 Что тюнится в ixgbe отлично от igb? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
Butch3r Posted January 23, 2018 (edited) Метод балансировки у вас с обеих сторон какой? Увидел: src-dst-mac-ip-port А какой выставлен с другой стороны? Попробуйте и там и там выставить src-dst-ip Edited January 23, 2018 by Butch3r Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 23, 2018 22 минуты назад, Butch3r сказал: А какой выставлен с другой стороны? техподдержка тормозит и не может этого сказать Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
undro Posted January 23, 2018 проблема скорее где-то раньше lacp c ттк воткните в mes комп и погоняйте iperf/pktgen через свои железки Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
millenium Posted January 23, 2018 В логах какие-нибудь упоминания есть ? например, о flow-control Cчетчики на интерфейсах что показывают ? Pause-frame например Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 23, 2018 flow control везде выпилен Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
zhenya` Posted January 23, 2018 В конфиге стоит авто? Точно поставил офф? Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 23, 2018 Точно. Авто стоит на lacp Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
vurd Posted January 23, 2018 14 часов назад, Butch3r сказал: Метод балансировки у вас с обеих сторон какой? Увидел: src-dst-mac-ip-port А какой выставлен с другой стороны? Попробуйте и там и там выставить src-dst-ip Там чуть выше ТС графики выложил. Вы посмотрите их, там видно, что балансируется нормально всё, видимо src-dst уже стоит изначально. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
myth Posted January 23, 2018 Вливание гигабита трафика в сетевую карту с аплинком(в влан) ситуацию никак не меняет Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...