[an-denis]

Здравствуйте коллеги!

 

На текущий момент имею в качестве браса ASR1006/ESP-40/SIP-40 с десяточными платами.

При нагрузке в 12 тысяч PPPoE ISG сессий + немного NAT(примерно 600 сессий) и клиентским трафиком через неё 5 гигов имеем проблему: именно на брасе под нагрузкой появляется задержка в 20 мс и падение скоростей у всех клиентов.

С портами проблем не выявлено, на 7600-й SPAN отключен. Есть подозрение, что в этой железке есть какие-то ограничения, например по шине: SIP-40 работает на шине SIP-10. Других идей нет.

 

У нас также используются ASR1002/ESP-10, которые в тянут такую же пиковую нагрузку каждая без проблем!

 

Хотелось бы увидеть ваши коментарии по теме.

Изменено 9 октября, 2013 пользователем an-denis

[triam]

А вы мониторите загрузку памяти\процессора ?

Как сделан NAT\ISG ?

 

Ну и вот супер мануал - http://www.cisco.com/en/US/products/ps9343/products_tech_note09186a0080af2d14.shtml по траблшутингу дропов на ASR1000

[an-denis]

А вы мониторите загрузку памяти\процессора ?

Как сделан NAT\ISG ?

 

Ну и вот супер мануал - http://www.cisco.com...080af2d14.shtml по траблшутингу дропов на ASR1000

 

Мониторим. Нагрузки просто смешные для этой железки..., несколько процентов. Загрузка SIP не превышает 11-13%.

NAT:

ip nat settings mode cgn

 

ip nat translation timeout 60

ip nat translation tcp-timeout 60

ip nat translation udp-timeout 60

ip nat translation icmp-timeout 5

ip nat pool Clients_External1 91.227.191.0 91.227.191.255 prefix-length 24

ip nat inside source list 31 pool Clients_External1 overload

 

Так то так.

 

За ссылку спасибо.

[zhenya`]

в sh int покажите с интерфейсов.. я так понял оно включено в 7600 ? что за карта в 7600 ? случаем ли не с переподпиской ?

Изменено 9 октября, 2013 пользователем zhenya`

[an-denis]

в sh int покажите с интерфейсов.. я так понял оно включено в 7600 ? что за карта в 7600 ? случаем ли не с переподпиской ?

Плата 6708, нагрузку по портам перераспределяли, проблема где-то в другом.

Сегодня отключим часть функционала браса, например, nbar. Это снизит нагрузку на ESP, которое и так не нагружено.

В какой-то другой ветке обсуждалось подобное поведение браса - причина оказалась в RSPAN. Но там человек так и не добился от TAC циски по поводу шины SIP-40

http://forum.nag.ru/forum/index.php?showtopic=80042&st=0&p=775495&hl=monitor%20session&fromsearch=1entry775495

 

 

[triam]

Шина у sip40 другая. Насколько я помню 2х23gbps

http://www.ciscoexpo.ru/expo2010/materials/service_providers/D2_ASR1K_Architecture-ivasilie.pdf

[an-denis]

Шина у sip40 другая. Насколько я помню 2х23gbps

http://www.ciscoexpo...re-ivasilie.pdf

 

В данном документе на странице 21 указана скорость шины ESI как 1х10 или 2х23, а на странице 22 показано, как зависит скорость от слота в шасси 1013.

Какова же шина у шасси 1006 мне не удалось найти.

[secandr]

RSPAN у меня на 7600 был, а вот по асрнику TAC читал мантру "этого не может быть, потому что не может быть никогда".

Никаких команд или информации об устройстве железки узнать не удалось. Инженеры TAC ссылались только на открытые источники.

 

P.S. Собственно, все открытые источники были прочитаны до обращения в TAC.

Изменено 10 октября, 2013 пользователем secandr

[triam]

В данном документе на странице 21 указана скорость шины ESI как 1х10 или 2х23, а на странице 22 показано, как зависит скорость от слота в шасси 1013.

Какова же шина у шасси 1006 мне не удалось найти.

Ну тут всё просто - 2x23 - это если SIP40+ESP40, ну и 1x11.5 - это если sip10 + esp10,20

Раньше SIP40 не мог существовать с отличными от ESP40 модулями. Но начиная с какой-то там версии софта - это стало возможно.

В любом случае надо проверить есть ли дропы трафика на коробке =)

[an-denis]

В данном документе на странице 21 указана скорость шины ESI как 1х10 или 2х23, а на странице 22 показано, как зависит скорость от слота в шасси 1013.

Какова же шина у шасси 1006 мне не удалось найти.

Ну тут всё просто - 2x23 - это если SIP40+ESP40, ну и 1x11.5 - это если sip10 + esp10,20

Раньше SIP40 не мог существовать с отличными от ESP40 модулями. Но начиная с какой-то там версии софта - это стало возможно.

В любом случае надо проверить есть ли дропы трафика на коробке =)

А последняя версия подтверждается, дело в той самой шине (выключили один из нагруженных линков на сипе)... на офф.сайте в двух статьях приведены две разные версии с которых SIP-40 нормально поддерживается : 3.3 и 3.7. У нас щас 3.6!

С утра обновлюсь до 3.9.

 

 

[zhenya`]

с 3.7.0 как я помню sip40 работает с esp20..

[triam]

С утра обновлюсь до 3.9.

Отпишитесь по результатам =)

Ну как там ASR?

Изменено 11 октября, 2013 пользователем triam

[an-denis]

С утра обновлюсь до 3.9.

Отпишитесь по результатам =)

Ну как там ASR?

Удалось обновиться на 3.7.3, более свежий софт побился при закачке с цискиного сайта.

Сейчас нагружаю потихоньку.

[triam]

Ну и как?

[an-denis]

Ну и как?

Ничего не изменилось... . Должна же быть причина того, что железка работает как asr1002/esp10.

 

 

В описаниях у циски нашёл следующее:

"If SIP-40 is installed with the bandwidth value greater than 11.2G and if SIP-40 is replaced with SIP-10 then the bandwidth of SIP-10 is reset to its default maximum bandwidth of 11.2G."

Это не исключает того, что по дефолту мы имеем 11.2 гига.

 

 

Нашёл и прописал явно скорость шин SIP-40:

 

NAS_PPPOE3(config)#hw-module slot 0 qos input link A bandwidth 23000000

NAS_PPPOE3(config)#hw-module slot 0 qos input link B bandwidth 23000000

NAS_PPPOE3(config)#hw-module slot 1 qos input link A bandwidth 23000000

NAS_PPPOE3(config)#hw-module slot 1 qos input link B bandwidth 23000000

Изменено 14 октября, 2013 пользователем an-denis

[shaytan]

Помогло?

[an-denis]

Помогло?

Вечером узнаю)

[telematic]

А лицензионных ограничений там нет?

На ASR1001 и ASR1002-X есть лицензионные ограничения на производительность.

Когда к ним подбираешься, симптомы аналогичные.

[an-denis]

А лицензионных ограничений там нет?

На ASR1001 и ASR1002-X есть лицензионные ограничения на производительность.

Когда к ним подбираешься, симптомы аналогичные.

 

Судя по фич-навигатору, лицензионных ограничений на ветке asr1000-RP2 нет, а на 1001-х и1002-X - есть.

[triam]

А лицензионных ограничений там нет?

На ASR1001 и ASR1002-X есть лицензионные ограничения на производительность.

Когда к ним подбираешься, симптомы аналогичные.

Нет. Лицензии начинают играть роль, когда у тя на железке universal-ios-xe =)

А на тех ASR'ах, которые с обычным IOS-XE такого ограничения нет.

[an-denis]

Ну и как?

Ничего не изменилось... . Должна же быть причина того, что железка работает как asr1002/esp10.

 

 

В описаниях у циски нашёл следующее:

"If SIP-40 is installed with the bandwidth value greater than 11.2G and if SIP-40 is replaced with SIP-10 then the bandwidth of SIP-10 is reset to its default maximum bandwidth of 11.2G."

Это не исключает того, что по дефолту мы имеем 11.2 гига.

 

 

Нашёл и прописал явно скорость шин SIP-40:

 

NAS_PPPOE3(config)#hw-module slot 0 qos input link A bandwidth 23000000

NAS_PPPOE3(config)#hw-module slot 0 qos input link B bandwidth 23000000

NAS_PPPOE3(config)#hw-module slot 1 qos input link A bandwidth 23000000

NAS_PPPOE3(config)#hw-module slot 1 qos input link B bandwidth 23000000

 

Не помогло.

Пока, кроме отключения некоторого функционала идей нет.

 

 

[BackUP]

Может быть все таки проблема со стороны 7600 и переподписанной карты? Там же достаточно хитрая система переподписки портов на вашей плате. Не могли бы вы указать куда у вас что подключено.

[an-denis]

Может быть все таки проблема со стороны 7600 и переподписанной карты? Там же достаточно хитрая система переподписки портов на вашей плате. Не могли бы вы указать куда у вас что подключено.

 

Сверху в 7600 стоит плата 6708, порт 1/8 подключен к проблемному брасу.

Ниже нагрузка по портам в 20.00, когда торможения начали проявляться, указано в гигабитах.

 

 

ten1/1 Out 1,8 In 0,8

ten1/3 Out 1,5 In 1,0

ten1/4 Out 1,8 In 4,0

ten1/5 Out 3,6 In 5,8

ten1/8 Out 6,4 Int 3,5

 

Порты 1/4 и 1/5 - аплинки.

 

[an-denis]

Может быть все таки проблема со стороны 7600 и переподписанной карты? Там же достаточно хитрая система переподписки портов на вашей плате. Не могли бы вы указать куда у вас что подключено.

 

Сверху в 7600 стоит плата 6708, порт 1/8 подключен к проблемному брасу.

Ниже нагрузка по портам в 20.00, когда торможения начали проявляться, указано в гигабитах.

 

 

ten1/1 Out 1,8 In 0,8

ten1/3 Out 1,5 In 1,0

ten1/4 Out 1,8 In 4,0

ten1/5 Out 3,6 In 5,8

ten1/8 Out 6,4 Int 3,5

 

Порты 1/4 и 1/5 - аплинки.

 

 

Причина высокого пинга выяснена. Это тормоза из-за команды "service-policy output p2p-output" на ASR1006 Te0/0/0.990 . Эта команда выставляла пониженный приоритет (на уровне Ethernet и на уровне IP) для P2P трафика (в том числе - для Skype). После её отключения пинг до 7606 тут же упал с 30мс до 1мс. Заодно вырос входящий трафик на 500Мбит/с и исходящий трафик на 1.3Гбит/с.

[triam]

Причина высокого пинга выяснена. Это тормоза из-за команды "service-policy output p2p-output" на ASR1006 Te0/0/0.990 . Эта команда выставляла пониженный приоритет (на уровне Ethernet и на уровне IP) для P2P трафика (в том числе - для Skype). После её отключения пинг до 7606 тут же упал с 30мс до 1мс. Заодно вырос входящий трафик на 500Мбит/с и исходящий трафик на 1.3Гбит/с.

То есть это ваш полисер полисил трафик?