ASR1002 rp1 перезагружается под нагрузкой

[pronix]

Может кто сталкивался с такой проблемой: ASR1002 перезагружается из-за программной ошибки. До 1000 l2tp сессий вроде держится, потом падает.

Пробовал на софтах

asr1000rp1-adventerprise.02.06.01.122-33.XNF1.bin

asr1000rp1-adventerprisek9.02.04.02.122-33.XND2.bin

 

На консоль выводит:

Exception to IOS Thread:

Frame pointer 3BCE2C18, PC = 137B5740

 

ASR1000-EXT-SIGNAL: U_SIGSEGV(11), Process = PPP Events

-Traceback= 1#9b7897f4f756b94e53ad1b228ac42041 :10000000+37B5740 :10000000+134D2CC :10000000+134D284 :10000000+134F6C8 :10000000+1358D58 :10000000+135C178 :10000000+1901F84 :10000000+1902110 :10000000+135798C

....

Queued messages:Jul 1 18:01:51.092 R0/0: %PMAN-3-PROCHOLDDOWN: The process ppc_linux_iosd-image has been helddown (rc 139)

Jul 1 18:01:51.299 R0/0: %PMAN-0-PROCFAILCRIT: A critical process ppc_linux_iosd_image has failed (rc 139)

Jul 1 18:01:51.469 R0/0: %PMAN-3-RELOAD_RP_SB_NOT_READY: Reloading: Fault on Active RP bay but Standby RP bay is not ready

Jul 1 18:01:58.231 R0/0: %PMAN-5-EXITACTION: Process manager is exiting: critical process fault, ppc_linux_iosd_image, rp_0_0, rc=139

 

В Virtual-Template1 разрешены протоколы ms-chap-v2 ms-chap chap.

 

[triam]

Отключите ms-chap-v2 =)

[pronix]

Оставил только chap - uptime is 1 hour, 34 minutes, вроде все нормально.

А ms-chap включать можно?

[triam]

Оставил только chap - uptime is 1 hour, 34 minutes, вроде все нормально.

А ms-chap включать можно?

Всё, кроме ms-chap-v2 =)

[yumiru]

у меня роутер asr 1004 перезагрузился с той же ошибкой при попытке сохранить конфиг (2 случая за 6 месяцев после ввода команды wr mem)

Last reload reason: critical process fault, ppc_linux_iosd_image, rp_0_0, rc=137

версия прошивки 2.6.

 

Я бы подумал что с ASR явные проблемы, но то же самое у меня было и с 76 роутером с 720 супом.

роутеры держат BGP.

Edited November 8, 2010 by yumiru

[Mic]

у меня роутер asr 1004 перезагрузился с той же ошибкой при попытке сохранить конфиг (2 случая за 6 месяцев после ввода команды wr mem)

Last reload reason: critical process fault, ppc_linux_iosd_image, rp_0_0, rc=137

версия прошивки 2.6.

 

Я бы подумал что с ASR явные проблемы, но то же самое у меня было и с 76 роутером с 720 супом.

роутеры держат BGP.

У вас RP1 c 2GB оперативки на борту?

[yumiru]

у меня роутер asr 1004 перезагрузился с той же ошибкой при попытке сохранить конфиг (2 случая за 6 месяцев после ввода команды wr mem)

Last reload reason: critical process fault, ppc_linux_iosd_image, rp_0_0, rc=137

версия прошивки 2.6.

 

Я бы подумал что с ASR явные проблемы, но то же самое у меня было и с 76 роутером с 720 супом.

роутеры держат BGP.

У вас RP1 c 2GB оперативки на борту?

именно так. Софт-резервирование с 4 гигами памяти может помочь? или надо думать над аппаратным резервированием процессора на каком-нить 1006 ?

утечки памяти не наблюдалось. -+ от некоторого значения всегда свободно.

из фурнкционала - BGP ipv4 (8 операторов и пару десятков клиентов), совсем немного IPv6. eigrp, несколько агрессивный SNMP (опрос счетчиков каждые 20 секунд - биллинг не может работать с SNMP выше первой версии и счетчики всего 32-битные используют) + netflow. Вот, собтвено, и весь функционал на роутере.

Edited November 9, 2010 by yumiru

[Mic]

У нас такие же проблемы возникли. Только на ASR весит пару fullview, NAT и l2tp. Начались проблемы когда загрузка по памяти на RP стала больше 90%. Решили закупить 4GB памяти в RP. А пока раскидали l2tp по другим кошкам.

 

P.S. IOS тоже из ветки 2.6.

[icebale]

Отключите ms-chap-v2 =)

Добрый день!

Подскажите откуда известно именно такое решение и есть ли на этот счет баг фикса на cisco?

 

P.S. В моем случае на ASR1002F сконфигурирован PPPoE сервер с ms-chap-v2 - крэш происходил где-то чз 3 часа (кол-во пользователей около 500).

В крэшлоге следуещее:

========= Exception Tracebacks =================================================
Exception to IOS:
Frame pointer 0x3D113BF8, PC = 0x13F847FC
IOS Thread backtrace: 
ASR1000-EXT-SIGNAL: U_SIGSEGV(11), Process = PPP Events
-Traceback= 1#2080ada16704c6bda535d7c66ca05f2c  :10000000+3F847FC :10000000+12E8330 :10000000+12E82F0 :10000000+12E8520 :10000000+12EAC30 :10000000+12F5CCC :10000000+12F8914 :10000000+1744120 :10000000+17442C8 :10000000+12F3EE8 
Fastpath Thread backtrace: 
-Traceback= 1#2080ada16704c6bda535d7c66ca05f2c  c:AF0E000+D8678 c:AF0E000+D8658 iosd_unix:B090000+12594 pthread:ACBC000+56EC 
Auxiliary Thread backtrace: 
-Traceback= 1#2080ada16704c6bda535d7c66ca05f2c  pthread:ACBC000+B168 pthread:ACBC000+B148 c:AF0E000+EDEB4 iosd_unix:B090000+1C024 pthread:ACBC000+56EC

 

После убирания ms-chap-v2 - полет нормальный уже 10 часов.

Edited December 10, 2010 by icebale

[XeonVs]

А подскажите пожалуйста сколько можно терминировать на ESP5\ESP10 l2tp сессий(ipsec, шифрование отключаем)

 

[icebale]

Оставил только chap - uptime is 1 hour, 34 minutes, вроде все нормально.

А ms-chap включать можно?

Всё, кроме ms-chap-v2 =)

Добрый день!

Нашел я описание и решение данной проблемы на cisco.com

Описание http://tools.cisco.com/Support/BugToolKit/...gId=CSCtf27631:

CSCtf27631 Bug Details
ASR1k crash while processing MS-CHAP authenticator response
Symptoms: A Cisco ASR 1000 Series Aggregation Services router unexpectedly reloads.

Conditions: The symptom is observed when the Cisco ASR router is processing an
MS-CHAPv2 response in a PPP environment.

Workaround: There is no workaround

Проблема решена в IOS:

Fixed-In 
15.0(1)S
15.1(1.14)T
15.0(0.13)S0.5
15.1(0.5)S
15.1(0.0.20)PIL14
15.1(0.0.3)PIL15
15.1(2.3.1)PIA15
15.1(2.12.1)PIA15
15.1(2.19.1)PIC15
15.1(2.19.1)PIA15