Jump to content
Калькуляторы

Cisco 3750 - ребут без причины

В офисе стоит свитч который мы используем для локалки на 3 компа и тестовых серверов.

Стабильность свитчу не нужна, но всё же сегодня просто так он ушел в ребут:

 

*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: System previously crashed with the following message:
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Cisco IOS Software, C3750 Software (C3750-IPSERVICESK9-M), Version 15.0(2)SE10a, RELEASE SOFTWARE (fc3)
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Technical Support: http://www.cisco.com/techsupport
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Copyright (c) 1986-2016 by Cisco Systems, Inc.
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Compiled Thu 03-Nov-16 14:17 by prod_rel_team
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED:  
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Debug Exception (Could be NULL pointer dereference) Exception (0x2000)!
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED:  
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: SRR0 = 0x016883F8  SRR1 = 0x00029230  SRR2 = 0x019F0228  SRR3 = 0x00029230
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: ESR = 0x00000000  DEAR = 0x00000000  TSR = 0x84000000  DBSR = 0x10000000
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED:  
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: CPU Register Context:
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Vector = 0x00002000  PC = 0x019F0228  MSR = 0x00029230  CR = 0x40000042
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: LR = 0x019F0228  CTR = 0x02EB47F4  XER = 0x2000007F
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R0 = 0x019F0228  R1 = 0x04E90F80  R2 = 0x00000000  R3 = 0x04E79D8C
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R4 = 0x00000000  R5 = 0x00000000  R6 = 0x04E90F40  R7 = 0x045F0000
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R8 = 0x00029230  R9 = 0x00000000  R10 = 0x045F0000  R11 = 0x045F0000
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R12 = 0x40000042  R13 = 0x00110000  R14 = 0x02EE32D0  R15 = 0x00000000
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R16 = 0x00000000  R17 = 0x00000000  R18 = 0x04E90FA0  R19 = 0x03B948B0
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R20 = 0x037ECE3C  R21 = 0x03EFAE44  R22 = 0x045F0000  R23 = 0x045F0000
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R24 = 0x045F0000  R25 = 0x045F0000  R26 = 0x04D6F420  R27 = 0x04D6F778
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: R28 = 0x04D6E7D0  R29 = 0x04D7FF70  R30 = 0x04AA1C68  R31 = 0x00000000
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED:  
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Stack trace:
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: PC = 0x019F0228, SP = 0x04E90F80
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Frame 00: SP = 0x04E90F90    PC = 0x019F0228
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Frame 01: SP = 0x04E90F98    PC = 0x019F3030
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Frame 02: SP = 0x04E90FE8    PC = 0x02EE33E0
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Frame 03: SP = 0x04E90FF0    PC = 0x019F150C
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED: Frame 04: SP = 0x00000000    PC = 0x019EBAC0
*Mar  1 03:03:25.051: %PLATFORM-1-CRASHED:  

 

Софт System image file is "flash:c3750-ipservicesk9-mz.150-2.SE10a.bin"

 

Кто что посоветует ? в помойку или что ?

 

и судя по крешу ребут уже не первый

 

dir flash:crashinfo_ext
Directory of flash:/crashinfo_ext/

   8  -rwx      395337  Jan 24 2017 01:31:36 +03:00  crashinfo_ext_1
   7  -rwx      411121  Jan 24 2017 02:31:16 +03:00  crashinfo_ext_2
  11  -rwx      400700  Jan 24 2017 03:01:03 +03:00  crashinfo_ext_3
  13  -rwx      396626  Jan 24 2017 06:01:44 +03:00  crashinfo_ext_4
  15  -rwx      395901  Jan 24 2017 07:00:57 +03:00  crashinfo_ext_5
   6  -rwx      387787  Jan 30 2017 14:01:01 +03:00  crashinfo_ext_6
  17  -rwx      401509  Jan 30 2017 16:01:11 +03:00  crashinfo_ext_7

 

Но вот время меня смущает - всегда четкое время на 30 минут.

 

у нас раз в 30 минут заходит скрипт и выкачивает конфиги со всех цисок, время как раз совпадает - раз в 30 минут.

И так как конфиги собираются последовательно со всего оборудование - время может быть плюс минус 2 минуты.

Share this post


Link to post
Share on other sites

Было похожее на 3750, началось внезапно, валилось аккурат после какого-то явления на сети (может mac-flapping, мож loopback detect, не помню уже, но неявная взаимосвязь вполне рисовалась). Вскрытие показало шесть дутых кондёров. Год выпуска был как раз около 2005. :)

Share this post


Link to post
Share on other sites

Вскрытие показало шесть дутых кондёров. Год выпуска был как раз около 2005. :)

 

Это частая причина, но не самая весёлая. Кондеры смотреть/мерять обязательно, но в указанный период на многие циски ставилась глючная память.

Хотя по симптомам больше всего похоже на кондеры, т.к. больные на память кошаки обычно умирают после ребута по питанию. Ну и ещё одна болезнь сугубо 3750 - порты стекирования (мрут микрухи).

Share this post


Link to post
Share on other sites

порт стекирования у нас не используется, год выпуска гляну через часик - как конфиг на 3750e залью и заменим железку.

петель и подобного быть не может. Всего два стационарника сотрудников подключены - int vlan прямо на циске у них затерминирован. Дальше ospf/bgp в вверх.

 

Да и время ребутов судя по крешам - всегда в четкое время. а скрипт как раз 1 раз в 30 минут бекапит конфиги. Но до этого циска стояла 2-3 месяца без проблем.

Share this post


Link to post
Share on other sites

март 2005.

 

Когда я покупаю Б.У., то первое, что спрашиваю - год выпуска. Причём неважно циска это или брокада или жунипер.

Бракованую память в тот период закупали все вендоры. Самое подлое то, что никогда не знаешь, когда оно умрёт...

 

Но у Вас на память не очень похоже. По крайней мере не на известный memory component issue. Хотя, исключать ничего нельзя...

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.