Jump to content

Завис Catal C3560G

dbask
 Share

Recommended Posts

dbask

dbask

Posted
Posted (edited)

имеем Catalyst 3560G на ядре сети (OSPF, PIM, MSDP и тд тп) (C3560-ADVIPSERVICESK9-M), Version 12.2(44)SE1, RELEASE SOFTWARE (fc1))

неожиданно перестал отвечать на пинг запросы, предварительно посыпались сообщения в syslog:

 

Aug 30 16:19:18 10.16.0.7 5761: Aug 30 16:16:04.486: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.10.2 on Vlan460 from FULL to DOWN, Neighbor Down: Dead timer expi

Aug 30 16:19:18 10.16.0.7 5762: Aug 30 16:16:04.528: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.6.2 on Vlan506 from FULL to DOWN, Neighbor Down: Dead timer expir

Aug 30 16:19:19 10.16.0.7 5763: Aug 30 16:16:05.577: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.36.2 on Vlan335 from 2WAY to DOWN, Neighbor Down: Dead timer expi

Aug 30 16:19:19 10.16.0.7 5764: Aug 30 16:16:06.583: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.35.18 on Vlan345 from FULL to DOWN, Neighbor Down: Dead timer exp

Aug 30 16:19:19 10.16.0.7 5765: Aug 30 16:16:06.583: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.35.18 on Vlan335 from 2WAY to DOWN, Neighbor Down: Dead timer exp

Aug 30 16:19:20 10.16.0.7 5766: Aug 30 16:16:06.835: %OSPF-5-ADJCHG: Process 1, Nbr 10.16.0.5 on Vlan505 from FULL to DOWN, Neighbor Down: Dead timer expir

Aug 30 16:19:20 10.16.0.7 5767: Aug 30 16:16:07.548: %OSPF-5-ADJCHG: Process 1, Nbr 10.16.20.2 on Vlan462 from FULL to DOWN, Neighbor Down: Dead timer expi

Aug 30 16:19:20 10.16.0.7 5768: Aug 30 16:16:07.850: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.35.2 on Vlan335 from 2WAY to DOWN, Neighbor Down: Dead timer expi

Aug 30 16:19:22 10.16.0.7 5769: Aug 30 16:16:08.530: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.6.2 on Vlan446 from FULL to DOWN, Neighbor Down: Dead timer expir

Aug 30 16:19:39 10.16.0.7 5770: Aug 30 16:16:25.651: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.36.2 on Vlan350 from FULL to DOWN, Neighbor Down: Dead timer expi

Aug 30 16:20:03 10.16.0.7 5771: Aug 30 16:16:49.835: %PIM-5-NBRCHG: neighbor 10.15.4.2 DOWN on interface Vlan443 DR

Aug 30 16:20:03 10.16.0.7 5772: Aug 30 16:16:49.835: %PIM-5-DRCHG: DR change from neighbor 10.15.4.2 to 10.15.4.1 on interface Vlan443

Aug 30 16:20:05 10.16.0.7 5773: Aug 30 16:16:51.991: %PIM-5-NBRCHG: neighbor 10.15.6.2 DOWN on interface Vlan446 DR

Aug 30 16:20:05 10.16.0.7 5774: Aug 30 16:16:51.991: %PIM-5-DRCHG: DR change from neighbor 10.15.6.2 to 10.15.6.1 on interface Vlan446

Aug 30 16:20:05 10.16.0.7 5775: Aug 30 16:16:52.008: %PIM-5-NBRCHG: neighbor 10.15.11.2 DOWN on interface Vlan702 DR

Aug 30 16:20:05 10.16.0.7 5776: Aug 30 16:16:52.008: %PIM-5-DRCHG: DR change from neighbor 10.15.11.2 to 10.15.11.1 on interface Vlan702

Aug 30 16:20:09 10.16.0.7 5777: Aug 30 16:16:56.093: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.4.5 on Vlan514 from FULL to DOWN, Neighbor Down: Dead timer expir

Aug 30 16:20:12 10.16.0.7 5778: Aug 30 16:16:58.828: %OSPF-5-ADJCHG: Process 1, Nbr 10.15.35.18 on Vlan356 from FULL to DOWN, Neighbor Down: Dead timer exp

Aug 30 16:20:12 10.16.0.7 5779: Aug 30 16:16:58.995: %PIM-5-NBRCHG: neighbor 10.15.5.2 DOWN on interface Vlan445 DR

Aug 30 16:20:12 10.16.0.7 5780: Aug 30 16:16:58.995: %PIM-5-DRCHG: DR change from neighbor 10.15.5.2 to 10.15.5.1 on interface Vlan445

Aug 30 16:20:16 10.16.0.7 5781: Aug 30 16:17:02.460: %PIM-5-NBRCHG: neighbor x.x.x.x DOWN on interface Vlan597 non DR

Aug 30 16:20:16 10.16.0.7 5782: Aug 30 16:17:02.779: %PIM-5-NBRCHG: neighbor 10.15.36.26 DOWN on interface Vlan356 DR

Aug 30 16:20:16 10.16.0.7 5783: Aug 30 16:17:02.779: %PIM-5-DRCHG: DR change from neighbor 10.15.36.26 to 10.15.36.25 on interface Vlan356

Aug 30 16:20:17 10.16.0.7 5784: Aug 30 16:17:04.113: %PIM-5-NBRCHG: neighbor 10.15.9.2 DOWN on interface Vlan449 DR

Aug 30 16:20:17 10.16.0.7 5785: Aug 30 16:17:04.113: %PIM-5-DRCHG: DR change from neighbor 10.15.9.2 to 10.15.9.1 on interface Vlan449

Aug 30 16:20:17 10.16.0.7 5786: Aug 30 16:17:05.010: %PIM-5-NBRCHG: neighbor 10.15.7.2 DOWN on interface Vlan447 DR

Aug 30 16:20:17 10.16.0.7 5787: Aug 30 16:17:05.010: %PIM-5-DRCHG: DR change from neighbor 10.15.7.2 to 10.15.7.1 on interface Vlan447

Aug 30 16:20:22 10.16.0.7 5788: Aug 30 16:17:09.162: %PIM-5-NBRCHG: neighbor 10.15.8.2 DOWN on interface Vlan448 DR

Aug 30 16:20:22 10.16.0.7 5789: Aug 30 16:17:09.162: %PIM-5-DRCHG: DR change from neighbor 10.15.8.2 to 10.15.8.1 on interface Vlan448

Aug 30 16:20:22 10.16.0.7 5790: Aug 30 16:17:09.590: %PIM-5-NBRCHG: neighbor 10.15.36.2 DOWN on interface Vlan350 DR

 

L3, L2 функции стали недоступны

 

после ребута по питанию не грузился (моргала лампа SYST), после второго ребута - загрузился проработал 3 минуты и опять стал сбрасывать OSPF, PIM сессии.

 

цепляю консоль: в логах ничего другого кроме neighbor down нету, делаю reload вижу следующее:

 

Reload command.

Base ethernet MAC Address: 00:1f:26:fc:c4:00

Xmodem file system is available.

The password-recovery mechanism is enabled.

Initializing Flash...

flashfs[0]: 458 files, 6 directories

flashfs[0]: 0 orphaned files, 0 orphaned directories

flashfs[0]: Total bytes: 32514048

flashfs[0]: Bytes used: 19496448

flashfs[0]: Bytes available: 13017600

flashfs[0]: flashfs fsck took 8 seconds.

...done Initializing Flash.

 

Boot Sector Filesystem (bs) installed, fsid: 3

done.

Loading "c3560-advipservicesk9-mz.122-44.SE1.bin"...c3560-advipservicesk9-mz.122-44.SE1.bin: no such device

 

Error loading "c3560-advipservicesk9-mz.122-44.SE1.bin"

 

Interrupt within 5 seconds to abort boot process.

Loading "flash:/c3560-advipservicesk9-mz.122-44.SE1.bin"...@@@@@@@@@@@@@@@@@@@@@@@@

 

с 3-го ребута, все нормально загрузилось и заработало. тьфу тьфу тьфу.

 

 

понимаю что поздно цепанул консоль, поспешил с ребутом.

 

но может есть идеи о причинах такой аварии?

 

P.S.

 

Проработал без ребута 2-3 года.

Edited by dbask
sexst

sexst

Posted
Posted

У вас в boot указано c3560-advipservicesk9-mz.122-44.SE1.bin

Нужно указывать вместе с директорией: flash:/c3560-advipservicesk9-mz.122-44.SE1.bin

Ругнулось что нет такого файла и цепануло автоматом то что лежало на флеше. Все нормально и правильно.

 

Оспф падает ибо Dead timer expired. Проверяйте конфиги, если все верно - включайте дебаг и смотрите.

Pim падает вдогонку.

mukca

mukca

Posted
Posted (edited)

какая то фигня с ospf все соседи отваливаются.. (естественно сраз теряется маршрутизация и до циски достучаться не можете..)

 

возможно проблема и не в этой циске.. а с соседями.. там где нибуть штормик или еще чего, загружается проц на 100% и перестает коммутатор обрабатывать l3 (все что идет на cpu)

 

Loading "c3560-advipservicesk9-mz.122-44.SE1.bin"...c3560-advipservicesk9-mz.122-44.SE1.bin: no such device

 

Error loading "c3560-advipservicesk9-mz.122-44.SE1.bin"

 

Interrupt within 5 seconds to abort boot process.

Loading "flash:/c3560-advipservicesk9-mz.122-44.SE1.bin"...@@@@@@@@@@@@@@@@@@@@@@@@

абсолютно нормальное поведение если при обновлении прошивки не указали в конфиге какую прошивку грузить (или указали не существующую или неправильный путь указали)

на сайте циски мона почитать как железка себя ведет и в каком порядке и в какой памяти ищет прошивку и по какому алгоритму..

Edited by mukca
  • 4 months later...
fenikssss

fenikssss

Posted
Posted

ребят есть вопросик примерно такого же плана у меня C3560-48TS.. ничего не предвещало беды но тут я захотел в ги01 вставить сфп модуль.. ну вставил... все клево, но тут захотелось мне расшатить его и посмотреть поднялась ли оптика на порту, и бац! недоступен был секунд на 10!!!

 

ну и в логах вот такое чудо

 

0, changed state to up

066763: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan130

8, changed state to up

066764: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan131

0, changed state to up

066765: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan154

6, changed state to up

066766: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan222

2, changed state to up

066767: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan300

0, changed state to up

066768: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan301

1, changed state to up

 

но аптайм неизменился!)

VasiliyP

VasiliyP

Posted
Posted

ребят есть вопросик примерно такого же плана у меня C3560-48TS.. ничего не предвещало беды но тут я захотел в ги01 вставить сфп модуль.. ну вставил... все клево, но тут захотелось мне расшатить его и посмотреть поднялась ли оптика на порту, и бац! недоступен был секунд на 10!!!

 

ну и в логах вот такое чудо

 

0, changed state to up

066763: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan130

8, changed state to up

066764: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan131

0, changed state to up

066765: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan154

6, changed state to up

066766: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan222

2, changed state to up

066767: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan300

0, changed state to up

066768: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan301

1, changed state to up

 

но аптайм неизменился!)

 

так тут и нет ничего, что было бы даун, пишет только что состояние изменилось на ап, надо больше логов

fenikssss

fenikssss

Posted
Posted (edited)

ребят есть вопросик примерно такого же плана у меня C3560-48TS.. ничего не предвещало беды но тут я захотел в ги01 вставить сфп модуль.. ну вставил... все клево, но тут захотелось мне расшатить его и посмотреть поднялась ли оптика на порту, и бац! недоступен был секунд на 10!!!

 

ну и в логах вот такое чудо

 

0, changed state to up

066763: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan130

8, changed state to up

066764: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan131

0, changed state to up

066765: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan154

6, changed state to up

066766: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan222

2, changed state to up

066767: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan300

0, changed state to up

066768: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan301

1, changed state to up

 

но аптайм неизменился!)

 

так тут и нет ничего, что было бы даун, пишет только что состояние изменилось на ап, надо больше логов

 

 

Syslog logging: enabled (3562 messages dropped, 0 messages rate-limited, 51 flus

hes, 0 overruns, xml disabled, filtering disabled)

 

No Active Message Discriminator.

 

 

 

No Inactive Message Discriminator.

 

 

Console logging: disabled

Monitor logging: disabled

Buffer logging: level debugging, 63173 messages logged, xml disabled,

filtering disabled

Exception Logging: size (4096 bytes)

Count and timestamp logging messages: disabled

File logging: disabled

Persistent logging: disabled

Trap logging: level debugging, 63633 message lines logged

 

Log Buffer (8192 bytes):

col on Interface Vlan721, changed state to up

066715: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan725

, changed state to up

066716: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan735

, changed state to up

066717: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan751

, changed state to up

066718: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan767

, changed state to up

066719: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan769

, changed state to up

066720: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan773

, changed state to up

066721: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan780

, changed state to up

066722: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan781

, changed state to up

066723: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan782

, changed state to up

066724: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan801

, changed state to up

066725: Jan 23 07:46:16: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan802

066767: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan300

0, changed state to up

066768: Jan 23 07:46:18: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan3051

1, changed state to up

066769: Jan 23 07:46:27: %OSPF-5-ADJCHG: Process 2118, Nbr 192.168.5.210 on Vlan

2470 from LOADING to FULL, Loading Done

066770: Jan 23 07:55:40: %SYS-5-CONFIG_I: Configured from console by fominyh on

vty5 (77.221.200.10)

066771: Jan 23 08:54:55: %PLATFORM_UCAST-6-PREFIX: One or more, more specific p

refixes could not be programmed into TCAM and are being covered by a less specif

ic prefix

066772: Jan 23 09:03:46: %PLATFORM_UCAST-6-PREFIX: One or more, more specific p

refixes could not be programmed into TCAM and are being covered by a less specif

ic prefix

066773: Jan 23 09:06:44: %PLATFORM_UCAST-6-PREFIX: One or more, more specific p

refixes could not be programmed into TCAM and are being covered by a less specif

ic prefix

066774: Jan 23 09:22:08: %PLATFORM_UCAST-6-PREFIX: One or more, more specific p

refixes could not be programmed into TCAM and are being covered by a less specif

ic prefix

 

 

это все что было!)

Edited by fenikssss

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

×
 Share
Go to topic listing
×
×
  • Create New...
На сайте используются файлы cookie и сервисы аналитики для корректной работы форума и улучшения качества обслуживания. Продолжая использовать сайт, вы соглашаетесь с использованием файлов cookie и с Политикой конфиденциальности.