cisco performance

[edgars]

Хелло,

 

Сделаю репост, вчера не туда запостил.

Нарисовалась проблемка с дрожащей цыской 3560G. Проблема в том, что иногда обрываются ospf и bgp линки, и на саму цыску некрасивый пинг 0-100мс. Софт залили свежий.

 

sw#sh ver

Cisco IOS Software, C3560 Software (C3560-IPSERVICESK9-M), Version 15.0(2)SE1, RELEASE SOFTWARE (fc1)

Technical Support: http://www.cisco.com/techsupport

Copyright © 1986-2013 by Cisco Systems, Inc.

Compiled Fri 04-Jan-13 02:16 by prod_rel_team

 

ROM: Bootstrap program is C3560 boot loader

BOOTLDR: C3560 Boot Loader (C3560-HBOOT-M) Version 12.2(44)SE5, RELEASE SOFTWARE (fc1)

...

 

 

Тута вообще пипец

sw#show proc cpu hist

 

222244444444446666688888888888888833333111111111122222222222

444422222999998888866666333336666633333777777777711111000000

100

90 ***** *****

80 ***************

70 ********************

60 ********************

50 *************************

40 ******************************

30 ***********************************

20 **********************************************************

10 **********************************************************

0....5....1....1....2....2....3....3....4....4....5....5....6

0 5 0 5 0 5 0 5 0 5 0

CPU% per second (last 60 seconds)

 

 

 

 

893279932772327833277332793226823377343583223823248333483233

600710219747172601821119550667075158643570863882857623800610

100 *

90 ** ** * * * * *

80 ** ** * * ** * ** * * * *

70 ** **# ** ** ** ** ** ** * * * *

60 *# **# ** ** ** *# ** ** ** * * *

50 *# *## ** ** ** *# ** ** ** * ** **

40 *# *## #* #* ** *# *# * *#** *# # *#* *#

30 ##**###**##***##***##***##***##***##***##****#***##****#**

20 ##########################################################

10 ##########################################################

0....5....1....1....2....2....3....3....4....4....5....5....6

0 5 0 5 0 5 0 5 0 5 0

CPU% per minute (last 60 minutes)

* = maximum CPU% # = average CPU%

 

 

 

1 1

999999990660686854979789596966977569596584747568584695959647578597869678

556622290520660664929577890991545386390087969792608204909895280791809753

100 **** ** * * * * * * * * * * * * *

90 ********* * * * * * ** * * * * * * * * * * * *

80 ********* * * * * **** * * * * * * * * * * * * * * * ** * * *

70 ********** *** * ****** * ** *** ** * * * * ** * * * ** * ** *** **

60 ***************** *************** ** ** * * ****** ** * ** * *********

50 ***************** ****************************************************

40 **********************************************************************

30 #*###*###*************************************************************

20 ######################################################################

10 ######################################################################

0....5....1....1....2....2....3....3....4....4....5....5....6....6....7..

0 5 0 5 0 5 0 5 0 5 0 5 0

 

 

sw#sh proc cpu sort

CPU utilization for five seconds: 22%/1%; one minute: 21%; five minutes: 28%

PID Runtime(ms) Invoked uSecs 5Sec 1Min 5Min TTY Process

152 44240279 1484184 29807 12.22% 7.76% 7.30% 0 HL3U bkgrd proce

172 6543379 723181 9048 0.80% 0.88% 0.87% 0 PI MATM Aging Pr

121 611 359 1701 0.48% 0.15% 0.07% 1 SSH Process

13 3304739 8074030 409 0.48% 0.72% 0.56% 0 ARP Input

90 607789 20953320 29 0.32% 0.05% 0.02% 0 HLFM address lea

205 668440 832100 803 0.32% 0.10% 0.08% 0 CDP Protocol

381 398543 1016885 391 0.16% 0.12% 0.08% 0 OSPF-1 Router

149 1464208 22425858 65 0.16% 0.12% 0.16% 0 Hulc LED Process

382 540938 1888050 286 0.16% 0.04% 0.04% 0 BGP Router

265 1201784 3971348 302 0.16% 0.10% 0.13% 0 IGMPSN

91 357442 723189 494 0.16% 0.12% 0.08% 0 HLFM aging proce

213 5190557 17732265 292 0.16% 0.39% 0.65% 0 IP Input

7 0 1 0 0.00% 0.00% 0.00% 0 DiscardQ Backgro

 

sw#sh platform tcam util

 

CAM Utilization for ASIC# 0 Max Used

Masks/Values Masks/values

 

Unicast mac addresses: 400/3200 290/2239

IPv4 IGMP groups + multicast routes: 152/1216 10/58

IPv4 unicast directly-connected routes: 400/3200 290/2239

IPv4 unicast indirectly-connected routes: 1048/8384 250/1879

IPv4 policy based routing aces: 384/512 1/2

IPv4 qos aces: 768/768 388/388

IPv4 security aces: 1024/1024 162/162

 

 

sw#sh logg

...

027570: Feb 4 17:22:43.128: %BGP-5-ADJCHANGE: neighbor x.x.x.x Down BGP Notification sent

027571: Feb 4 17:22:43.128: %BGP-3-NOTIFICATION: sent to neighbor x.x.x.x 4/0 (hold time expired) 0 bytes

027572: Feb 4 17:22:43.137: %BGP_SESSION-5-ADJCHANGE: neighbor x.x.x.x IPv4 Unicast topology base removed from session BGP Notification sent

027573: Feb 4 17:22:43.145: %TCP-6-BADAUTH: No MD5 digest from x.x.x.x(179) to x.x.x.x(28680) (RST)

027574: Feb 4 17:22:43.162: %TCP-6-BADAUTH: No MD5 digest from x.x.x.x(179) to x.x.x.x(28680) (RST)

027575: Feb 4 17:22:43.162: %TCP-6-BADAUTH: No MD5 digest from x.x.x.x(179) to x.x.x.x(28680) (RST)

027576: Feb 4 17:22:44.135: %BGP-5-ADJCHANGE: neighbor x.x.x.x Up

027577: Feb 4 17:26:52.842: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan10 from 2WAY to DOWN, Neighbor Down: Dead timer expired

027578: Feb 4 17:26:53.639: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan43 from FULL to DOWN, Neighbor Down: Dead timer expired

027579: Feb 4 17:26:59.444: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan10 from 2WAY to DOWN, Neighbor Down: Dead timer expired

027580: Feb 4 17:26:59.704: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan2052 from FULL to DOWN, Neighbor Down: Dead timer expired

027581: Feb 4 17:27:01.935: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan111 from FULL to DOWN, Neighbor Down: Dead timer expired

027582: Feb 4 17:27:08.579: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan111 from LOADING to FULL, Loading Done

027583: Feb 4 17:27:09.779: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan2052 from LOADING to FULL, Loading Done

027584: Feb 4 17:27:10.768: %OSPF-5-ADJCHG: Process 1, Nbr x.x.x.x on Vlan43 from LOADING to FULL, Loading Done

 

Кактус рисует 25-30% cpu, пики ~50%. Трафик на uplink до 500Мбит

Куда есчо рылом ткнуть?

[darkagent]

http://www.cisco.com/en/US/docs/switches/lan/catalyst3750/software/troubleshooting/cpu_util.html

[edgars]

http://www.cisco.com/en/US/docs/switches/lan/catalyst3750/software/troubleshooting/cpu_util.html

 

смотрел, пока-что ничего не нашлось

[nuclearcat]

в route-map есть ACL с deny?

[edgars]

в route-map есть ACL с deny?

 

Вот только этот

ip prefix-list ISP-XXX_IN seq 200 deny 0.0.0.0/0 le 32

[edgars]

Хеллоу,

 

По ходу дела пару Мбит мультикаста всё валило нафиг.

Теперь стоит вопрос о замене железа. Интересует которое из младшего железа умеет CoPP или аналог у других производителей. Может и full view bgp чтоб мог скушать.

 

Сенькю! :)

[catalist]

720 суп в 65 каталист, или 76ю модель

[f13]

По ходу дела пару Мбит мультикаста всё валило нафиг.

да не должно бы, если только этот мультисакт на проц не падает, а вот это уже можно попробовать тюнить

[edgars]

720 суп в 65 каталист, или 76ю модель

:)

[smsm]

есть 3750, там и мультиков примерно 500М и бгп и оспф и транки

всего трафика около 20Г бегает

что это за мультикаст такой у вас ?