sol Опубликовано 3 июля, 2014 · Жалоба http://gfile.ru/acgb4 c3550-ipservicesk9-tar.122-55.SE9.tar Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
iMPoSsibLe_iT Опубликовано 3 июля, 2014 · Жалоба Пасиб за фирмварю. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 3 июля, 2014 · Жалоба no neighbor <ваш сосед> soft-reconfiguration inbound И, да, sh proc memory sorted soft-reconfiguration не включен на соседей sh proc memory sorted Processor Pool Total: 33508548 Used: 32350488 Free: 1158060 I/O Pool Total: 8388608 Used: 3022964 Free: 5365644 PID TTY Allocated Freed Holding Getbufs Retbufs Process 0 0 33127848 10985960 18996788 0 0 *Init* 201 0 10353028 1532272 8632152 0 0 BGP Router 125 0 4407872 236000 4026628 0 0 IP RIB Update 0 0 15535264 15822636 595248 3078312 0 *Dead* 160 0 232904 0 242828 99792 0 EEM ED Syslog 8 0 224808 21668 226548 0 0 ARP Input 164 0 171004 0 177928 0 0 EEM Server 185 0 135204 180 147948 0 0 CEF: IPv4 proces 73 0 93424 1068 89092 0 0 DTP Protocol 65 0 71308 0 78232 0 0 Switch Backup In 124 0 49596 4228 70652 0 0 Crypto ACL 154 0 49104 44256 64956 0 0 VFM/VQM Merge Pr 83 0 0 4592 60924 0 0 HL3U PBR bkgrd p 31 0 56040 180 58144 35532 0 Logger 5 0 58184 430072 46712 39792 260672 Pool Manager 43 0 32104 14524 41428 0 0 EEM ED ND 13 0 45380 12464 39908 0 0 Entity MIB API 126 0 39832 204 38704 0 0 DHCPD Receive 91 0 27292 316 37036 15228 0 CDP Protocol 92 1 16124 1660 27432 0 0 Virtual Exec 7 0 0 0 24924 0 0 Crash writer 118 0 16604 6084 23392 0 0 L2MM 149 0 43264 70180 22604 0 0 PM Callback 112 0 1155492 1383240 21444 0 0 HTTP CORE 137 0 9308 4316 18348 0 0 Crypto IKMP 165 0 11712 1668 16968 0 0 EEM Policy Direc 98 0 1114008 786588 15764 0 0 IP Input 162 0 13476 11016 15384 0 0 Syslog 178 0 5208 0 15132 0 0 EEM ED Timer 174 0 5056 0 14980 0 0 EEM ED SNMP 159 0 5020 0 14944 0 0 EEM ED Routing 142 0 400920 394900 14944 0 0 Crypto CA 45 0 4980 0 14904 0 0 EEM ED MAT 167 0 4980 0 14904 0 0 EEM ED CLI 168 0 4904 0 14828 0 0 EEM ED Counter 172 0 4904 0 14828 0 0 EEM ED OIR 169 0 4904 0 14828 0 0 EEM ED Interface 170 0 4904 0 14828 0 0 EEM ED IOSWD 175 0 4904 0 14828 0 0 EEM ED SNMP Obje 171 0 4904 0 14828 0 0 EEM ED None 44 0 4904 0 14828 0 0 EEM ED Identity 183 0 4904 0 14828 0 0 EEM ED RPC 177 0 4904 0 14828 0 0 EEM ED SNMP Noti 176 0 4904 0 14828 0 0 EEM ED Ipsla 106 0 2060 180 14804 0 0 SXP CORE 150 0 152680 134384 14736 2340 0 VLAN Manager 188 0 146128 126420 14028 5076 0 LACP Protocol 193 0 7644640 7640172 13800 0 0 IP SNMP 196 0 1056 180 13800 0 0 IP SNMPV6 0 0 13688 277488 13688 0 0 *Sched* 101 0 16524 180 13528 0 0 ADJ resolve proc 138 0 14288 13508 13344 0 0 IPSEC key engine 29 0 28180 0 13332 0 0 Net Background 202 0 216 0 13140 0 0 Collection proce 107 0 396 180 13140 0 0 CEF background p PID TTY Allocated Freed Holding Getbufs Retbufs Process 184 0 600 384 13140 0 0 RBM CORE 97 0 396 180 13140 0 0 CEF switching ba 197 0 0 0 12924 0 0 SNMP ConfCopyPro 195 0 10652024 16006760 12924 0 0 SNMP ENGINE 198 0 0 0 12924 0 0 SNMP Traps 105 0 180 180 12924 0 0 KRB5 AAA 194 0 5351144 0 12924 0 0 PDU DISPATCHER 12 0 0 0 12924 0 0 Policy Manager 30 0 836 836 12924 0 0 IDB Work 109 0 76 1212 12924 0 0 TCP Timer 27 0 180 180 12924 0 0 XML Proxy Client 67 0 180 180 12924 0 0 Auth Manager 110 0 74452 0 12924 0 0 TCP Protocols 122 0 14888 180 11684 0 0 L2TRACE SERVER 1 0 7740 380436 11576 0 0 Chunk Manager 156 0 4832 1900 11576 0 0 VTP Trap Process 173 0 15332 9040 11184 0 0 SSH Event handle 187 0 388 0 10312 0 0 IP Background 3 0 0 0 9948 0 0 Connection Mgr 127 0 14256 0 9924 0 0 BGP Scheduler 100 0 180 180 9924 0 0 IP ARP Track 108 0 0 0 9924 0 0 IP IRDP 190 0 0 130980 9924 0 0 BGP Scanner 133 0 196740 0 9924 0 0 BGP I/O 78 0 180 180 9924 0 0 IP Host Track Pr 104 0 200 200 9924 0 0 EAPoUDP Process 32 0 180 180 9924 0 0 TTY Background 189 0 2986836 2988416 9832 0 0 crypto sw pk pro 144 0 0 0 8924 0 0 Crypto SSL 143 0 0 0 8924 0 0 Crypto PKI-CRL 93 0 0 0 8924 0 0 Key Proc 134 0 2060 180 8804 0 0 TPLUS 35 0 1692 0 8616 0 0 IF-MGR control p 20 0 1688 0 8612 0 0 IPC Seat Manager 22 0 395756 394604 8076 0 0 PrstVbl 199 0 33604 32808 7720 0 0 NTP 115 0 684 180 7428 0 0 Cluster Base 46 0 428 0 7352 0 0 Vegas LED Proces 119 0 408 0 7332 0 0 MRD 141 0 11540 1812 7296 0 0 crypto engine pr 80 0 472 180 7216 0 0 UDLD 186 0 216 0 7140 0 0 ADJ background 76 0 216 0 7140 0 0 Port-Security 103 0 7800 656 7140 0 0 Spanning Tree 200 0 216 0 7140 0 0 DHCPD Database 57 0 180 180 6968 0 0 HMATM Age proces 56 0 180 180 6968 0 0 HMATM Learn proc 41 0 66236 66968 6948 0 0 SpanTree Helper 42 0 180 180 6924 0 0 DownWhenLooped 90 0 0 0 6924 0 0 IP Admin SM Proc 99 0 0 0 6924 0 0 ICMP event handl 89 0 0 0 6924 0 0 Auth-proxy AAA B 72 0 0 0 6924 0 0 802.1x Webauth F 70 0 0 0 6924 0 0 MAB Framework 88 0 0 0 6924 0 0 AAA System Acct 96 0 0 0 6924 0 0 DHCP Snooping db 95 0 0 0 6924 0 0 DHCP Snooping 111 0 0 0 6924 0 0 Socket Timers 39 0 0 0 6924 0 0 HC Counter Timer PID TTY Allocated Freed Holding Getbufs Retbufs Process 113 0 180 180 6924 0 0 Cluster L2 114 0 0 0 6924 0 0 Cluster RARP 94 0 204 204 6924 0 0 AAA Dictionary R 116 0 0 0 6924 0 0 RARP Input 71 0 0 1764 6924 0 0 802.1x switch 69 0 180 180 6924 0 0 Dot1x Mgr Proces 86 0 0 0 6924 0 0 AAA ACCT Proc 85 0 180 180 6924 0 0 AAA Server 121 0 0 0 6924 0 0 IGMPQR 66 0 0 0 6924 0 0 MMN bkgrd proces 123 0 0 0 6924 0 0 Vegas wccp manag 84 0 0 0 6924 0 0 Vegas PBR n-h re 68 0 0 0 6924 0 0 AUTH POLICY Fram 49 0 0 0 6924 0 0 RAM Access 51 0 0 0 6924 0 0 VLAN Info Update 87 0 0 0 6924 0 0 ACCT Periodic Pr 129 0 0 0 6924 0 0 EPM MAIN PROCESS 130 0 180 180 6924 0 0 LOCAL AAA 131 0 180 180 6924 0 0 ENABLE AAA 132 0 180 180 6924 0 0 LINE AAA 82 0 0 6656 6924 0 0 VMATM Callback 81 0 0 0 6924 0 0 Vegas IPSG Proce 135 0 0 0 6924 0 0 CRYPTO QoS proce 136 0 0 0 6924 0 0 Crypto INT 47 0 180 180 6924 0 0 Compute load avg 33 0 260352 260352 6924 0 0 Per-Second Jobs 139 0 0 0 6924 0 0 IPSEC manual key 140 0 0 0 6924 0 0 Crypto PAS Proc 117 0 0 0 6924 0 0 Critical Auth 38 0 0 77048 6924 0 0 Transport Port A 79 0 180 180 6924 0 0 Ethchnl 128 0 180 180 6924 0 0 Crypto Support 145 0 0 0 6924 0 0 encrypt proc 75 0 0 0 6924 0 0 EAP Test 147 0 180 180 6924 0 0 VTPMIB EDIT BUFF 148 0 180 180 6924 0 0 DHCP Security He 64 0 180 180 6924 0 0 PI MATM Aging Pr 28 0 0 0 6924 0 0 Critical Bkgnd 151 0 0 0 6924 0 0 DHCPD Timer 152 0 180 180 6924 0 0 dhcp snooping sw 153 0 0 0 6924 0 0 VFM Queue Proces 63 0 428800 430400 6924 0 0 VUR_MGR bg proce 155 0 0 0 6924 0 0 VFM Deferred Upd 62 0 7608 1892 6924 0 0 VegasPM 158 0 180 180 6924 0 0 AAA SEND STOP EV 26 0 180 180 6924 0 0 GraphIt 25 0 0 0 6924 0 0 Net Input 161 0 0 0 6924 0 0 Syslog Traps 24 0 0 0 6924 0 0 ARP Snoop 74 0 0 0 6924 0 0 EAP Framework 23 0 0 0 6924 0 0 Dynamic ARP Insp 120 0 0 0 6924 0 0 IGMPSN 21 0 0 0 6924 0 0 IPC Session Serv 37 0 0 0 6924 0 0 AggMgr Process 19 0 0 0 6924 0 0 IPC Deferred Por 18 0 0 0 6924 0 0 IPC Managed Time 17 0 0 0 6924 0 0 IPC Periodic Tim 16 0 0 0 6924 0 0 IPC Zone Manager 61 0 0 0 6924 0 0 Vegas Bridging PID TTY Allocated Freed Holding Getbufs Retbufs Process 15 0 0 0 6924 0 0 IPC Dynamic Cach 14 0 0 0 6924 0 0 IFS Agent Manage 36 0 0 0 6924 0 0 IF-MGR event pro 11 0 180 180 6924 0 0 AAA high-capacit 10 0 0 0 6924 0 0 AAA_SERVER_DEADT 34 0 0 0 6924 0 0 Per-minute Jobs 191 0 0 0 6924 0 0 TCP Listener 52 0 0 0 6924 0 0 JADE Gbit lockup 192 0 0 0 6924 0 0 SNMP Timers 9 0 0 0 6924 0 0 CEF MIB API 59 0 0 0 6924 0 0 L3MD 6 0 180 180 6924 0 0 Timers 4 0 0 0 6924 0 0 Check heaps 58 0 23040 23176 6924 0 0 VL2MM 102 0 396 180 4140 0 0 ADJ NSF process 182 0 180 180 3924 0 0 CSRT RAPID TRANS 181 0 180 180 3924 0 0 STP STACK TOPOLO 179 0 180 180 3924 0 0 STP STACK TOPOLO 60 0 44052888 44052888 3924 0 0 L3MD_STAT 146 0 180 180 3924 0 0 Vegas EnvMon Pro 40 0 180 180 3924 0 0 Vegas Storm Cont 55 0 7373584 7373584 3924 0 0 Vegas Statistics 2 0 180 180 3924 0 0 Load Meter 54 0 180 180 3924 0 0 L3TM 53 0 180 180 3924 0 0 L2TM Process 163 0 0 0 3924 0 0 C3550 DHCP Snoop 48 0 0 0 3924 0 0 SCQ_PROCESS 180 0 180 180 3924 0 0 STP FAST TRANSIT 50 0 180 180 3924 0 0 SW Frame Ager 35366852 Total по ходу кол-во памяти стало опять уменьшаться :(((((( Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 3 июля, 2014 · Жалоба На 12.2-50-SE3 памяти нормально #sh memory Head Total(b) Used(b) Free(b) Lowest(b) Largest(b) Processor 1D13D8C 36870772 18930852 17939920 16701736 12145460 I/O 80000000 8388608 3047780 5340828 5251468 5294688 Cisco IOS Software, C3550 Software (C3550-IPSERVICESK9-M), Version 12.2(50)SE3, RELEASE SOFTWARE (fc1) Вы на пиров лимит префиксов выставили? лимит префиксов не выставлялся. У Вас видимо просто принимается дефолт от аплинка ну или там пару префиксов которые не меняются вот и обьем памяти доступной такой большой. У нас же принимается и анонсится клиентам таблица в 14659 (на данный момент) префиксов. количество префиксов варьируется. у меня есть некоторые 3550-12G которые принимают от меня только дефолт и префиксы моих клиентов и там все гуд вот CS3550#sho ver Cisco IOS Software, C3550 Software (C3550-IPSERVICESK9-M), Version 12.2(55)SE7, RELEASE SOFTWARE (fc1) ... СS3550 uptime is 34 weeks, 1 day, 15 hours, 47 minutes CS3550#show proc memory sorted Processor Pool Total: 33510948 Used: 20290124 Free: 13220824 I/O Pool Total: 8388608 Used: 3140740 Free: 5247868 от так от :( Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
DVM-Avgoor Опубликовано 3 июля, 2014 · Жалоба лимит префиксов не выставлялся. У Вас видимо просто принимается дефолт от аплинка ну или там пару префиксов которые не меняются вот и обьем памяти доступной такой большой. У нас же принимается и анонсится клиентам таблица в 14659 (на данный момент) префиксов. количество префиксов варьируется. у меня есть некоторые 3550-12G которые принимают от меня только дефолт и префиксы моих клиентов и там все гуд вот У меня оно в другой роли, я показывал что доступное 36М на этой прошивке. А без лимита префиксов оно местами не переполняется у вас? Я бы все же поставил, защита и все такое. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
sol Опубликовано 3 июля, 2014 · Жалоба таблица в 14659 (на данный момент) префиксов и 8632152 0 0 BGP Router НЕ ВЕРЮ. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 3 июля, 2014 (изменено) · Жалоба епрст - смысл мне фантазировать? я хочу решить эту дурацкую проблему блин :( к кому не обращался - все пожимают плечами :( вот на моей 65-ой 289 0 237596576 92089840 9696472 0 0 BGP Router что странного то? Изменено 3 июля, 2014 пользователем Bear_UA Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 3 июля, 2014 · Жалоба Память потихоньку отжирает :(((((( сутки назад было 1.27м фри, сейчас 938к фри :( Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
DVM-Avgoor Опубликовано 4 июля, 2014 · Жалоба Еще раз вопрос, вы уверены что потребление памяти не связано с ростом кол-ва префиксов? У вас там запаса-то нет никакого, еще 1к префиксов придет и все, кирдык. Т.е. вы говорите память "отжирает", а при этом кол-во префиксов стабильно? Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 4 июля, 2014 · Жалоба количество префиксов незначительно меняется постоянно, это ведь очевидно. Еще 1к - врядли, стоит template на 24к префиксов, так что запас в 10к префиксов есть. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
sol Опубликовано 4 июля, 2014 (изменено) · Жалоба Решение проблемм вообще выглядит так: Цикл: Пока Гипозеза не верна, делай: Строй Гипотезу Проверяй Гипотезу Конец Цикла Выявляй Причины(Справедливая Гипотеза) Нейтрализуй Причины(Справедливая Гипотеза) ... Профит. А по этому, sh ip bgp summ sh ip bgp nei два раза sh proc mem sort с интервалом в сутки или более. Изменено 4 июля, 2014 пользователем sol Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
DVM-Avgoor Опубликовано 4 июля, 2014 · Жалоба количество префиксов незначительно меняется постоянно, это ведь очевидно. Еще 1к - врядли, стоит template на 24к префиксов, так что запас в 10к префиксов есть. Этот темплейт работает только на формат TCAM. То что у вас память раньше кончится это же очевидно. В общем не вижу каких-либо реальных доказательств утечки памяти. Да и 3550 платформа древняя и стабильная. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 4 июля, 2014 (изменено) · Жалоба А по этому, sh ip bgp summ sh ip bgp nei два раза sh proc mem sort с интервалом в сутки или более. show ip bgp summ BGP router identifier XXX.XXX.XXX.XXX, local AS number XXXXX BGP table version is 34564, main routing table version 34564 14774 network entries using 1728558 bytes of memory 14774 path entries using 768248 bytes of memory 9700/3995 BGP path/bestpath attribute entries using 1358000 bytes of memory 4265 BGP AS-PATH entries using 118020 bytes of memory 47 BGP community entries using 2216 bytes of memory 0 BGP route-map cache entries using 0 bytes of memory 0 BGP filter-list cache entries using 0 bytes of memory BGP using 3975042 total bytes of memory BGP activity 16289/1515 prefixes, 16740/1966 paths, scan interval 60 secs Neighbor V AS MsgRcvd MsgSent TblVer InQ OutQ Up/Down State/PfxRcd x.x.x.x 4 XXXXX 2746 9499 34564 0 0 1d21h 1 x.x.x.x 4 XXXXX 0 0 0 0 0 never Idle (Admin) x.x.x.x 4 XXXXX 0 0 0 0 0 never Idle (Admin) x.x.x.x 4 XXXXX 15627 5362 34564 0 0 1d21h 14768 x.x.x.x 4 XXXXX 2748 2728 34564 0 0 1d21h 3 show ip bgp nei BGP neighbor is x.x.x.x, remote AS XXXXX, external link Description: BGP version 4, remote router ID x.x.x.x BGP state = Established, up for 1d21h Last read 00:00:29, last write 00:00:00, hold time is 180, keepalive interval is 60 seconds Message statistics: InQ depth is 0 OutQ depth is 0 Sent Rcvd Opens: 1 1 Notifications: 0 0 Updates: 8063 1 Keepalives: 1438 2747 Route Refresh: 0 0 Total: 9502 2749 Default minimum time between advertisement runs is 30 seconds For address family: IPv4 Unicast BGP table version 34564, neighbor version 34564/0 Output queue size : 0 Index 3, Offset 0, Mask 0x8 3 update-group member Private AS number removed from updates to this neighbor Inbound path policy configured Route map for incoming advertisements is x Sent Rcvd Prefix activity: ---- ---- Prefixes Current: 14774 1 (Consumes 52 bytes) Prefixes Total: 30675 1 Implicit Withdraw: 14190 0 Explicit Withdraw: 1711 0 Used as bestpath: n/a 1 Used as multipath: n/a 0 Outbound Inbound Local Policy Denied Prefixes: -------- ------- Total: 0 0 Number of NLRIs in the update sent: max 781, min 0 Address tracking is enabled, the RIB does have a route to x.x.x.x Address tracking requires at least a /30 route to the peer Connections established 1; dropped 0 Last reset never Transport(tcp) path-mtu-discovery is enabled Connection state is ESTAB, I/O status: 1, unread input bytes: 0 Mininum incoming TTL 0, Outgoing TTL 1 Local host: x.x.x.x, Local port: 14780 Foreign host: x.x.x.x, Foreign port: 179 Enqueued packets for retransmit: 0, input: 0 mis-ordered: 0 (0 bytes) Event Timers (current time is 0x9D4619C): Timer Starts Wakeups Next Retrans 4457 330 0x0 TimeWait 0 0 0x0 AckHold 2749 2696 0x0 SendWnd 1 0 0x0 KeepAlive 0 0 0x0 GiveUp 0 0 0x0 PmtuAger 498477 498476 0x9D461C3 DeadWait 0 0 0x0 iss: 3015881193 snduna: 3016466028 sndnxt: 3016466028 sndwnd: 3600 irs: 1509577758 rcvnxt: 1509630026 rcvwnd: 15320 delrcvwnd: 1064 SRTT: 300 ms, RTTO: 303 ms, RTV: 3 ms, KRTT: 0 ms minRTT: 0 ms, maxRTT: 600 ms, ACK hold: 200 ms Flags: higher precedence, nagle, path mtu capable Datagrams (max data segment is 1460 bytes): Rcvd: 7267 (out of order: 0), with data: 2749, total data bytes: 52267 Sent: 6965 (retransmit: 331), with data: 4231, total data bytes: 584833 BGP neighbor is x.x.x.x, remote AS XXXXX, external link Description: Administratively shut down BGP version 4, remote router ID 0.0.0.0 BGP state = Idle Last read 1d21h, last write 1d21h, hold time is 180, keepalive interval is 60 seconds Message statistics: InQ depth is 0 OutQ depth is 0 Sent Rcvd Opens: 0 0 Notifications: 0 0 Updates: 0 0 Keepalives: 0 0 Route Refresh: 0 0 Total: 0 0 Default minimum time between advertisement runs is 30 seconds For address family: IPv4 Unicast BGP table version 34564, neighbor version 0/0 Output queue size : 0 Index 3, Offset 0, Mask 0x8 3 update-group member Private AS number removed from updates to this neighbor Inbound path policy configured Route map for incoming advertisements is x Sent Rcvd Prefix activity: ---- ---- Prefixes Current: 14774 0 Prefixes Total: 0 0 Implicit Withdraw: 0 0 Explicit Withdraw: 0 0 Used as bestpath: n/a 0 Used as multipath: n/a 0 Outbound Inbound Local Policy Denied Prefixes: -------- ------- Total: 0 0 Number of NLRIs in the update sent: max 0, min 0 Address tracking is enabled, the RIB does have a route to x.x.x.x Address tracking requires at least a /24 route to the peer Connections established 0; dropped 0 Last reset never Transport(tcp) path-mtu-discovery is enabled No active TCP connection BGP neighbor is x.x.x.x, remote AS XXXXX, internal link Description: Administratively shut down BGP version 4, remote router ID 0.0.0.0 BGP state = Idle Last read 1d21h, last write 1d21h, hold time is 180, keepalive interval is 60 seconds Message statistics: InQ depth is 0 OutQ depth is 0 Sent Rcvd Opens: 0 0 Notifications: 0 0 Updates: 0 0 Keepalives: 0 0 Route Refresh: 0 0 Total: 0 0 Default minimum time between advertisement runs is 0 seconds For address family: IPv4 Unicast BGP table version 34564, neighbor version 0/0 Output queue size : 0 Index 2, Offset 0, Mask 0x4 2 update-group member NEXT_HOP is always this router Inbound path policy configured Route map for incoming advertisements is x Sent Rcvd Prefix activity: ---- ---- Prefixes Current: 0 0 Prefixes Total: 0 0 Implicit Withdraw: 0 0 Explicit Withdraw: 0 0 Used as bestpath: n/a 0 Used as multipath: n/a 0 Outbound Inbound Local Policy Denied Prefixes: -------- ------- Total: 0 0 Number of NLRIs in the update sent: max 0, min 0 Address tracking is enabled, the RIB does have a route to x.x.x.x Address tracking requires at least a /24 route to the peer Connections established 0; dropped 0 Last reset never Transport(tcp) path-mtu-discovery is enabled No active TCP connection BGP neighbor is x.x.x.x, remote AS XXXXX, external link Description: *** UAIX *** BGP version 4, remote router ID x.x.x.x BGP state = Established, up for 1d21h Last read 00:00:12, last write 00:00:24, hold time is 90, keepalive interval is 30 seconds Neighbor capabilities: Route refresh: advertised and received(new) Address family IPv4 Unicast: advertised and received Message statistics: InQ depth is 0 OutQ depth is 0 Sent Rcvd Opens: 1 1 Notifications: 0 0 Updates: 2 9869 Keepalives: 5364 5763 Route Refresh: 0 0 Total: 5367 15633 Default minimum time between advertisement runs is 30 seconds For address family: IPv4 Unicast BGP table version 34564, neighbor version 34564/0 Output queue size : 0 Index 4, Offset 0, Mask 0x10 4 update-group member Private AS number removed from updates to this neighbor NEXT_HOP is always this router Inbound path policy configured Outbound path policy configured Route map for incoming advertisements is uaix-in Route map for outgoing advertisements is uaix-out Sent Rcvd Prefix activity: ---- ---- Prefixes Current: 3 14768 (Consumes 767936 bytes) Prefixes Total: 3 32591 Implicit Withdraw: 0 15857 Explicit Withdraw: 0 1966 Used as bestpath: n/a 14768 Used as multipath: n/a 0 Outbound Inbound Local Policy Denied Prefixes: -------- ------- route-map: 30684 0 Bestpath from this peer: 2 n/a Total: 30686 0 Number of NLRIs in the update sent: max 2, min 1 Address tracking is enabled, the RIB does have a route to x.x.x.x Address tracking requires at least a /30 route to the peer Connections established 1; dropped 0 Last reset never Transport(tcp) path-mtu-discovery is enabled Connection state is ESTAB, I/O status: 1, unread input bytes: 0 Mininum incoming TTL 0, Outgoing TTL 1 Local host: x.x.x.x, Local port: 179 Foreign host: x.x.x.x, Foreign port: 60318 Enqueued packets for retransmit: 0, input: 0 mis-ordered: 0 (0 bytes) Event Timers (current time is 0x9D46548): Timer Starts Wakeups Next Retrans 5368 1 0x0 TimeWait 0 0 0x0 AckHold 10550 10127 0x0 SendWnd 0 0 0x0 KeepAlive 0 0 0x0 GiveUp 0 0 0x0 PmtuAger 0 0 0x0 DeadWait 0 0 0x0 iss: 479367618 snduna: 479469683 sndnxt: 479469683 sndwnd: 16384 irs: 2794198021 rcvnxt: 2794965604 rcvwnd: 15966 delrcvwnd: 418 SRTT: 300 ms, RTTO: 303 ms, RTV: 3 ms, KRTT: 0 ms minRTT: 8 ms, maxRTT: 396 ms, ACK hold: 200 ms Flags: passive open, nagle, path mtu capable, gen tcbs Datagrams (max data segment is 1460 bytes): Rcvd: 16076 (out of order: 0), with data: 10739, total data bytes: 767582 Sent: 16001 (retransmit: 1), with data: 5366, total data bytes: 102064 BGP neighbor is x.x.x.x, remote AS XXXXX, internal link Description: *** CORE *** BGP version 4, remote router ID x.x.x.x BGP state = Established, up for 1d21h Last read 00:00:21, last write 00:00:53, hold time is 180, keepalive interval is 60 seconds Neighbor capabilities: Route refresh: advertised and received(new) Address family IPv4 Unicast: advertised and received Message statistics: InQ depth is 0 OutQ depth is 0 Sent Rcvd Opens: 1 1 Notifications: 0 0 Updates: 1 1 Keepalives: 2728 2749 Route Refresh: 0 0 Total: 2730 2751 Default minimum time between advertisement runs is 0 seconds For address family: IPv4 Unicast BGP table version 34564, neighbor version 34564/0 Output queue size : 0 Index 1, Offset 0, Mask 0x2 1 update-group member NEXT_HOP is always this router Inbound path policy configured Outbound path policy configured Route map for incoming advertisements is core-in Route map for outgoing advertisements is core-out Sent Rcvd Prefix activity: ---- ---- Prefixes Current: 2 3 (Consumes 156 bytes) Prefixes Total: 2 3 Implicit Withdraw: 0 0 Explicit Withdraw: 0 0 Used as bestpath: n/a 3 Used as multipath: n/a 0 Outbound Inbound Local Policy Denied Prefixes: -------- ------- route-map: 32320 0 Total: 32320 0 Number of NLRIs in the update sent: max 2, min 2 Address tracking is enabled, the RIB does have a route to x.x.x.x Address tracking requires at least a /30 route to the peer Connections established 1; dropped 0 Last reset never Transport(tcp) path-mtu-discovery is enabled Connection state is ESTAB, I/O status: 1, unread input bytes: 0 Mininum incoming TTL 0, Outgoing TTL 255 Local host: x.x.x.x, Local port: 62743 Foreign host: x.x.x.x, Foreign port: 179 Enqueued packets for retransmit: 0, input: 0 mis-ordered: 0 (0 bytes) Event Timers (current time is 0x9D467A8): Timer Starts Wakeups Next Retrans 2738 7 0x0 TimeWait 0 0 0x0 AckHold 2748 2699 0x0 SendWnd 0 0 0x0 KeepAlive 0 0 0x0 GiveUp 0 0 0x0 PmtuAger 537555 537554 0x9D467B7 DeadWait 0 0 0x0 iss: 1701093212 snduna: 1701145149 sndnxt: 1701145149 sndwnd: 15662 irs: 702595113 rcvnxt: 702647453 rcvwnd: 15263 delrcvwnd: 1121 SRTT: 300 ms, RTTO: 303 ms, RTV: 3 ms, KRTT: 0 ms minRTT: 0 ms, maxRTT: 396 ms, ACK hold: 200 ms Flags: higher precedence, nagle, path mtu capable Datagrams (max data segment is 1460 bytes): Rcvd: 5462 (out of order: 0), with data: 2749, total data bytes: 52339 Sent: 5471 (retransmit: 7), with data: 2730, total data bytes: 51936 show proc mem sort Processor Pool Total: 33508548 Used: 32743676 Free: 764872 I/O Pool Total: 8388608 Used: 3029588 Free: 5359020 PID TTY Allocated Freed Holding Getbufs Retbufs Process 0 0 33127848 10985960 18762708 0 0 *Init* 201 0 10906972 1618852 9008080 0 0 BGP Router 125 0 4426656 236000 4039564 0 0 IP RIB Update 0 0 15572880 15847460 595372 3078312 0 *Dead* 160 0 232904 0 242828 99792 0 EEM ED Syslog 91 0 322576 316 241880 203040 0 CDP Protocol 8 0 224808 88008 226548 0 0 ARP Input 164 0 171004 0 177928 0 0 EEM Server 185 0 135204 180 147948 0 0 CEF: IPv4 proces 5 0 258776 939224 97252 180368 597520 Pool Manager 73 0 93424 1068 89092 0 0 DTP Protocol 65 0 71308 0 78232 0 0 Switch Backup In 124 0 49596 4228 70652 0 0 Crypto ACL 154 0 49104 44256 64956 0 0 VFM/VQM Merge Pr 83 0 0 4592 60924 0 0 HL3U PBR bkgrd p 43 0 32104 14524 41428 0 0 EEM ED ND 13 0 45380 12464 39908 0 0 Entity MIB API 126 0 39832 204 38704 0 0 DHCPD Receive 31 0 56040 180 31544 35532 0 Logger 188 0 170096 126420 30016 20304 0 LACP Protocol 92 1 18880 3852 27996 0 0 Virtual Exec 7 0 0 0 24924 0 0 Crash writer 118 0 16604 6084 23392 0 0 L2MM 149 0 43264 70180 22604 0 0 PM Callback 112 0 1308604 1541168 22308 0 0 HTTP CORE 137 0 9308 4316 18348 0 0 Crypto IKMP 165 0 11712 1668 16968 0 0 EEM Policy Direc 98 0 4778648 4194732 15688 0 0 IP Input 162 0 13704 11244 15384 0 0 Syslog 178 0 5208 0 15132 0 0 EEM ED Timer 174 0 5056 0 14980 0 0 EEM ED SNMP 159 0 5020 0 14944 0 0 EEM ED Routing 142 0 400920 394900 14944 0 0 Crypto CA 45 0 4980 0 14904 0 0 EEM ED MAT 167 0 4980 0 14904 0 0 EEM ED CLI 183 0 4904 0 14828 0 0 EEM ED RPC 168 0 4904 0 14828 0 0 EEM ED Counter 169 0 4904 0 14828 0 0 EEM ED Interface 175 0 4904 0 14828 0 0 EEM ED SNMP Obje 170 0 4904 0 14828 0 0 EEM ED IOSWD 171 0 4904 0 14828 0 0 EEM ED None 44 0 4904 0 14828 0 0 EEM ED Identity 172 0 4904 0 14828 0 0 EEM ED OIR 177 0 4904 0 14828 0 0 EEM ED SNMP Noti 176 0 4904 0 14828 0 0 EEM ED Ipsla 106 0 2060 180 14804 0 0 SXP CORE 150 0 152680 134384 14736 2340 0 VLAN Manager 193 0 34330704 34311172 13800 0 0 IP SNMP 196 0 1056 180 13800 0 0 IP SNMPV6 0 0 13688 327428 13688 0 0 *Sched* 101 0 82724 180 13388 0 0 ADJ resolve proc 138 0 14288 13508 13344 0 0 IPSEC key engine 29 0 28180 0 13332 0 0 Net Background 202 0 216 0 13140 0 0 Collection proce 107 0 396 180 13140 0 0 CEF background p PID TTY Allocated Freed Holding Getbufs Retbufs Process 184 0 600 384 13140 0 0 RBM CORE 97 0 396 180 13140 0 0 CEF switching ba 197 0 0 0 12924 0 0 SNMP ConfCopyPro 195 0 49548732 74548456 12924 0 0 SNMP ENGINE 198 0 0 0 12924 0 0 SNMP Traps 105 0 180 180 12924 0 0 KRB5 AAA 194 0 24981068 0 12924 0 0 PDU DISPATCHER 12 0 0 0 12924 0 0 Policy Manager 30 0 836 836 12924 0 0 IDB Work 109 0 1204 18180 12924 0 0 TCP Timer 27 0 180 180 12924 0 0 XML Proxy Client 67 0 180 180 12924 0 0 Auth Manager 110 0 111724 0 12924 0 0 TCP Protocols 122 0 14888 180 11684 0 0 L2TRACE SERVER 1 0 9588 384132 11576 0 0 Chunk Manager 156 0 4832 1900 11576 0 0 VTP Trap Process 173 0 56112 43176 11184 0 0 SSH Event handle 187 0 388 0 10312 0 0 IP Background 3 0 0 0 9948 0 0 Connection Mgr 127 0 14256 0 9924 0 0 BGP Scheduler 100 0 180 180 9924 0 0 IP ARP Track 108 0 0 0 9924 0 0 IP IRDP 190 0 0 222416 9924 0 0 BGP Scanner 133 0 196740 0 9924 0 0 BGP I/O 78 0 180 180 9924 0 0 IP Host Track Pr 104 0 200 200 9924 0 0 EAPoUDP Process 32 0 180 180 9924 0 0 TTY Background 189 0 14258824 14266968 9912 0 0 crypto sw pk pro 144 0 0 0 8924 0 0 Crypto SSL 143 0 0 0 8924 0 0 Crypto PKI-CRL 93 0 0 0 8924 0 0 Key Proc 134 0 2060 180 8804 0 0 TPLUS 35 0 1692 0 8616 0 0 IF-MGR control p 20 0 1688 0 8612 0 0 IPC Seat Manager 22 0 395756 394604 8076 0 0 PrstVbl 199 0 92860 92064 7720 0 0 NTP 115 0 684 180 7428 0 0 Cluster Base 46 0 428 0 7352 0 0 Vegas LED Proces 119 0 408 0 7332 0 0 MRD 141 0 11540 1812 7296 0 0 crypto engine pr 80 0 472 180 7216 0 0 UDLD 186 0 216 0 7140 0 0 ADJ background 76 0 216 0 7140 0 0 Port-Security 103 0 7800 656 7140 0 0 Spanning Tree 200 0 216 0 7140 0 0 DHCPD Database 57 0 180 180 6968 0 0 HMATM Age proces 56 0 180 180 6968 0 0 HMATM Learn proc 41 0 66236 66968 6948 0 0 SpanTree Helper 42 0 180 180 6924 0 0 DownWhenLooped 90 0 0 0 6924 0 0 IP Admin SM Proc 99 0 0 0 6924 0 0 ICMP event handl 89 0 0 0 6924 0 0 Auth-proxy AAA B 72 0 0 0 6924 0 0 802.1x Webauth F 70 0 0 0 6924 0 0 MAB Framework 88 0 0 0 6924 0 0 AAA System Acct 96 0 0 0 6924 0 0 DHCP Snooping db 95 0 0 0 6924 0 0 DHCP Snooping 111 0 0 0 6924 0 0 Socket Timers 39 0 0 0 6924 0 0 HC Counter Timer PID TTY Allocated Freed Holding Getbufs Retbufs Process 113 0 180 180 6924 0 0 Cluster L2 114 0 0 0 6924 0 0 Cluster RARP 94 0 204 204 6924 0 0 AAA Dictionary R 116 0 0 0 6924 0 0 RARP Input 71 0 0 1764 6924 0 0 802.1x switch 69 0 180 180 6924 0 0 Dot1x Mgr Proces 86 0 0 0 6924 0 0 AAA ACCT Proc 85 0 180 180 6924 0 0 AAA Server 121 0 0 0 6924 0 0 IGMPQR 66 0 0 0 6924 0 0 MMN bkgrd proces 123 0 0 0 6924 0 0 Vegas wccp manag 84 0 0 0 6924 0 0 Vegas PBR n-h re 68 0 0 0 6924 0 0 AUTH POLICY Fram 49 0 0 0 6924 0 0 RAM Access 51 0 0 0 6924 0 0 VLAN Info Update 87 0 0 0 6924 0 0 ACCT Periodic Pr 129 0 0 0 6924 0 0 EPM MAIN PROCESS 130 0 180 180 6924 0 0 LOCAL AAA 131 0 180 180 6924 0 0 ENABLE AAA 132 0 180 180 6924 0 0 LINE AAA 82 0 0 6656 6924 0 0 VMATM Callback 81 0 0 0 6924 0 0 Vegas IPSG Proce 135 0 0 0 6924 0 0 CRYPTO QoS proce 136 0 0 0 6924 0 0 Crypto INT 47 0 180 180 6924 0 0 Compute load avg 33 0 1388988 1388988 6924 0 0 Per-Second Jobs 139 0 0 0 6924 0 0 IPSEC manual key 140 0 0 0 6924 0 0 Crypto PAS Proc 117 0 0 0 6924 0 0 Critical Auth 38 0 0 312100 6924 0 0 Transport Port A 79 0 180 180 6924 0 0 Ethchnl 128 0 180 180 6924 0 0 Crypto Support 145 0 0 0 6924 0 0 encrypt proc 75 0 0 0 6924 0 0 EAP Test 147 0 180 180 6924 0 0 VTPMIB EDIT BUFF 148 0 180 180 6924 0 0 DHCP Security He 64 0 180 180 6924 0 0 PI MATM Aging Pr 28 0 0 0 6924 0 0 Critical Bkgnd 151 0 0 0 6924 0 0 DHCPD Timer 152 0 180 180 6924 0 0 dhcp snooping sw 153 0 0 0 6924 0 0 VFM Queue Proces 63 0 432000 437600 6924 0 0 VUR_MGR bg proce 155 0 0 0 6924 0 0 VFM Deferred Upd 62 0 7608 1892 6924 0 0 VegasPM 158 0 180 180 6924 0 0 AAA SEND STOP EV 26 0 180 180 6924 0 0 GraphIt 25 0 0 0 6924 0 0 Net Input 161 0 0 0 6924 0 0 Syslog Traps 24 0 0 0 6924 0 0 ARP Snoop 74 0 0 0 6924 0 0 EAP Framework 23 0 0 0 6924 0 0 Dynamic ARP Insp 120 0 0 0 6924 0 0 IGMPSN 21 0 0 0 6924 0 0 IPC Session Serv 37 0 0 0 6924 0 0 AggMgr Process 19 0 0 0 6924 0 0 IPC Deferred Por 18 0 0 0 6924 0 0 IPC Managed Time 17 0 0 0 6924 0 0 IPC Periodic Tim 16 0 0 0 6924 0 0 IPC Zone Manager 61 0 0 0 6924 0 0 Vegas Bridging PID TTY Allocated Freed Holding Getbufs Retbufs Process 15 0 0 0 6924 0 0 IPC Dynamic Cach 14 0 0 0 6924 0 0 IFS Agent Manage 36 0 0 0 6924 0 0 IF-MGR event pro 11 0 180 180 6924 0 0 AAA high-capacit 10 0 0 0 6924 0 0 AAA_SERVER_DEADT 34 0 0 0 6924 0 0 Per-minute Jobs 191 0 0 0 6924 0 0 TCP Listener 52 0 0 0 6924 0 0 JADE Gbit lockup 192 0 0 0 6924 0 0 SNMP Timers 9 0 0 0 6924 0 0 CEF MIB API 59 0 0 0 6924 0 0 L3MD 6 0 180 180 6924 0 0 Timers 4 0 0 0 6924 0 0 Check heaps 58 0 23040 23176 6924 0 0 VL2MM 102 0 396 180 4140 0 0 ADJ NSF process 182 0 180 180 3924 0 0 CSRT RAPID TRANS 181 0 180 180 3924 0 0 STP STACK TOPOLO 179 0 180 180 3924 0 0 STP STACK TOPOLO 60 0 198624172 198624172 3924 0 0 L3MD_STAT 146 0 180 180 3924 0 0 Vegas EnvMon Pro 40 0 180 180 3924 0 0 Vegas Storm Cont 55 0 33294024 33294024 3924 0 0 Vegas Statistics 2 0 180 180 3924 0 0 Load Meter 54 0 180 180 3924 0 0 L3TM 53 0 180 180 3924 0 0 L2TM Process 163 0 0 0 3924 0 0 C3550 DHCP Snoop 48 0 0 0 3924 0 0 SCQ_PROCESS 180 0 180 180 3924 0 0 STP FAST TRANSIT 50 0 180 180 3924 0 0 SW Frame Ager 35767824 Total вчерашний show proc mem sort парой постов выше :(( Изменено 4 июля, 2014 пользователем Bear_UA Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 5 июля, 2014 · Жалоба Таки почему-то отжирает память bgp router :((( вчера вечером 201 0 10906972 1618852 9008080 0 0 BGP Router сегодня утром 201 0 11188980 1630168 9110192 0 0 BGP Router :(((( какой-то давний забытый глюк в 3550? у меня в другом месте стоит 65-ая - на ней размер памяти доступной практически не меняется с гораздо бОльшим количество бгп пиром и нагрузки... Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
DVM-Avgoor Опубликовано 5 июля, 2014 · Жалоба Ну значит это не та железка, которая вам нужна, вот и вся логика. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 5 июля, 2014 · Жалоба Да дело в том что железка нормально справляется и с нагрузкой итп. Просто блин непонятно почему за столько релизов иосов для нее не смогли поправить глюк с утечкой памяти :( Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
DVM-Avgoor Опубликовано 5 июля, 2014 · Жалоба С чего вы взяли что она там есть? Это может быть вполне нормальное поведение. Процесс БГП резервирует память под какие-либо нужды, кол-во префиксов не стабильно, вот оно выделяет сколько считает верным. Может кто-то анонсит ошибочно иногда через чур много префиксов, вы это ловите и грусть. Лимитировать вы видимо из принципа не собираетесь, тогда какие претензии? Ну терпите. Я лично не понимаю зачем вам еще http/https да CDP на этой коробке, вы бы отключили все это, память бы сэкономили. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
sol Опубликовано 5 июля, 2014 · Жалоба Первая гипотеза подтвердилась: Память жрёт BGP. Выводы: 1. Паллиативное решение: Отключить всё ненужное, как то: no cdp run no ip http server no ip http secure-server и ограничить кол-во префиксов от аплинка до, скажем, 16к. 2. Решение радикальное: Потребление 10М на 14к префиксов - это не нормальное потребление. Это ОЧЕНЬ много. И не понятно, зачем 4+М мотребляет RIB Updater. Вот путь, куда копать далее. Может, кто-то навесил 100М коммунити на свои анонсы. Можно обрезать коммунити на входящих анонсах. И поглядеть, что будет. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 6 июля, 2014 · Жалоба Ок я попробую. Отпишусь. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 8 июля, 2014 · Жалоба Не знаю как запретить принимать коммунити (не делал), но сделал no cdp run? no ip http server и secire-server и поставил лимит префиксов в 16к - ситуация какова была такова и осталась :( Отжирает память процесс BGP Router в основном. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
dmvy Опубликовано 9 июля, 2014 · Жалоба сделать фильтр на import, где установить правило очищать community (установить пустые community). Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 9 июля, 2014 · Жалоба поделитесь примером как. гугл ничего не подсказал :( ежедневно смотрю show proc mem sort отжирает таки память BGP Router 8.07.14 176 0 11402896 2295988 8975792 0 0 BGP Router 9.07.14 176 0 11928968 2368896 9244196 0 0 BGP Router :((( как интересно циско упустили такой глюк в такой древней и стабильной железяке. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
snark Опубликовано 10 июля, 2014 · Жалоба Перебирайте IOS-ы, возможно ваша проблема в какой-то версии не проявится, как это было, например, здесь. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Bear_UA Опубликовано 10 июля, 2014 · Жалоба Перебирал уже несколько версий. Во всех аналогичная ситуация :( И чем новее ИОС - тем меньше свободной памяти при старте :( Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
snark Опубликовано 15 июля, 2014 · Жалоба чем новее ИОС Что именно, кроме зуда в 5-й точке, заставлет пользоваться супер-дупер новыми версиями? Попробуйте поставить что-то древнее как г-но мамонта и, возможно, ваша проблема исчезнет (-: Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...