[uanog] High CPU Util (by interrupt) ...

23 May 2004

      Добрый вечер.

Есть следующая 3640:

rtr1#sh ver
Cisco Internetwork Operating System Software
IOS (tm) 3600 Software (C3640-IS-M), Version 12.2(24), RELEASE SOFTWARE (fc1)
Copyright (c) 1986-2004 by cisco Systems, Inc.
Compiled Wed 28-Apr-04 12:43 by kellmill
Image text-base: 0x60008930, data-base: 0x61138000

ROM: System Bootstrap, Version 11.1(7)AX [kuong (7)AX], EARLY DEPLOYMENT RELEASE SOFTWARE (fc2)

rtr1 uptime is 25 minutes
System returned to ROM by reload at 17:37:03 EEST Sun May 23 2004
System restarted at 17:38:02 EEST Sun May 23 2004
System image file is "flash:c3640-is-mz.122-24.bin"

cisco 3640 (R4700) processor (revision 0x00) with 56320K/9216K bytes of memory.
Processor board ID 07138177
R4700 CPU at 100Mhz, Implementation 33, Rev 1.0
Bridging software.
X.25 software, Version 3.0.0.
SuperLAT software (copyright 1990 by Meridian Technology Corp).
1 Ethernet/IEEE 802.3 interface(s)
4 Serial network interface(s)
DRAM configuration is 64 bits wide with parity disabled.
125K bytes of non-volatile configuration memory.
16384K bytes of processor board System flash (Read/Write)

Наблюдает High CPU Utilization:

rtr1#sh proc cpu | inc CPU
CPU utilization for five seconds: 88%/85%; one minute: 74%; five minutes: 75%

rtr1#sh proc cpu history

   7777788888777777777777777666667777788886666677777777777777
   9999922222999992222277777666661111111118888811111444443333
100
 90
 80  ***************     *****          ****
 70  **********************************************************
 60  **********************************************************
 50  **********************************************************
 40  **********************************************************
 30  **********************************************************
 20  **********************************************************
 10  **********************************************************
    0....5....1....1....2....2....3....3....4....4....5....5....
              0    5    0    5    0    5    0    5    0    5

	    CPU% per second (last 60 seconds)

     8888788888888889888888998898
     4481945544566453778779446271
100                            *
 90    *   **  *** *#******##* *
 80  ###*****###################*
 70  ###########################*
 60  ###########################*
 50  ###########################*
 40  ###########################*
 30  ###########################*
 20  ############################
 10  ############################
    0....5....1....1....2....2....3....3....4....4....5....5....
	      0    5    0    5    0    5    0    5    0    5

	CPU% per minute (last 60 minutes)
	* = maximum CPU%   # = average CPU%

При этом:

1) сама железка траффиком не перегружена:

rtr1#sh int | inc 30 sec
  30 second input rate 290000 bits/sec, 204 packets/sec
  30 second output rate 352000 bits/sec, 154 packets/sec
  30 second input rate 267000 bits/sec, 64 packets/sec
  30 second output rate 211000 bits/sec, 125 packets/sec
  30 second input rate 44000 bits/sec, 30 packets/sec
  30 second output rate 7000 bits/sec, 14 packets/sec

  Ошибок ни на одном интерфейсе нет.

2) CEF включен (прбовал выключать - без результатно)

rtr1#sh int serial 0/0 stats
Serial0/0
          Switching path    Pkts In   Chars In   Pkts Out  Chars Out
	       Processor       3234     254518      47198    8523968
	     Route cache     452175   67382265     362493  122382383
	           Total     455409   67636783     409691  130906351
Serial0/1
	  Switching path    Pkts In   Chars In   Pkts Out  Chars Out
	       Processor        634     184866        362      48420
	     Route cache     212286  109934728     273434   52699273
	           Total     212920  110119594     273796   52747693

Serial0/2
	  Switching path    Pkts In   Chars In   Pkts Out  Chars Out
	       Processor        524      12307        599      25174
	     Route cache     103850    6341766     118174    6922793
		   Total     104374    6354073     118773    6947967

Serial0/3
	  Switching path    Pkts In   Chars In   Pkts Out  Chars Out
	       Processor        253       3542        535      32335
	     Route cache      60642   10289327      36250    2274015
		   Total      60895   10292869      36785    2306350

Ethernet2/0
	  Switching path    Pkts In   Chars In   Pkts Out  Chars Out
	       Processor       5057     413150        386      28702
	     Route cache      32604    5156281      26508    6153187
		   Total      37661    5569431      26894    6181889

3) Alignment errors не наблюдаются.

Перечитал все CISCO рекомендации на эту тему, последнее
на что рассчитавать - смена IOS-в. Она не помогла :(
12.2.24 - последний IOS на котором остановился.

Меня смущает одна вещь:

rtr1#sh controllers serial 0/0
M4T: show controller:
PAS unit 0, subunit 0, f/w version 1-45, rev ID 0x2800001, version 3
idb = 0x61EC6B5C, ds = 0x61EC8964, ssb=0x61EC8CA0
Clock mux=0x0, ucmd_ctrl=0xC, port_status=0x74
Serial config=0x8, line config=0x200
maxdgram=1608, bufpool=78Kb, 120 particles
     DCD=up  DSR=up  DTR=up  RTS=up  CTS=up
line state: up
cable type : V.35 DTE cable, received clockrate 2047212

base0 registers=0x3C000000, base1 registers=0x3C002000
mxt_ds=0x61E81E88, rx ring entries=78, tx ring entries=128
rxring=0x3818760, rxr shadow=0x61ECF294, rx_head=21
txring=0x3818A00, txr shadow=0x61ECF668, tx_head=36, tx_tail=36, tx_count=0
throttled=0, enabled=0
halted=0, last halt reason=0
Microcode fatal errors=0
rx_no_eop_err=0, rx_no_stp_err=0, rx_no_eop_stp_err=0
rx_no_buf=0, rx_soft_overrun_err=0, dump_err= 0, bogus=0, mxt_flags=0x0
tx_underrun_err=0, tx_soft_underrun_err=0, tx_limited=1(2)
tx_fullring=201105, tx_started=215445
   ^^^^^^^^^^^^ 
       Что это означает?
rx_int_count=99004, tx_int_count=473913

rtr1#sh controllers serial 0/1
M4T: show controller:
PAS unit 1, subunit 1, f/w version 1-45, rev ID 0x2800001, version 3
idb = 0x61ED2578, ds = 0x61ED4380, ssb=0x61ED46BC
Clock mux=0x0, ucmd_ctrl=0xC, port_status=0x74
Serial config=0x8, line config=0x200
maxdgram=1608, bufpool=78Kb, 120 particles
     DCD=up  DSR=up  DTR=up  RTS=up  CTS=up
line state: up
cable type : V.35 DTE cable, received clockrate 1983252

base0 registers=0x3C000000, base1 registers=0x3C002000
mxt_ds=0x6247EF1C, rx ring entries=78, tx ring entries=128
rxring=0x382AB80, rxr shadow=0x61EDACB0, rx_head=17
txring=0x382AE20, txr shadow=0x61EDB084, tx_head=13, tx_tail=13, tx_count=0
throttled=0, enabled=0
halted=0, last halt reason=0
Microcode fatal errors=0
rx_no_eop_err=0, rx_no_stp_err=0, rx_no_eop_stp_err=0
rx_no_buf=0, rx_soft_overrun_err=0, dump_err= 0, bogus=0, mxt_flags=0x0
tx_underrun_err=0, tx_soft_underrun_err=0, tx_limited=1(2)
tx_fullring=108774, tx_started=148888
   ^^^^^^^^^^^^ 
       Здесь аналогично.
rx_int_count=79222, tx_int_count=245891

Дело в том, что tx_fullring постоянно растет, но что
это означает мне непонятно, так как какое либо описание
этого параметра я не нашел.

Может быть сам NM битый? Может быть еще на какой IOS перейти?

Да, на интерфейсах сконфигурирован FR + FRTS, но в момент
наблюдаемой проблемы активен всего 1-2 FRTS.
Также пытался выполнить FR switching не через connect
(с выполнением FRTS), а через frame-relay route.
Эффект тот же самый.

Может быть кто-то сталкивался с подобной ситуацией?
Или есть мысли что еще пожно попробовать сделать?

Буду рад выслушать, бо сам уже зашел в тупик.

-- 
YY18-RIPE
-- 
YY18-RIPE
===================================================================
uanog mailing list.
To Unsubscribe: send mail to majordomo@uanog.kiev.ua
with "unsubscribe uanog" in the body of the message

[uanog] High CPU Util (by interrupt) ...

Yury Yaroshevsky