cancel
Showing results for 
Search instead for 
Did you mean: 
cancel
942
Views
5
Helpful
6
Replies

Cisco LMS 3.2.1 Causing Switch CPU Spike

nibinrodrigues
Level 1
Level 1

Hi,

We have LMS 3.2.1 cauing CPU Spike on all the LAN switches. I treid to apply the commands as per the below URL but still the issue is same.

I had attached Show version, Show stacks and Show process cpu sorted output.

-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

sh version

Cisco IOS Software, C3750 Software (C3750-IPBASE-M), Version 12.2(35)SE5, RELEASE SOFTWARE (fc1)

Copyright (c) 1986-2007 by Cisco Systems, Inc.

Compiled Thu 19-Jul-07 19:15 by nachen

Image text-base: 0x00003000, data-base: 0x01080000

ROM: Bootstrap program is C3750 boot loader

BOOTLDR: C3750 Boot Loader (C3750-HBOOT-M) Version 12.2(25r)SEC, RELEASE SOFTWARE (fc4)

ATCBmer-OPERas08 uptime is 30 weeks, 1 day, 3 hours, 20 minutes

System returned to ROM by power-on

System restarted at 08:19:08 UTC Tue Jul 2 2013

System image file is "flash:c3750-ipbase-mz.122-35.SE5/c3750-ipbase-mz.122-35.SE5.bin"

cisco WS-C3750-48TS (PowerPC405) processor (revision Q0) with 118784K/12280K bytes of memory.

Processor board ID FDO1339Y2FC

Last reset from power-on

2 Virtual Ethernet interfaces

96 FastEthernet interfaces

8 Gigabit Ethernet interfaces

The password-recovery mechanism is enabled.

512K bytes of flash-simulated non-volatile configuration memory.

Base ethernet MAC Address       : EC:30:91:4A:CF:80

Motherboard assembly number     : 73-9680-12

Power supply part number        : 341-0028-02

Motherboard serial number       : FDO133916XY

Power supply serial number      : DTN133510WF

Model revision number           : Q0

Motherboard revision number     : A0

Model number                    : WS-C3750-48TS-S

System serial number            : FDO1339Y2FC

SFP Module assembly part number : 73-7757-03

SFP Module revision Number      : A0

SFP Module serial number        : FDO13390UPX

Top Assembly Part Number        : 800-25854-04

Top Assembly Revision Number    : A0

Version ID                      : V07

CLEI Code Number                : COMD200BRA

Hardware Board Revision Number  : 0x01

Switch   Ports  Model              SW Version              SW Image           

------   -----  -----              ----------              ----------         

     1   52     WS-C3750-48TS      12.2(35)SE5             C3750-IPBASE-M     

*    2   52     WS-C3750-48TS      12.2(35)SE5             C3750-IPBASE-M     

Switch 01

---------

Switch Uptime                   : 30 weeks, 1 day, 15 minutes

Base ethernet MAC Address       : EC:30:91:4A:D0:80

Motherboard assembly number     : 73-9680-12

Power supply part number        : 341-0028-02

Motherboard serial number       : FDO133916ZJ

Power supply serial number      : DTN133510WC

Model revision number           : Q0

Motherboard revision number     : A0

Model number                    : WS-C3750-48TS-S

System serial number            : FDO1339Y2FB

SFP Module assembly part number : 73-7757-03

SFP Module revision number      : A0

SFP Module serial number        : FDO13390UPS

Top assembly part number        : 800-25854-04

Top assembly revision number    : A0

Version ID                      : V07

CLEI Code Number                : COMD200BRA

Configuration register is 0xF

-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

#sh processes cpu sorted

CPU utilization for five seconds: 7%/1%; one minute: 7%; five minutes: 7%

PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process

251        2051       209       9813  0.79%  0.32%  0.36%   6 Virtual Exec    

131    61393351 248916997        246  0.63%  0.71%  0.60%   0 HL2MCM          

123     6997778   3642657       1921  0.15%  0.03%  0.00%   0 HQM Stack Proces

191   105112370 573529786        183  0.15%  0.29%  0.30%   0 IGMPSN          

124    29851586  14567458       2049  0.15%  0.17%  0.15%   0 HRPC qos request

115     4380679 434564249         10  0.15%  0.03%  0.00%   0 Hulc LED Process

   7           0         1          0  0.00%  0.00%  0.00%   0 HRPC asic-stats 

   8           0         1          0  0.00%  0.00%  0.00%   0 Crash writer    

   9       23632    348343         67  0.00%  0.00%  0.00%   0 ARP Input       

  10           0         1          0  0.00%  0.00%  0.00%   0 AAA_SERVER_DEADT

  11           0         2          0  0.00%  0.00%  0.00%   0 AAA high-capacit

  12           0         1          0  0.00%  0.00%  0.00%   0 Policy Manager  

  13          42        11       3818  0.00%  0.00%  0.00%   0 Entity MIB API  

  14           0         1          0  0.00%  0.00%  0.00%   0 IFS Agent Manage

  15         242    304021          0  0.00%  0.00%  0.00%   0 IPC Dynamic Cach

  16           0         1          0  0.00%  0.00%  0.00%   0 IPC Zone Manager

  17        5029  18121023          0  0.00%  0.00%  0.00%   0 IPC Periodic Tim

  18           0       156          0  0.00%  0.00%  0.00%   0 IPC Managed Time

  19        5258  18121026          0  0.00%  0.00%  0.00%   0 IPC Deferred Por

  20           9       157         57  0.00%  0.00%  0.00%   0 IPC Seat Manager

  21           0         1          0  0.00%  0.00%  0.00%   0 IPC Session Serv

  22      194590   5460341         35  0.00%  0.00%  0.00%   0 HC Counter Timer

  23        6925  18121021          0  0.00%  0.00%  0.00%   0 Dynamic ARP Insp

  24           0         1          0  0.00%  0.00%  0.00%   0 ARP Snoop       

  25           0         1          0  0.00%  0.00%  0.00%   0 License IPC stat

  26           0         1          0  0.00%  0.00%  0.00%   0 License IPC serv

  27        5093  18120999          0  0.00%  0.00%  0.00%   0 GraphIt         

  28           0         2          0  0.00%  0.00%  0.00%   0 XML Proxy Client

  29           0         1          0  0.00%  0.00%  0.00%   0 Critical Bkgnd  

  30      308341  44341035          6  0.00%  0.00%  0.00%   0 Net Background  

  31           0         1          0  0.00%  0.00%  0.00%   0 IDB Work        

   3           0        19          0  0.00%  0.00%  0.00%   0 SNMP Timers     

   4    18484344   2158292       8564  0.00%  0.10%  0.06%   0 Check heaps     

   6           0         2          0  0.00%  0.00%  0.00%   0 Timers          

  35     4296336    307754      13960  0.00%  0.01%  0.00%   0 Per-minute Jobs 

  36           0        33          0  0.00%  0.00%  0.00%   0 AggMgr Process  

  37           8        26        307  0.00%  0.00%  0.00%   0 Net Input       

  38     5416553   3642636       1486  0.00%  0.00%  0.00%   0 Compute load avg

  39          25        10       2500  0.00%  0.00%  0.00%   0 Collection proce

  40       20231 362215119          0  0.00%  0.00%  0.00%   0 DownWhenLooped  

  41           0         1          0  0.00%  0.00%  0.00%   0 HRPC hdwl reques

  42           0         1          0  0.00%  0.00%  0.00%   0 HRPC emac reques

  43           0         3          0  0.00%  0.00%  0.00%   0 HRPC lpip reques

  44           0         4          0  0.00%  0.00%  0.00%   0 HLPIP Sync Proce

  45           0         3          0  0.00%  0.00%  0.00%   0 HRPC Multi-FS Sy

  46           0        15          0  0.00%  0.00%  0.00%   0 HULC multifs pro

  47           0         2          0  0.00%  0.00%  0.00%   0 MIRAGE RBCP Moni

   2        1468   3642677          0  0.00%  0.00%  0.00%   0 Load Meter      

  49           0        16          0  0.00%  0.00%  0.00%   0 Stack Mgr       

  50         678        42      16142  0.00%  0.00%  0.00%   0 Stack Mgr Notifi

  51     3155448 977563359          3  0.00%  0.01%  0.00%   0 Fifo Error Detec

  52          16        11       1454  0.00%  0.00%  0.00%   0 Adjust Regions  

  53       44680  18121002          2  0.00%  0.00%  0.00%   0 hrpc -> response

  54      443728  28994073         15  0.00%  0.00%  0.00%   0 hrpc -> request 

  55     6463350  36914367        175  0.00%  0.00%  0.00%   0 hrpc <- response

  56           0         3          0  0.00%  0.00%  0.00%   0 HRPC hcomp reque

  57           0        22          0  0.00%  0.00%  0.00%   0 HULC Device Mana

  32          48      8960          5  0.00%  0.00%  0.00%   0 Logger          

  59           0         7          0  0.00%  0.00%  0.00%   0 HRPC hdm blockin

  60          25         4       6250  0.00%  0.00%  0.00%   0 HRPC cfg_backup 

  61       90371   3642630         24  0.00%  0.00%  0.00%   0 HIPC bkgrd proce

   5        8473      3810       2223  0.00%  0.00%  0.00%   0 Pool Manager    

  34       52605  18121026          2  0.00%  0.00%  0.00%   0 Per-Second Jobs 

  33        6963  18120995          0  0.00%  0.00%  0.00%   0 TTY Background  

  65        1281      7231        177  0.00%  0.00%  0.00%   0 HRPC hpsecure re

  48           0         1          0  0.00%  0.00%  0.00%   0 HRPC hsm request

  67      238024 542998290          0  0.00%  0.00%  0.00%   0 HLFM address lea

  68        6856  18120996          0  0.00%  0.00%  0.00%   0 HLFM aging proce

  69      139202 543008514          0  0.00%  0.00%  0.00%   0 HLFM address ret

  70           0         1          0  0.00%  0.00%  0.00%   0 HRPC hrcmd reque

  71       94414    693286        136  0.00%  0.00%  0.00%   0 HRPC hulc misc r

  72           0         3          0  0.00%  0.00%  0.00%   0 HRPC system mtu 

  73        3828   6074329          0  0.00%  0.00%  0.00%   0 HVLAN main bkgrd

  74     1477074   5127744        288  0.00%  0.00%  0.00%   0 IP SNMP         

  75           0         2          0  0.00%  0.00%  0.00%   0 Vlan shutdown Pr

  76       27087    170972        158  0.00%  0.00%  0.00%   0 HRPC vlan reques

  77           0         2          0  0.00%  0.00%  0.00%   0 HULC VLAN REF Ba

  78           0         5          0  0.00%  0.00%  0.00%   0 HRPC hfbm reques

  79        4132  18120976          0  0.00%  0.00%  0.00%   0 MDFS LC Download

  80           0         5          0  0.00%  0.00%  0.00%   0 HRPC ilp request

  81           0         1          0  0.00%  0.00%  0.00%   0 HPM Msg Retry Pr

  82         470     74807          6  0.00%  0.00%  0.00%   0 TACACS+         

  83      816214 201441346          4  0.00%  0.00%  0.00%   0 hpm main process

  84         313      7676         40  0.00%  0.00%  0.00%   0 HPM Stack Sync P

  85        6174     28492        216  0.00%  0.00%  0.00%   0 HRPC pm request 

  86           0         3          0  0.00%  0.00%  0.00%   0 HPM if_num mappi

  87    11970484  37978485        315  0.00%  0.07%  0.05%   0 hpm counter proc

  88     8254076  39504043        208  0.00%  0.01%  0.02%   0 HRPC pm-counters

  89           0         1          0  0.00%  0.00%  0.00%   0 hpm vp events ca

  90           0       235          0  0.00%  0.00%  0.00%   0 HRPC hcmp reques

  91           8      8695          0  0.00%  0.00%  0.00%   0 HCEF ADJ Refresh

  92           0         1          0  0.00%  0.00%  0.00%   0 HRPC hl3mm reque

  93           0         1          0  0.00%  0.00%  0.00%   0 hl3md_rpfq_thrl_

  94       78051  12727882          6  0.00%  0.00%  0.00%   0 hl3mm           

  58           0        17          0  0.00%  0.00%  0.00%   0 HRPC hdm non blo

  96           0         4          0  0.00%  0.00%  0.00%   0 HRPC acl request

  97           8        55        145  0.00%  0.00%  0.00%   0 HACL Acl Manager

  98           0         1          0  0.00%  0.00%  0.00%   0 HRPC backup inte

  99           0         1          0  0.00%  0.00%  0.00%   0 HRPC cdp request

100        1622     13860        117  0.00%  0.00%  0.00%   0 HRPC dot1x reque

101        3284     12837        255  0.00%  0.00%  0.00%   0 HULC DOT1X Proce

102           0         1          0  0.00%  0.00%  0.00%   0 HRPC foxhound re

103           0         2          0  0.00%  0.00%  0.00%   0 Hulc Foxhound Pr

104           0         1          0  0.00%  0.00%  0.00%   0 HRPC sdm request

105      180683  90585811          1  0.00%  0.00%  0.00%   0 Hulc Storm Contr

106           0         2          0  0.00%  0.00%  0.00%   0 HSTP Sync Proces

107         285     10024         28  0.00%  0.00%  0.00%   0 HRPC stp_cli req

108          17       100        170  0.00%  0.00%  0.00%   0 HRPC stp_state_s

109           0         2          0  0.00%  0.00%  0.00%   0 S/W Bridge Proce

110           0        22          0  0.00%  0.00%  0.00%   0 HRPC hudld reque

111           0         1          0  0.00%  0.00%  0.00%   0 HRPC vqpc reques

112           0         1          0  0.00%  0.00%  0.00%   0 HRPC iec_load_ba

113           0        14          0  0.00%  0.00%  0.00%   0 HRPC l2pt qnq rp

114           0         3          0  0.00%  0.00%  0.00%   0 HRPC hled reques

   1         795     10877         73  0.00%  0.00%  0.00%   0 Chunk Manager   

116       61910  13347463          4  0.00%  0.00%  0.00%   0 HL3U bkgrd proce

117      572759   7248461         79  0.00%  0.00%  0.00%   0 HRPC hl3u reques

118        1586   4165623          0  0.00%  0.00%  0.00%   0 HL3U PBR bkgrd p

119         186    152011          1  0.00%  0.00%  0.00%   0 HL3U PBR n-h res

120           0         1          0  0.00%  0.00%  0.00%   0 HRPC dtp request

121           0         1          0  0.00%  0.00%  0.00%   0 HRPC show_forwar

122         175        60       2916  0.00%  0.00%  0.00%   0 HRPC snmp reques

  62           0         1          0  0.00%  0.00%  0.00%   0 IPC RTTYC Messag

  63           0         1          0  0.00%  0.00%  0.00%   0 RTTYC Flush     

  64        1050      6840        153  0.00%  0.00%  0.00%   0 Hulc Port-Securi

126           0         1          0  0.00%  0.00%  0.00%   0 HRPC obfl reques

  66       22215    141914        156  0.00%  0.00%  0.00%   0 HRPC hlfm reques

128           0         9          0  0.00%  0.00%  0.00%   0 Hulc Reload Mana

129           8        19        421  0.00%  0.00%  0.00%   0 HRPC hrcli-event

130       50722     21263       2385  0.00%  0.00%  0.00%   0 HRPC rfs request

  95           0         1          0  0.00%  0.00%  0.00%   0 HACL Queue Proce

132           8         8       1000  0.00%  0.00%  0.00%   0 HL2MCM          

133           0         2          0  0.00%  0.00%  0.00%   0 EAPoUDP Process 

134           0         3          0  0.00%  0.00%  0.00%   0 CEF switching ba

135       53206  18120990          2  0.00%  0.00%  0.00%   0 PI MATM Aging Pr

136         154      7422         20  0.00%  0.00%  0.00%   0 Switch Backup In

137         313    304021          1  0.00%  0.00%  0.00%   0 MMN bkgrd proces

138           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Mgr Proces

139           0         1          0  0.00%  0.00%  0.00%   0 MAB Framework   

140         567      3467        163  0.00%  0.00%  0.00%   0 802.1x switch   

141           0         1          0  0.00%  0.00%  0.00%   0 802.1x Webauth F

142           0         1          0  0.00%  0.00%  0.00%   0 802.1x Critical 

143       81511   1214105         67  0.00%  0.00%  0.00%   0 DTP Protocol    

144           0         1          0  0.00%  0.00%  0.00%   0 EAP Framework   

145           0         1          0  0.00%  0.00%  0.00%   0 HRPC dai request

146           0         1          0  0.00%  0.00%  0.00%   0 HULC DAI Process

147           0         5          0  0.00%  0.00%  0.00%   0 HRPC dhcp snoopi

148           0         5          0  0.00%  0.00%  0.00%   0 HULC DHCP Snoopi

149           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip source g

150           0         1          0  0.00%  0.00%  0.00%   0 HULC IP Source g

151        7033  18242384          0  0.00%  0.00%  0.00%   0 UDLD            

152         125    608080          0  0.00%  0.00%  0.00%   0 Port-Security   

153           0         3          0  0.00%  0.00%  0.00%   0 OBFL Cfg Dispatc

154           0         2          0  0.00%  0.00%  0.00%   0 Switch IP Host T

155           0         1          0  0.00%  0.00%  0.00%   0 Link State Group

156         367   1823271          0  0.00%  0.00%  0.00%   0 Ethchnl         

157         303      2174        139  0.00%  0.00%  0.00%   0 VMATM Callback  

158       23146 181145818          0  0.00%  0.00%  0.00%   0 MDFS MFIB Proces

159           0         1          0  0.00%  0.00%  0.00%   0 IPv6 RIB Redistr

160           9         2       4500  0.00%  0.00%  0.00%   0 AAA Server      

161           0         1          0  0.00%  0.00%  0.00%   0 AAA ACCT Proc   

162           0         1          0  0.00%  0.00%  0.00%   0 ACCT Periodic Pr

163     8780828  15301673        573  0.00%  0.01%  0.00%   0 CDP Protocol    

164       13401      6681       2005  0.00%  0.00%  0.00%   0 SNMP Traps      

165           0         1          0  0.00%  0.00%  0.00%   0 image mgr       

166           0         2          0  0.00%  0.00%  0.00%   0 AAA Dictionary R

167         139    152026          0  0.00%  0.00%  0.00%   0 DHCP Snooping   

168     4637569  47657943         97  0.00%  0.07%  0.04%   0 IP Input        

169           0         1          0  0.00%  0.00%  0.00%   0 ICMP event handl

170    10066119  69946340        143  0.00%  0.04%  0.05%   0 Spanning Tree   

171          24    304027          0  0.00%  0.00%  0.00%   0 Spanning Tree St

172       53121    364742        145  0.00%  0.00%  0.00%   0 CEF background p

173           0         1          0  0.00%  0.00%  0.00%   0 IP IRDP         

174          16         2       8000  0.00%  0.00%  0.00%   0 CEF RF HULC Conv

175         162      3972         40  0.00%  0.00%  0.00%   0 XDR mcast       

176       21665     37317        580  0.00%  0.00%  0.00%   0 AAA Accounting  

178           0         4          0  0.00%  0.00%  0.00%   0 MDFS LC Process 

179          41    228026          0  0.00%  0.00%  0.00%   0 Cluster L2      

180         487   1823270          0  0.00%  0.00%  0.00%   0 Cluster RARP    

181        1274   2279503          0  0.00%  0.00%  0.00%   0 Cluster Base    

182        4979    582218          8  0.00%  0.00%  0.00%   0 TCP Timer       

183        2534      4377        578  0.00%  0.00%  0.00%   0 TCP Protocols   

184           0         1          0  0.00%  0.00%  0.00%   0 Socket Timers   

185         370     61248          6  0.00%  0.00%  0.00%   0 HTTP CORE       

186           0         1          0  0.00%  0.00%  0.00%   0 RARP Input      

187         191       357        535  0.00%  0.00%  0.00%   1 Virtual Exec    

188         312       796        391  0.00%  0.00%  0.00%   2 Virtual Exec    

189        5986      3688       1623  0.00%  0.00%  0.00%   0 IGMPSN L2MCM    

190     1988996  22053535         90  0.00%  0.02%  0.00%   0 IGMPSN MRD      

125           0         1          0  0.00%  0.00%  0.00%   0 HRPC span reques

192           0         1          0  0.00%  0.00%  0.00%   0 IGMPQR          

193           0         1          0  0.00%  0.00%  0.00%   0 CEF MQC IPC Back

194           0         2          0  0.00%  0.00%  0.00%   0 L2TRACE SERVER  

195        2867      3686        777  0.00%  0.00%  0.00%   0 MLDSN L2MCM     

196           0         1          0  0.00%  0.00%  0.00%   0 MRD             

197           0         1          0  0.00%  0.00%  0.00%   0 MLD_SNOOP       

198      149666  28335503          5  0.00%  0.00%  0.00%   0 CEF: IPv4 proces

199        2752    303845          9  0.00%  0.00%  0.00%   0 IP RIB Update   

200           0         1          0  0.00%  0.00%  0.00%   0 Auth-proxy AAA B

201           9     60808          0  0.00%  0.00%  0.00%   0 IP Admin SM Proc

202      189407    791688        239  0.00%  0.00%  0.00%   0 DHCPD Receive   

203          25    152012          0  0.00%  0.00%  0.00%   0 DHCPD Timer     

204           0         2          0  0.00%  0.00%  0.00%   0 AAA Cached Serve

205           0         2          0  0.00%  0.00%  0.00%   0 LOCAL AAA       

206           9         2       4500  0.00%  0.00%  0.00%   0 TPLUS           

207           0         1          0  0.00%  0.00%  0.00%   0 HRPC x_setup req

208           9        39        230  0.00%  0.00%  0.00%   0 VTP Trap Process

209           0         2          0  0.00%  0.00%  0.00%   0 VTPMIB EDIT BUFF

210           0         2          0  0.00%  0.00%  0.00%   0 DHCP Security He

211           0         1          0  0.00%  0.00%  0.00%   0 HCD Process     

212           0         1          0  0.00%  0.00%  0.00%   0 HRPC cable diagn

213           0         2          0  0.00%  0.00%  0.00%   0 DiagCard2/-1    

214      134713 218636042          0  0.00%  0.00%  0.00%   0 PM Callback     

215           0        20          0  0.00%  0.00%  0.00%   0 VLAN Manager    

216       97175   5167135         18  0.00%  0.00%  0.00%   0 DHCPD Database  

217         133   1458592          0  0.00%  0.00%  0.00%   0 dhcp snooping sw

218           0         1          0  0.00%  0.00%  0.00%   0 Licensing MIB pr

219           0         3          0  0.00%  0.00%  0.00%   0 RADIUS TEST CMD 

220           0         2          0  0.00%  0.00%  0.00%   0 AAA SEND STOP EV

221        9523      2686       3545  0.00%  0.00%  0.00%   0 Syslog Traps    

222           0         1          0  0.00%  0.00%  0.00%   0 SAA MPLSLM Proce

223          93      2217         41  0.00%  0.00%  0.00%   0 ADJ background  

224           0         2          0  0.00%  0.00%  0.00%   0 STP FAST TRANSIT

225           9       135         66  0.00%  0.00%  0.00%   0 CSRT RAPID TRANS

226       20638    168875        122  0.00%  0.00%  0.00%   0 HRPC hl2mcm igmp

227           0        38          0  0.00%  0.00%  0.00%   0 HRPC hl2mcm mlds

228         446       765        583  0.00%  0.00%  0.00%   3 Virtual Exec    

229        6840      1901       3598  0.00%  0.00%  0.00%   0 SpanTree Helper 

230           0         1          0  0.00%  0.00%  0.00%   0 DiagCard1/-1    

231           0         1          0  0.00%  0.00%  0.00%   0 LICENSE AGENT   

232          94       420        223  0.00%  0.00%  0.00%   0 SpanTree Flush  

233       22092    540058         40  0.00%  0.00%  0.00%   0 IP Background   

234      833188   2574651        323  0.00%  0.00%  0.00%   0 PDU DISPATCHER  

235    22681449   5799556       3910  0.00%  0.00%  0.00%   0 SNMP ENGINE     

236           0         1          0  0.00%  0.00%  0.00%   0 SNMP ConfCopyPro

237       16028  18381176          0  0.00%  0.00%  0.00%   0 NTP             

238          33       139        237  0.00%  0.00%  0.00%   0 hulc cfg mgr mas

239       98617       500     197234  0.00%  0.00%  0.00%   0 hulc running con

240           0         1          0  0.00%  0.00%  0.00%   0 RTTYS Process   

241         335    303847          1  0.00%  0.00%  0.00%   0 802.1x MDA Aging

242         346       513        674  0.00%  0.00%  0.00%   4 Virtual Exec    

243         628       999        628  0.00%  0.00%  0.00%   5 Virtual Exec    

244         321    101289          3  0.00%  0.00%  0.00%   0 HCMP sync proces

245           0         2          0  0.00%  0.00%  0.00%   0 hulc_tb_process 

246     1629625  18112558         89  0.00%  0.00%  0.00%   0 IPC LC Message H

247           0         2          0  0.00%  0.00%  0.00%   0 XDR RP Ping Back

248         181    151926          1  0.00%  0.00%  0.00%   0 XDR RP backgroun

249           0         1          0  0.00%  0.00%  0.00%   0 XDR RP Test Back

250           9         5       1800  0.00%  0.00%  0.00%   0 CEF RP IPC Backg

127           0        14          0  0.00%  0.00%  0.00%   0 HRPC system post

252         441       613        719  0.00%  0.00%  0.00%   7 Virtual Exec    

254         626      1254        499  0.00%  0.00%  0.00%   9 Virtual Exec   

----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

sh stacks

Minimum process stacks:

Free/Size   Name

5112/6000   hulc_flash init

5740/6000   CDP BLOB

8572/9000   IP Background

5664/6000   vqpc_shim_create_addr_tbl

5648/6000   SPAN Subsystem

5396/6000   LICENSE AGENT DEFAULT

5684/6000   stp_change_tree_type

8732/9000   cdp init process

8576/12000  Init

5644/6000   IPC Zone Manager

5720/6000   RTTY Slave Registration Process

4792/6000   IPC Split Init

5244/6000   HUDLD fiber table process

5496/6000   bulk config process

5496/6000   RADIUS INITCONFIG

2600/3000   Rom Random Update Process

5228/6000   MDFS LC IPC Init Process

5420/6000   HVLAN Mapped Vlan Id Update Process

8284/12000  cfg mgr new master process

4908/6000   hpm bulk_vlan_state process

5676/6000   HDF Stack-Mac

5724/6000   HCMP redirect process

5648/6000   HCMP new mac process

5352/6000   XDR LC PRIO Background

9652/12000  XDR LC Background

5388/6000   CEF LC Stats

5396/6000   CEF LC IPC Background

5368/6000   HL3U ARP Refresh Proc

5128/6000   RTTY Client Registration

5152/6000   IPC LC Port Opener

35132/36000  TCP Command

7644/12000  Virtual Exec

19784/24000  hulc_techsupport_process

Interrupt level stacks:

Level    Called Unused/Size  Name

  4  1981299888   7808/9000  NETWORK INTERFACE CHIP

  5           0   9000/9000  SUPERVISOR EXCEPTIONS

  6        6937   8932/9000  NS16550 VECTOR

Please help me in solving the issue.

Thanks

Nibin Rodrigues

6 Replies 6

Vinod Arya
Cisco Employee
Cisco Employee

Outputs are not helpful. As the CPU seems to have dropped to 7% when you collected the output.

#sh processes cpu sorted

CPU utilization for five seconds: 7%/1%; one minute: 7%; five minutes: 7%

PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process

You need to share the output when the CPU spikes, else necessary info will be lost.

You can configure your one of the device with issue with an EEM script to have this collected when the CPU spikes more than 80%.

Please check this script and share the output:

event manager applet cpu_stats

event snmp oid 1.3.6.1.4.1.9.9.109.1.1.1.1.3.1 get-type exact entry-op gt entry-val 80 exit-op lt exit-val 70 poll-interval 5

action 1.1 syslog msg "------HIGH CPU DETECTED----, CPU: $_snmp_oid_val %"

action 1.2 cli command "enable"

action 1.3 cli command "show clock | append disk0:cpu_stats"

action 1.4 cli command "show stack 235 | append disk0:cpu_stats"

action 1.5 cli command "show proc cpu sort | append disk0:cpu_stats"

If the device is configured for AAA, config it for privileges to be able to collect ouput with:

event manager session cli username

** Please edit disk0: as per the file system on your device, like flash: etc.

-Thanks

Vinod

**Rating Encourages contributors, and its really free. **

-Thanks Vinod **Rating Encourages contributors, and its really free. **

Hi,

 

Finally I got output from EEM. Still facing issue with CPU spike (reaching above 90% every 3 hours)  Kindly let me know which process/poll from LMS causing spike.

 

more cpu_stats   
08:34:50.900 UTC Sun Jul 13 2014

Process 235:  IP ACL XDR LC Background
  Stack segment 0x5A69684 - 0x5A6ADF4
  FP: 0x5A6ADC0, RA: 0x294A248
  FP: 0x5A6ADE0, RA: 0x1013B38
  FP: 0x5A6ADE8, RA: 0x1BCF948
  FP: 0x0, RA: 0x1BC63C0

CPU utilization for five seconds: 99%/1%; one minute: 32%; five minutes: 18%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 234       19360    235134         82 85.62%  8.55%  2.94%   1 Virtual Exec     
  71   1093114471690141903         64  2.39%  0.74%  0.46%   0 Fifo Error Detec 
 110   291896714  66860698       4365  1.27%  0.87%  0.85%   0 hpm counter proc 
 333         144       134       1074  0.95%  0.07%  0.01%   2 Virtual Exec     
  93   209133659   3226190      64823  0.47%  0.56%  0.58%   0 HULC Tcam Memory 
 158   124730186   6452441      19330  0.47%  0.37%  0.35%   0 HQM Stack Proces 
 315          26        24       1083  0.31%  0.02%  0.00%   0 EEM Callback Thr 
 149    70316360 921938032         76  0.31%  0.17%  0.16%   0 Hulc LED Process 
   3     1984170  49712892         39  0.15%  0.03%  0.00%   0 CEF: IPv4 proces 
  75    30660149 133990691        228  0.15%  0.08%  0.06%   0 hrpc <- response 
 168    81754951 291989576        279  0.15%  0.16%  0.19%   0 HL2MCM           
 159   106398380  51587099       2062  0.15%  0.38%  0.36%   0 HRPC qos request 
 135     3265881 160225069         20  0.15%  0.01%  0.00%   0 Hulc Storm Contr 
 170     2324295  32252873         72  0.15%  0.03%  0.00%   0 PI MATM Aging Pr 
 106    13216454 370564211         35  0.15%  0.04%  0.01%   0 hpm main process 
  31    21256458   3937866       5397  0.15%  0.07%  0.05%   0 Net Background   
 224    42191188 212546120        198  0.15%  0.09%  0.09%   0 Spanning Tree    
  87    12713230 948699751         13  0.15%  0.04%  0.01%   0 HLFM address lea 
  35     3270263  32320941        101  0.15%  0.01%  0.00%   0 Per-Second Jobs  
  19           0        40          0  0.00%  0.00%  0.00%   0 IPC Managed Time 
  18      110764  32253004          3  0.00%  0.00%  0.00%   0 IPC Periodic Tim 
  17           0        21          0  0.00%  0.00%  0.00%   0 ADJ background   
  16       16573    541197         30  0.00%  0.00%  0.00%   0 IPC Dynamic Cach 
  20       91946  32253007          2  0.00%  0.00%  0.00%   0 IPC Deferred Por 
  21      476008   8653999         55  0.00%  0.00%  0.00%   0 IPC Seat Manager 
  26           0         1          0  0.00%  0.00%  0.00%   0 License IPC stat 
  15           0         1          0  0.00%  0.00%  0.00%   0 IFS Agent Manage 
  28       91032  32252876          2  0.00%  0.00%  0.00%   0 GraphIt          
  22           0         1          0  0.00%  0.00%  0.00%   0 IPC Session Serv 
  23          75         4      18750  0.00%  0.00%  0.00%   0 PrstVbl          
  14          93        30       3100  0.00%  0.00%  0.00%   0 Entity MIB API   
  32           0         1          0  0.00%  0.00%  0.00%   0 IDB Work         
  33        3419     19354        176  0.00%  0.00%  0.00%   0 Logger           
  24      117864  32253002          3  0.00%  0.01%  0.00%   0 Dynamic ARP Insp 
  25           0         1          0  0.00%  0.00%  0.00%   0 ARP Snoop        
  36    14375584    553673      25964  0.00%  0.04%  0.00%   0 Per-minute Jobs  
  27           0         1          0  0.00%  0.00%  0.00%   0 License IPC serv 
  38         239     10986         21  0.00%  0.00%  0.00%   0 IF-MGR event pro 
  39           0         5          0  0.00%  0.00%  0.00%   0 IP Admission HA  
  40    25033048   6677903       3748  0.00%  0.08%  0.08%   0 Compute load avg 
  41           0         1          0  0.00%  0.00%  0.00%   0 AggMgr Process   
  29           0         2          0  0.00%  0.00%  0.00%   0 XML Proxy Client 
  43     2892158   6958636        415  0.00%  0.00%  0.00%   0 HC Counter Timer 
  44           0         1          0  0.00%  0.00%  0.00%   0 SFF8472          
  13           0         1          0  0.00%  0.00%  0.00%   0 Policy Manager   
  46           0         1          0  0.00%  0.00%  0.00%   0 HULC PBR Tcam Me 
  12           0         2          0  0.00%  0.00%  0.00%   0 AAA high-capacit 
  30           0         1          0  0.00%  0.00%  0.00%   0 Critical Bkgnd   
  34      103029  32252868          3  0.00%  0.00%  0.00%   0 TTY Background   
  50           0         1          0  0.00%  0.00%  0.00%   0 HRPC actual powe 
  51           0         3          0  0.00%  0.00%  0.00%   0 HRPC lpip reques 
  52           0         2          0  0.00%  0.00%  0.00%   0 HLPIP Sync Proce 
  53           0         3          0  0.00%  0.00%  0.00%   0 HRPC Multi-FS Sy 
  54           8        18        444  0.00%  0.00%  0.00%   0 HULC multifs pro 
  55           0         1          0  0.00%  0.00%  0.00%   0 HRPC hnetwpol re 
  56           0         1          0  0.00%  0.00%  0.00%   0 Hulc Warm Upgrad 
  57           0         1          0  0.00%  0.00%  0.00%   0 HRPC ipadm reque 
  37          33        12       2750  0.00%  0.00%  0.00%   0 IF-MGR control p 
  59           0         1          0  0.00%  0.00%  0.00%   0 HULC QM Tcam Mem 
  60      190380   1224938        155  0.00%  0.00%  0.00%   0 EEM ED ND        
  61           0       123          0  0.00%  0.00%  0.00%   0 EEM ED Identity  
  62           0       245          0  0.00%  0.00%  0.00%   0 EEM ED MAT       
  63      111903   6452385         17  0.00%  0.00%  0.00%   0 Hulc LED Alchemy 
  42          35      5315          6  0.00%  0.00%  0.00%   0 Transport Port A 
  65    52048843 720046943         72  0.00%  0.16%  0.16%   0 RedEarth Tx Mana 
  66     53937781261032382          4  0.00%  0.01%  0.00%   0 RedEarth Rx Mana 
  67        2311    216575         10  0.00%  0.00%  0.00%   0 HULC Thermal Pro 
  68           0         1          0  0.00%  0.00%  0.00%   0 HRPC hsm request 
  69           0        56          0  0.00%  0.00%  0.00%   0 Stack Mgr        
  70        2510       248      10120  0.00%  0.00%  0.00%   0 Stack Mgr Notifi 
  10           0         1          0  0.00%  0.00%  0.00%   0 CEF MIB API      
  72           0         3          0  0.00%  0.00%  0.00%   0 Adjust Regions   
  45      694015 640293487          1  0.00%  0.00%  0.00%   0 DownWhenLooped   
  74     1646076  69449052         23  0.00%  0.00%  0.00%   0 hrpc -> request  
   9       67025    599011        111  0.00%  0.00%  0.00%   0 ARP Input        
  76           0         7          0  0.00%  0.00%  0.00%   0 HRPC hcomp reque 
  77           0        54          0  0.00%  0.00%  0.00%   0 HULC Device Mana 
  78       10438     30037        347  0.00%  0.00%  0.00%   0 HRPC hdm non blo 
   8           0         1          0  0.00%  0.00%  0.00%   0 Crash writer     
  47           0         1          0  0.00%  0.00%  0.00%   0 HULC ACL Tcam Me 
  81      124554   6452387         19  0.00%  0.00%  0.00%   0 HIPC bkgrd proce 
  82           0         1          0  0.00%  0.00%  0.00%   0 IPC RTTYC Messag 
  11           0         1          0  0.00%  0.00%  0.00%   0 AAA_SERVER_DEADT 
   6           0         2          0  0.00%  0.00%  0.00%   0 Timers           
  48           0         1          0  0.00%  0.00%  0.00%   0 HRPC hdwl reques 
  49           0         1          0  0.00%  0.00%  0.00%   0 HRPC EnergyWise  
  58           0         2          0  0.00%  0.00%  0.00%   0 SM RBCP Monitor  
  88      133387  32252876          4  0.00%  0.00%  0.00%   0 HLFM aging proce 
  89     3109394 948830216          3  0.00%  0.00%  0.00%   0 HLFM address ret 
  90           0         1          0  0.00%  0.00%  0.00%   0 HRPC hrcmd reque 
  91           0         1          0  0.00%  0.00%  0.00%   0 HRPC emac reques 
  92      267066    852731        313  0.00%  0.00%  0.00%   0 HRPC hulc misc r 
   5       29303    892572         32  0.00%  0.00%  0.00%   0 Pool Manager     
  94       71237  10798283          6  0.00%  0.00%  0.00%   0 HVLAN main bkgrd 
  95      249139    557119        447  0.00%  0.00%  0.00%   0 IP Background    
  96           0         2          0  0.00%  0.00%  0.00%   0 Vlan shutdown Pr 
  97       34932    206235        169  0.00%  0.00%  0.00%   0 HRPC vlan reques 
  98           0         1          0  0.00%  0.00%  0.00%   0 HULC VLAN REF Ba 
  99       30454    541194         56  0.00%  0.00%  0.00%   0 hulc_xps_process 
 100           8         9        888  0.00%  0.00%  0.00%   0 HRPC hfbm reques 
 101           0         1          0  0.00%  0.00%  0.00%   0 IPC Zone Manager 
 102           0        13          0  0.00%  0.00%  0.00%   0 HRPC ilp request 
 103           0         1          0  0.00%  0.00%  0.00%   0 HULC PM Vector P 
 104           0         1          0  0.00%  0.00%  0.00%   0 HPM Msg Retry Pr 
 105          53      1767         29  0.00%  0.00%  0.00%   0 TACACS+          
  64           0         1          0  0.00%  0.00%  0.00%   0 HRPC asic-stats  
 107         425      3060        138  0.00%  0.00%  0.00%   0 HPM Stack Sync P 
 108       20145     75351        267  0.00%  0.00%  0.00%   0 HRPC pm request  
 109           0         5          0  0.00%  0.00%  0.00%   0 HPM if_num mappi 
   4   313387584  14473401      21652  0.00%  0.53%  0.81%   0 Check heaps      
 111    46264013 207669797        222  0.00%  0.10%  0.12%   0 HRPC pm-counters 
   2      122556   6486432         18  0.00%  0.00%  0.00%   0 Load Meter       
 113           0       237          0  0.00%  0.00%  0.00%   0 HRPC hcmp reques 
 114          32     15472          2  0.00%  0.00%  0.00%   0 HCEF ADJ Refresh 
 115           0         1          0  0.00%  0.00%  0.00%   0 HRPC hl3mm reque 
 116           0         1          0  0.00%  0.00%  0.00%   0 hl3md_rpfq_thrl_ 
  73     1542060  32252892         47  0.00%  0.01%  0.00%   0 hrpc -> response 
 118       63793  16130954          3  0.00%  0.00%  0.00%   0 hl3mm_rp         
 119           0         1          0  0.00%  0.00%  0.00%   0 HACL Queue Proce 
 120           0         4          0  0.00%  0.00%  0.00%   0 HRPC acl request 
 121           0        43          0  0.00%  0.00%  0.00%   0 HACL Acl Manager 
 122           0         1          0  0.00%  0.00%  0.00%   0 HRPC backup inte 
 123           0         1          0  0.00%  0.00%  0.00%   0 HRPC cdp request 
 124           0         3          0  0.00%  0.00%  0.00%   0 HRPC lldp reques 
 125           0         5          0  0.00%  0.00%  0.00%   0 HULC CISP Proces 
 126        4577     39096        117  0.00%  0.00%  0.00%   0 HRPC dot1x reque 
 127           0         1          0  0.00%  0.00%  0.00%   0 Dot1X Msg Retry  
 128        3417     22012        155  0.00%  0.00%  0.00%   0 HULC DOT1X Proce 
 129           0         1          0  0.00%  0.00%  0.00%   0 HRPC foxhound re 
 130           0         2          0  0.00%  0.00%  0.00%   0 Hulc Foxhound Pr 
 131           0         7          0  0.00%  0.00%  0.00%   0 HRPC system mtu  
 132           0         1          0  0.00%  0.00%  0.00%   0 SMI MSG Retry Pr 
 133           0         4          0  0.00%  0.00%  0.00%   0 HRPC Smart Insta 
 134           0         1          0  0.00%  0.00%  0.00%   0 HRPC sdm request 
   7          27       342         78  0.00%  0.00%  0.00%   0 Net Input        
 136           0         2          0  0.00%  0.00%  0.00%   0 HSTP Sync Proces 
 137         485      4964         97  0.00%  0.00%  0.00%   0 HRPC stp_cli req 
 138         626      4086        153  0.00%  0.00%  0.00%   0 HRPC stp_state_s 
 139           0         2          0  0.00%  0.00%  0.00%   0 S/W Bridge Proce 
 140           0        95          0  0.00%  0.00%  0.00%   0 HRPC hudld reque 
 141           0         1          0  0.00%  0.00%  0.00%   0 HRPC vqpc reques 
 142           0         1          0  0.00%  0.00%  0.00%   0 BCM cable diags  
 143           0         1          0  0.00%  0.00%  0.00%   0 HRPC iec_load_ba 
 144           9        36        250  0.00%  0.00%  0.00%   0 HRPC l2pt qnq rp 
 145           0         1          0  0.00%  0.00%  0.00%   0 HRPC aim request 
 146           0         2          0  0.00%  0.00%  0.00%   0 MACsec Process   
 147           0         1          0  0.00%  0.00%  0.00%   0 HRPC macsec requ 
 148           8        11        727  0.00%  0.00%  0.00%   0 HRPC hled reques 
   1      101398   1612550         62  0.00%  0.00%  0.00%   0 Chunk Manager    
 150      877240  23650115         37  0.00%  0.00%  0.00%   0 HL3U bkgrd proce 
 151     3373734  38687769         87  0.00%  0.00%  0.00%   0 HRPC hl3u reques 
 152       25962   7416600          3  0.00%  0.00%  0.00%   0 HL3U PBR bkgrd p 
 153        1180    270720          4  0.00%  0.00%  0.00%   0 HL3U PBR n-h res 
 154           0         1          0  0.00%  0.00%  0.00%   0 HRPC dtp request 
 155           0         1          0  0.00%  0.00%  0.00%   0 HRPC show_forwar 
 156          34       127        267  0.00%  0.00%  0.00%   0 HRPC snmp reques 
  79           0        15          0  0.00%  0.00%  0.00%   0 HRPC hdm blockin 
  80          16         6       2666  0.00%  0.00%  0.00%   0 HRPC cfg_backup  
  83           0         1          0  0.00%  0.00%  0.00%   0 RTTYC Flush      
 160           0         1          0  0.00%  0.00%  0.00%   0 HRPC span reques 
 161           0         1          0  0.00%  0.00%  0.00%   0 HRPC obfl reques 
 162          17        63        269  0.00%  0.00%  0.00%   0 HRPC system post 
 163          25        25       1000  0.00%  0.00%  0.00%   0 Hulc Reload Mana 
 164           8        80        100  0.00%  0.00%  0.00%   0 HRPC hrcli-event 
 165       26905     21811       1233  0.00%  0.00%  0.00%   0 HRPC rfs request 
  84         478      2192        218  0.00%  0.00%  0.00%   0 Hulc Port-Securi 
 167       50860  10798279          4  0.00%  0.00%  0.00%   0 Power RPS Proces 
  85        2003     20399         98  0.00%  0.00%  0.00%   0 HRPC hpsecure re 
 169          24        18       1333  0.00%  0.00%  0.00%   0 HL2MCM           
  86      157094    696496        225  0.00%  0.00%  0.00%   0 HRPC hlfm reques 
 112           0         1          0  0.00%  0.00%  0.00%   0 hpm vp events ca 
 172       18952    541193         35  0.00%  0.00%  0.00%   0 MMN bkgrd proces 
 173         192      6148         31  0.00%  0.00%  0.00%   0 Auth Manager     
 174           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Mgr Proces 
 175           0         1          0  0.00%  0.00%  0.00%   0 MAB Framework    
 176           0         1          0  0.00%  0.00%  0.00%   0 AUTH POLICY Fram 
 177           0         1          0  0.00%  0.00%  0.00%   0 CMD HANDLER      
 178        1167      6162        189  0.00%  0.00%  0.00%   0 802.1x switch    
 179       25004    541195         46  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 180           0         1          0  0.00%  0.00%  0.00%   0 802.1x Webauth F 
 181      366276   2213645        165  0.00%  0.00%  0.00%   0 DTP Protocol     
 182           0         1          0  0.00%  0.00%  0.00%   0 EAP Framework    
 183           0         1          0  0.00%  0.00%  0.00%   0 EAP Test         
 184           0         1          0  0.00%  0.00%  0.00%   0 HRPC dai request 
 185           0         1          0  0.00%  0.00%  0.00%   0 HULC DAI Process 
 186           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip device t 
 187           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip source g 
 188           0         1          0  0.00%  0.00%  0.00%   0 HULC IP Source g 
 189      346181  32488545         10  0.00%  0.00%  0.00%   0 UDLD             
 190        2331   1082952          2  0.00%  0.00%  0.00%   0 Port-Security    
 191           0         2          0  0.00%  0.00%  0.00%   0 IP Host Track Pr 
 192           0         1          0  0.00%  0.00%  0.00%   0 Link State Group 
 193       97603   3226196         30  0.00%  0.00%  0.00%   0 Ethchnl          
 194        1551      1194       1298  0.00%  0.00%  0.00%   0 VMATM Callback   
 195           0         2          0  0.00%  0.00%  0.00%   0 CDP Forward Proc 
 196      595836 321015593          1  0.00%  0.00%  0.00%   0 MDFS MFIB Proces 
 197           9         2       4500  0.00%  0.00%  0.00%   0 MKA              
 198         235      2964         79  0.00%  0.00%  0.00%   0 AAA Server       
 199         158      1645         96  0.00%  0.00%  0.00%   0 AAA ACCT Proc    
 200           0         1          0  0.00%  0.00%  0.00%   0 ACCT Periodic Pr 
 201           0         1          0  0.00%  0.00%  0.00%   0 AAA System Acct  
 202           0         1          0  0.00%  0.00%  0.00%   0 Auth-proxy AAA B 
 203         394    108295          3  0.00%  0.00%  0.00%   0 IP Admin SM Proc 
 204    32395513  40403923        801  0.00%  0.08%  0.07%   0 CDP Protocol     
 205          50        70        714  0.00%  0.00%  0.00%   0 Collection proce 
 206         851      4694        181  0.00%  0.00%  0.00%   0 HRPC hl2mcm igmp 
 207           0         2          0  0.00%  0.00%  0.00%   0 AAA Dictionary R 
 208        1229    270738          4  0.00%  0.00%  0.00%   0 DHCP Snooping    
 209           0         2          0  0.00%  0.00%  0.00%   0 EAPoUDP Process  
 210           0         3          0  0.00%  0.00%  0.00%   0 CEF switching ba 
 211     9165208  82862034        110  0.00%  0.03%  0.00%   0 IP Input         
 212           0         1          0  0.00%  0.00%  0.00%   0 ICMP event handl 
 213      127478  62392808          2  0.00%  0.00%  0.00%   0 IP ARP Track     
 214           0        17          0  0.00%  0.00%  0.00%   0 ADJ resolve proc 
 215           0         3          0  0.00%  0.00%  0.00%   0 ADJ NSF process  
 216           0         1          0  0.00%  0.00%  0.00%   0 IPv6 ping proces 
 217           0         1          0  0.00%  0.00%  0.00%   0 EM Action CNS    
 218           0         5          0  0.00%  0.00%  0.00%   0 SMI Director DB  
 219           0         1          0  0.00%  0.00%  0.00%   0 SMI CDP Update H 
 220           0         1          0  0.00%  0.00%  0.00%   0 SMI Backup Proce 
 221           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC server p 
 222           0         1          0  0.00%  0.00%  0.00%   0 SMI IBC client p 
 223           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC Download 
 117      182970  21370114          8  0.00%  0.00%  0.00%   0 hl3mm            
 225         667    541449          1  0.00%  0.00%  0.00%   0 Spanning Tree St 
 226           0         2          0  0.00%  0.00%  0.00%   0 KRB5 AAA         
 227          18       109        165  0.00%  0.00%  0.00%   0 SXP CORE         
 228      162358    651676        249  0.00%  0.00%  0.00%   0 CEF background p 
 229           0         1          0  0.00%  0.00%  0.00%   0 IP IRDP          
 230          34         2      17000  0.00%  0.00%  0.00%   0 CEF RF HULC Conv 
 231        2517     17418        144  0.00%  0.00%  0.00%   0 XDR mcast        
 232           8        14        571  0.00%  0.00%  0.00%   0 OBFL Cfg Dispatc 
 157         686       115       5965  0.00%  0.00%  0.00%   0 HULC SNMP Proces 
 235      128798   3227405         39  0.00%  0.00%  0.00%   0 IP ACL XDR LC Ba 
 236           0         4          0  0.00%  0.00%  0.00%   0 MDFS LC Process  
 237         318     15620         20  0.00%  0.00%  0.00%   0 TCP Timer        
 238        1133      1351        838  0.00%  0.00%  0.00%   0 TCP Protocols    
 239      100560  33274059          3  0.00%  0.00%  0.00%   0 Socket Timers    
 240         466    108401          4  0.00%  0.00%  0.00%   0 HTTP CORE        
 241         917    406093          2  0.00%  0.00%  0.00%   0 Cluster L2       
 242      173851   3226195         53  0.00%  0.00%  0.00%   0 Cluster RARP     
 243       21824   4062016          5  0.00%  0.00%  0.00%   0 Cluster Base     
 244           0         2          0  0.00%  0.00%  0.00%   0 CEF LC IPC Backg 
 245      168805  39165013          4  0.00%  0.00%  0.00%   0 CEF LC Stats     
 246           0         1          0  0.00%  0.00%  0.00%   0 RARP Input       
 247           0         1          0  0.00%  0.00%  0.00%   0 Critical Auth    
 248           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 249           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 250           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 251           0         4          0  0.00%  0.00%  0.00%   0 HRPC dhcp snoopi 
 252           0         7          0  0.00%  0.00%  0.00%   0 HULC DHCP Snoopi 
 253           0         1          0  0.00%  0.00%  0.00%   0 HRPC stack power 
 254         728      1440        505  0.00%  0.00%  0.00%   0 IGMPSN L2MCM     
 255     6765968  58162831        116  0.00%  0.00%  0.00%   0 IGMPSN MRD       
 256    53600923 247971190        216  0.00%  0.16%  0.16%   0 IGMPSN           
 257           0         1          0  0.00%  0.00%  0.00%   0 IGMPQR           
 258           0         3          0  0.00%  0.00%  0.00%   0 L2TRACE SERVER   
 259         669      1435        466  0.00%  0.00%  0.00%   0 MLDSN L2MCM      
 260           0         1          0  0.00%  0.00%  0.00%   0 MRD              
 261           0         1          0  0.00%  0.00%  0.00%   0 MLD_SNOOP        
 262     3363323  67951467         49  0.00%  0.01%  0.00%   0 DHCPD Receive    
 263           0         1          0  0.00%  0.00%  0.00%   0 HRPC x_setup req 
 264       43432    541039         80  0.00%  0.00%  0.00%   0 IP RIB Update    
 265          16       249         64  0.00%  0.00%  0.00%   0 HRPC hl2mcm mlds 
 266           0        20          0  0.00%  0.00%  0.00%   0 SNMP Timers      
 267           0         2          0  0.00%  0.00%  0.00%   0 EPM MAIN PROCESS 
 268           0        33          0  0.00%  0.00%  0.00%   0 LOCAL AAA        
 269          83       545        152  0.00%  0.00%  0.00%   0 ENABLE AAA       
 270           0         2          0  0.00%  0.00%  0.00%   0 LINE AAA         
 271       18756     11105       1688  0.00%  0.00%  0.00%   0 SNMP Traps       
 272       10522     22584        465  0.00%  0.00%  0.00%   0 TPLUS            
 273           8        12        666  0.00%  0.00%  0.00%   0 crypto engine pr 
 274          25         4       6250  0.00%  0.00%  0.00%   0 Crypto CA        
 275           0         1          0  0.00%  0.00%  0.00%   0 Crypto PKI-CRL   
 276           0         1          0  0.00%  0.00%  0.00%   0 Crypto SSL       
 277           0         1          0  0.00%  0.00%  0.00%   0 encrypt proc     
 278           0        41          0  0.00%  0.00%  0.00%   0 VTP Trap Process 
 279           0         2          0  0.00%  0.00%  0.00%   0 VTPMIB EDIT BUFF 
 280           0         2          0  0.00%  0.00%  0.00%   0 DHCP Security He 
 281           0         1          0  0.00%  0.00%  0.00%   0 HCD Process      
 282           0         5          0  0.00%  0.00%  0.00%   0 HRPC cable diagn 
 283           0         2          0  0.00%  0.00%  0.00%   0 DiagCard2/-1     
 284     2400249 556767328          4  0.00%  0.01%  0.00%   0 PM Callback      
 285          25        16       1562  0.00%  0.00%  0.00%   0 VLAN Manager     
 286           0         1          0  0.00%  0.00%  0.00%   0 DiagCard4/-1     
 287        6264   2599981          2  0.00%  0.00%  0.00%   0 dhcp snooping sw 
 288           0         1          0  0.00%  0.00%  0.00%   0 Licensing MIB pr 
 289           0         2          0  0.00%  0.00%  0.00%   0 EEM ED Routing   
 290         316     20942         15  0.00%  0.00%  0.00%   0 EEM ED Syslog    
 291           0         1          0  0.00%  0.00%  0.00%   0 image mgr        
 292         200      1583        126  0.00%  0.00%  0.00%   0 AAA SEND STOP EV 
 293       36339     10046       3617  0.00%  0.00%  0.00%   0 Syslog Traps     
 294        1494     11046        135  0.00%  0.00%  0.00%   0 Syslog           
 295        4313       825       5227  0.00%  0.00%  0.00%   0 SpanTree Helper  
 296         137       436        314  0.00%  0.00%  0.00%   0 EEM Server       
 297           0         2          0  0.00%  0.00%  0.00%   0 EEM Policy Direc 
 298        3474     18034        192  0.00%  0.00%  0.00%   0 SSH Event handle 
 299           0         2          0  0.00%  0.00%  0.00%   0 EEM ED CLI       
 300           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Counter   
 301           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Interface 
 302           0         3          0  0.00%  0.00%  0.00%   0 EEM ED IOSWD     
 303           0         3          0  0.00%  0.00%  0.00%   0 EEM ED None      
 304           0         3          0  0.00%  0.00%  0.00%   0 EEM ED OIR       
 305           0         1          0  0.00%  0.00%  0.00%   0 DiagCard3/-1     
 306           0         6          0  0.00%  0.00%  0.00%   0 EEM ED SNMP      
 307           0         3          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Obje 
 308           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Ipsla     
 309           0         2          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Noti 
 310        6982    939301          7  0.00%  0.00%  0.00%   0 EEM ED Timer     
 311           0         2          0  0.00%  0.00%  0.00%   0 STP FAST TRANSIT 
 312          82      1602         51  0.00%  0.00%  0.00%   0 CSRT RAPID TRANS 
 313           0         3          0  0.00%  0.00%  0.00%   0 RBM CORE         
 314    15452081    873675      17686  0.00%  0.00%  0.00%   0 crypto sw pk pro 
 166           0         1          0  0.00%  0.00%  0.00%   0 HRFS OIR Proc    
 316         200       638        313  0.00%  0.00%  0.00%   0 SpanTree Flush   
 317           0         1          0  0.00%  0.00%  0.00%   0 DiagCard1/-1     
 318           0         1          0  0.00%  0.00%  0.00%   0 Connection Mgr   
 319         889    279745          3  0.00%  0.00%  0.00%   0 DHCPD Timer      
 320       15192    541196         28  0.00%  0.00%  0.00%   0 DHCPD Database   
 321           0         1          0  0.00%  0.00%  0.00%   0 LICENSE AGENT    
 322       14624   2164634          6  0.00%  0.00%  0.00%   0 MDFS LC Download 
 323     4050002  15005407        269  0.00%  0.00%  0.00%   0 IP SNMP          
 324     2368639   7407993        319  0.00%  0.00%  0.00%   0 PDU DISPATCHER   
 325    71933335  29059939       2475  0.00%  0.00%  0.00%   0 SNMP ENGINE      
 326           0         2          0  0.00%  0.00%  0.00%   0 IP SNMPV6        
 327           0         1          0  0.00%  0.00%  0.00%   0 SNMP ConfCopyPro 
 328      142064  32753263          4  0.00%  0.00%  0.00%   0 NTP              
 329     1714687 327438225          5  0.00%  0.00%  0.00%   0 MDFS RP process  
 330         149       135       1103  0.00%  0.00%  0.00%   0 hulc cfg mgr mas 
 331      260212      1379     188696  0.00% 12.64%  4.50%   0 hulc running con 
 332           0         1          0  0.00%  0.00%  0.00%   0 RTTYS Process    
 171           0         3          0  0.00%  0.00%  0.00%   0 Switch Backup In 
 334       19497    541016         36  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 337        4718    180433         26  0.00%  0.00%  0.00%   0 HCMP sync proces 
 338           0         2          0  0.00%  0.00%  0.00%   0 hulc_tb_process  
 339     2415904   9842050        245  0.00%  0.01%  0.00%   0 IPC LC Message H 
 340           0         4          0  0.00%  0.00%  0.00%   0 XDR RP Ping Back 
 341        4567    270896         16  0.00%  0.00%  0.00%   0 XDR RP backgroun 
 342           0         1          0  0.00%  0.00%  0.00%   0 XDR RP Test Back 
 343           0         7          0  0.00%  0.00%  0.00%   0 CEF RP IPC Backg

Please find more EEM output

 

CPU utilization for five seconds: 72%/1%; one minute: 20%; five minutes: 13%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 325    71942425  29061721       2475 53.18%  8.25%  1.83%   0 SNMP ENGINE      
 149    70334613 922183020         76  3.98%  0.79%  0.31%   0 Hulc LED Process 
  93   209189468   3227049      64824  3.02%  0.70%  0.60%   0 HULC Tcam Memory 
  71   1093435341690591985         64  2.06%  0.71%  0.41%   0 Fifo Error Detec 
 110   291975112  66878504       4365  0.95%  0.86%  0.85%   0 hpm counter proc 
 168    81777686 292066101        279  0.63%  0.25%  0.26%   0 HL2MCM           
 158   124763719   6454160      19330  0.47%  0.35%  0.36%   0 HQM Stack Proces 
 224    42202897 212601403        198  0.31%  0.08%  0.08%   0 Spanning Tree    
 159   106423401  51600833       2062  0.31%  0.24%  0.21%   0 HRPC qos request 
 106    13220026 370664106         35  0.31%  0.07%  0.01%   0 hpm main process 
 262     3364322  67969552         49  0.15%  0.01%  0.00%   0 DHCPD Receive    
  65    52065771 720246777         72  0.15%  0.19%  0.18%   0 RedEarth Tx Mana 
 211     9167389  82882822        110  0.15%  0.15%  0.04%   0 IP Input         
  31    21262514   3938892       5398  0.15%  0.07%  0.05%   0 Net Background   
  35     3271220  32329547        101  0.15%  0.02%  0.00%   0 Per-Second Jobs  
  75    30667151 134022347        228  0.15%  0.38%  0.14%   0 hrpc <- response 
  66     53952131261367847          4  0.15%  0.02%  0.00%   0 RedEarth Rx Mana 
 118       63844  16135251          3  0.15%  0.01%  0.00%   0 hl3mm_rp         
 323     4050227  15006221        269  0.15%  0.22%  0.05%   0 IP SNMP          
 189      346264  32497199         10  0.15%  0.01%  0.00%   0 UDLD             
 329     1715198 327525422          5  0.15%  0.04%  0.00%   0 MDFS RP process  
  21      476092   8656305         54  0.00%  0.00%  0.00%   0 IPC Seat Manager 
  20       91963  32261597          2  0.00%  0.00%  0.00%   0 IPC Deferred Por 
  19           0        40          0  0.00%  0.00%  0.00%   0 IPC Managed Time 
  18      110772  32261594          3  0.00%  0.00%  0.00%   0 IPC Periodic Tim 
  22           0         1          0  0.00%  0.00%  0.00%   0 IPC Session Serv 
  23          75         4      18750  0.00%  0.00%  0.00%   0 PrstVbl          
  28       91050  32261466          2  0.00%  0.00%  0.00%   0 GraphIt          
  17           0        21          0  0.00%  0.00%  0.00%   0 ADJ background   
  30           0         1          0  0.00%  0.00%  0.00%   0 Critical Bkgnd   
  16       16573    541341         30  0.00%  0.00%  0.00%   0 IPC Dynamic Cach 
  24      117890  32261592          3  0.00%  0.00%  0.00%   0 Dynamic ARP Insp 
  15           0         1          0  0.00%  0.00%  0.00%   0 IFS Agent Manage 
  34      103038  32261458          3  0.00%  0.00%  0.00%   0 TTY Background   
  25           0         1          0  0.00%  0.00%  0.00%   0 ARP Snoop        
  26           0         1          0  0.00%  0.00%  0.00%   0 License IPC stat 
  27           0         1          0  0.00%  0.00%  0.00%   0 License IPC serv 
  38         239     10986         21  0.00%  0.00%  0.00%   0 IF-MGR event pro 
  29           0         2          0  0.00%  0.00%  0.00%   0 XML Proxy Client 
  40    25039972   6679622       3748  0.00%  0.06%  0.05%   0 Compute load avg 
  41           0         1          0  0.00%  0.00%  0.00%   0 AggMgr Process   
  42          35      5316          6  0.00%  0.00%  0.00%   0 Transport Port A 
  14          93        30       3100  0.00%  0.00%  0.00%   0 Entity MIB API   
  44           0         1          0  0.00%  0.00%  0.00%   0 SFF8472          
  45      694165 640463898          1  0.00%  0.00%  0.00%   0 DownWhenLooped   
  46           0         1          0  0.00%  0.00%  0.00%   0 HULC PBR Tcam Me 
  32           0         1          0  0.00%  0.00%  0.00%   0 IDB Work         
  48           0         1          0  0.00%  0.00%  0.00%   0 HRPC hdwl reques 
  33        3419     19356        176  0.00%  0.00%  0.00%   0 Logger           
  50           0         1          0  0.00%  0.00%  0.00%   0 HRPC actual powe 
  51           0         3          0  0.00%  0.00%  0.00%   0 HRPC lpip reques 
  52           0         2          0  0.00%  0.00%  0.00%   0 HLPIP Sync Proce 
  36    14379445    553822      25964  0.00%  0.03%  0.00%   0 Per-minute Jobs  
  54           8        18        444  0.00%  0.00%  0.00%   0 HULC multifs pro 
  55           0         1          0  0.00%  0.00%  0.00%   0 HRPC hnetwpol re 
  56           0         1          0  0.00%  0.00%  0.00%   0 Hulc Warm Upgrad 
  57           0         1          0  0.00%  0.00%  0.00%   0 HRPC ipadm reque 
  58           0         2          0  0.00%  0.00%  0.00%   0 SM RBCP Monitor  
  37          33        12       2750  0.00%  0.00%  0.00%   0 IF-MGR control p 
  60      190413   1225261        155  0.00%  0.00%  0.00%   0 EEM ED ND        
  61           0       123          0  0.00%  0.00%  0.00%   0 EEM ED Identity  
  13           0         1          0  0.00%  0.00%  0.00%   0 Policy Manager   
  63      111911   6454104         17  0.00%  0.00%  0.00%   0 Hulc LED Alchemy 
  64           0         1          0  0.00%  0.00%  0.00%   0 HRPC asic-stats  
  39           0         5          0  0.00%  0.00%  0.00%   0 IP Admission HA  
  43     2892937   6960508        415  0.00%  0.01%  0.00%   0 HC Counter Timer 
  67        2311    216633         10  0.00%  0.00%  0.00%   0 HULC Thermal Pro 
  68           0         1          0  0.00%  0.00%  0.00%   0 HRPC hsm request 
  69           0        56          0  0.00%  0.00%  0.00%   0 Stack Mgr        
  70        2510       248      10120  0.00%  0.00%  0.00%   0 Stack Mgr Notifi 
  11           0         1          0  0.00%  0.00%  0.00%   0 AAA_SERVER_DEADT 
  72           0         3          0  0.00%  0.00%  0.00%   0 Adjust Regions   
  73     1542536  32261482         47  0.00%  0.00%  0.00%   0 hrpc -> response 
  74     1646436  69466039         23  0.00%  0.00%  0.00%   0 hrpc -> request  
  47           0         1          0  0.00%  0.00%  0.00%   0 HULC ACL Tcam Me 
  76           0         7          0  0.00%  0.00%  0.00%   0 HRPC hcomp reque 
  77           0        54          0  0.00%  0.00%  0.00%   0 HULC Device Mana 
  78       10447     30047        347  0.00%  0.00%  0.00%   0 HRPC hdm non blo 
  79           0        15          0  0.00%  0.00%  0.00%   0 HRPC hdm blockin 
  80          16         6       2666  0.00%  0.00%  0.00%   0 HRPC cfg_backup  
  10           0         1          0  0.00%  0.00%  0.00%   0 CEF MIB API      
  49           0         1          0  0.00%  0.00%  0.00%   0 HRPC EnergyWise  
  83           0         1          0  0.00%  0.00%  0.00%   0 RTTYC Flush      
   9       67025    599159        111  0.00%  0.00%  0.00%   0 ARP Input        
   8           0         1          0  0.00%  0.00%  0.00%   0 Crash writer     
  86      157119    696649        225  0.00%  0.00%  0.00%   0 HRPC hlfm reques 
  53           0         3          0  0.00%  0.00%  0.00%   0 HRPC Multi-FS Sy 
  88      133411  32261466          4  0.00%  0.00%  0.00%   0 HLFM aging proce 
  89     3110261 949082564          3  0.00%  0.00%  0.00%   0 HLFM address ret 
  90           0         1          0  0.00%  0.00%  0.00%   0 HRPC hrcmd reque 
  91           0         1          0  0.00%  0.00%  0.00%   0 HRPC emac reques 
  92      267066    852763        313  0.00%  0.00%  0.00%   0 HRPC hulc misc r 
   7          27       342         78  0.00%  0.00%  0.00%   0 Net Input        
  94       71237  10801159          6  0.00%  0.00%  0.00%   0 HVLAN main bkgrd 
  59           0         1          0  0.00%  0.00%  0.00%   0 HULC QM Tcam Mem 
  96           0         2          0  0.00%  0.00%  0.00%   0 Vlan shutdown Pr 
  97       34965    206313        169  0.00%  0.00%  0.00%   0 HRPC vlan reques 
  98           0         1          0  0.00%  0.00%  0.00%   0 HULC VLAN REF Ba 
  99       30462    541338         56  0.00%  0.00%  0.00%   0 hulc_xps_process 
 100           8         9        888  0.00%  0.00%  0.00%   0 HRPC hfbm reques 
 101           0         1          0  0.00%  0.00%  0.00%   0 IPC Zone Manager 
 102           0        13          0  0.00%  0.00%  0.00%   0 HRPC ilp request 
 103           0         1          0  0.00%  0.00%  0.00%   0 HULC PM Vector P 
 104           0         1          0  0.00%  0.00%  0.00%   0 HPM Msg Retry Pr 
 105          53      1767         29  0.00%  0.00%  0.00%   0 TACACS+          
  62           0       245          0  0.00%  0.00%  0.00%   0 EEM ED MAT       
 107         425      3060        138  0.00%  0.00%  0.00%   0 HPM Stack Sync P 
 108       20145     75351        267  0.00%  0.00%  0.00%   0 HRPC pm request  
 109           0         5          0  0.00%  0.00%  0.00%   0 HPM if_num mappi 
   6           0         2          0  0.00%  0.00%  0.00%   0 Timers           
 111    46275542 207724060        222  0.00%  0.13%  0.12%   0 HRPC pm-counters 
  12           0         2          0  0.00%  0.00%  0.00%   0 AAA high-capacit 
 113           0       237          0  0.00%  0.00%  0.00%   0 HRPC hcmp reques 
 114          32     15476          2  0.00%  0.00%  0.00%   0 HCEF ADJ Refresh 
 115           0         1          0  0.00%  0.00%  0.00%   0 HRPC hl3mm reque 
 116           0         1          0  0.00%  0.00%  0.00%   0 hl3md_rpfq_thrl_ 
 117      183004  21375807          8  0.00%  0.00%  0.00%   0 hl3mm            
  87    12716516 948952078         13  0.00%  0.03%  0.00%   0 HLFM address lea 
 119           0         1          0  0.00%  0.00%  0.00%   0 HACL Queue Proce 
 120           0         4          0  0.00%  0.00%  0.00%   0 HRPC acl request 
 121           0        43          0  0.00%  0.00%  0.00%   0 HACL Acl Manager 
 122           0         1          0  0.00%  0.00%  0.00%   0 HRPC backup inte 
 123           0         1          0  0.00%  0.00%  0.00%   0 HRPC cdp request 
 124           0         3          0  0.00%  0.00%  0.00%   0 HRPC lldp reques 
 125           0         5          0  0.00%  0.00%  0.00%   0 HULC CISP Proces 
 126        4577     39096        117  0.00%  0.00%  0.00%   0 HRPC dot1x reque 
 127           0         1          0  0.00%  0.00%  0.00%   0 Dot1X Msg Retry  
 128        3417     22012        155  0.00%  0.00%  0.00%   0 HULC DOT1X Proce 
 129           0         1          0  0.00%  0.00%  0.00%   0 HRPC foxhound re 
 130           0         2          0  0.00%  0.00%  0.00%   0 Hulc Foxhound Pr 
   5       29320    892811         32  0.00%  0.00%  0.00%   0 Pool Manager     
 132           0         1          0  0.00%  0.00%  0.00%   0 SMI MSG Retry Pr 
 133           0         4          0  0.00%  0.00%  0.00%   0 HRPC Smart Insta 
 134           0         1          0  0.00%  0.00%  0.00%   0 HRPC sdm request 
 135     3266739 160267739         20  0.00%  0.00%  0.00%   0 Hulc Storm Contr 
 136           0         2          0  0.00%  0.00%  0.00%   0 HSTP Sync Proces 
 137         485      4964         97  0.00%  0.00%  0.00%   0 HRPC stp_cli req 
 138         626      4086        153  0.00%  0.00%  0.00%   0 HRPC stp_state_s 
 139           0         2          0  0.00%  0.00%  0.00%   0 S/W Bridge Proce 
 140           0        95          0  0.00%  0.00%  0.00%   0 HRPC hudld reque 
 141           0         1          0  0.00%  0.00%  0.00%   0 HRPC vqpc reques 
 142           0         1          0  0.00%  0.00%  0.00%   0 BCM cable diags  
 143           0         1          0  0.00%  0.00%  0.00%   0 HRPC iec_load_ba 
 144           9        36        250  0.00%  0.00%  0.00%   0 HRPC l2pt qnq rp 
 145           0         1          0  0.00%  0.00%  0.00%   0 HRPC aim request 
 146           0         2          0  0.00%  0.00%  0.00%   0 MACsec Process   
 147           0         1          0  0.00%  0.00%  0.00%   0 HRPC macsec requ 
 148           8        11        727  0.00%  0.00%  0.00%   0 HRPC hled reques 
   4   313471552  14477254      21652  0.00%  0.93%  0.91%   0 Check heaps      
 150      877489  23656414         37  0.00%  0.00%  0.00%   0 HL3U bkgrd proce 
 151     3374415  38698078         87  0.00%  0.00%  0.00%   0 HRPC hl3u reques 
 152       25962   7418583          3  0.00%  0.00%  0.00%   0 HL3U PBR bkgrd p 
 153        1180    270792          4  0.00%  0.00%  0.00%   0 HL3U PBR n-h res 
 154           0         1          0  0.00%  0.00%  0.00%   0 HRPC dtp request 
 155           0         1          0  0.00%  0.00%  0.00%   0 HRPC show_forwar 
 156          34       127        267  0.00%  0.00%  0.00%   0 HRPC snmp reques 
 157         686       115       5965  0.00%  0.00%  0.00%   0 HULC SNMP Proces 
   3     1984832  49726053         39  0.00%  0.00%  0.00%   0 CEF: IPv4 proces 
   2      122589   6488159         18  0.00%  0.00%  0.00%   0 Load Meter       
 160           0         1          0  0.00%  0.00%  0.00%   0 HRPC span reques 
  81      124588   6454106         19  0.00%  0.00%  0.00%   0 HIPC bkgrd proce 
  82           0         1          0  0.00%  0.00%  0.00%   0 IPC RTTYC Messag 
 163          25        25       1000  0.00%  0.00%  0.00%   0 Hulc Reload Mana 
  84         478      2192        218  0.00%  0.00%  0.00%   0 Hulc Port-Securi 
 165       26905     21811       1233  0.00%  0.00%  0.00%   0 HRPC rfs request 
 166           0         1          0  0.00%  0.00%  0.00%   0 HRFS OIR Proc    
 167       50868  10801155          4  0.00%  0.00%  0.00%   0 Power RPS Proces 
  85        2003     20399         98  0.00%  0.00%  0.00%   0 HRPC hpsecure re 
 169          24        18       1333  0.00%  0.00%  0.00%   0 HL2MCM           
  95      249189    557263        447  0.00%  0.00%  0.00%   0 IP Background    
 171           0         3          0  0.00%  0.00%  0.00%   0 Switch Backup In 
 172       18960    541337         35  0.00%  0.00%  0.00%   0 MMN bkgrd proces 
 173         192      6148         31  0.00%  0.00%  0.00%   0 Auth Manager     
 174           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Mgr Proces 
 175           0         1          0  0.00%  0.00%  0.00%   0 MAB Framework    
 176           0         1          0  0.00%  0.00%  0.00%   0 AUTH POLICY Fram 
 177           0         1          0  0.00%  0.00%  0.00%   0 CMD HANDLER      
 178        1167      6162        189  0.00%  0.00%  0.00%   0 802.1x switch    
 179       25021    541339         46  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 180           0         1          0  0.00%  0.00%  0.00%   0 802.1x Webauth F 
 181      366325   2214225        165  0.00%  0.00%  0.00%   0 DTP Protocol     
 182           0         1          0  0.00%  0.00%  0.00%   0 EAP Framework    
 183           0         1          0  0.00%  0.00%  0.00%   0 EAP Test         
 184           0         1          0  0.00%  0.00%  0.00%   0 HRPC dai request 
 185           0         1          0  0.00%  0.00%  0.00%   0 HULC DAI Process 
 186           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip device t 
 187           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip source g 
 188           0         1          0  0.00%  0.00%  0.00%   0 HULC IP Source g 
   1      101471   1614058         62  0.00%  0.00%  0.00%   0 Chunk Manager    
 190        2331   1083241          2  0.00%  0.00%  0.00%   0 Port-Security    
 191           0         2          0  0.00%  0.00%  0.00%   0 IP Host Track Pr 
 192           0         1          0  0.00%  0.00%  0.00%   0 Link State Group 
 193       97612   3227055         30  0.00%  0.00%  0.00%   0 Ethchnl          
 194        1551      1194       1298  0.00%  0.00%  0.00%   0 VMATM Callback   
 195           0         2          0  0.00%  0.00%  0.00%   0 CDP Forward Proc 
 196      595986 321101059          1  0.00%  0.00%  0.00%   0 MDFS MFIB Proces 
 197           9         2       4500  0.00%  0.00%  0.00%   0 MKA              
 198         235      2964         79  0.00%  0.00%  0.00%   0 AAA Server       
 199         158      1645         96  0.00%  0.00%  0.00%   0 AAA ACCT Proc    
 200           0         1          0  0.00%  0.00%  0.00%   0 ACCT Periodic Pr 
 201           0         1          0  0.00%  0.00%  0.00%   0 AAA System Acct  
 202           0         1          0  0.00%  0.00%  0.00%   0 Auth-proxy AAA B 
 203         394    108323          3  0.00%  0.00%  0.00%   0 IP Admin SM Proc 
 204    32404554  40417073        801  0.00%  0.09%  0.10%   0 CDP Protocol     
 205          50        70        714  0.00%  0.00%  0.00%   0 Collection proce 
 206         851      4694        181  0.00%  0.00%  0.00%   0 HRPC hl2mcm igmp 
 207           0         2          0  0.00%  0.00%  0.00%   0 AAA Dictionary R 
 208        1247    270811          4  0.00%  0.00%  0.00%   0 DHCP Snooping    
 209           0         2          0  0.00%  0.00%  0.00%   0 EAPoUDP Process  
 210           0         3          0  0.00%  0.00%  0.00%   0 CEF switching ba 
 112           0         1          0  0.00%  0.00%  0.00%   0 hpm vp events ca 
 212           0         1          0  0.00%  0.00%  0.00%   0 ICMP event handl 
 213      127495  62409421          2  0.00%  0.00%  0.00%   0 IP ARP Track     
 214           0        17          0  0.00%  0.00%  0.00%   0 ADJ resolve proc 
 215           0         3          0  0.00%  0.00%  0.00%   0 ADJ NSF process  
 216           0         1          0  0.00%  0.00%  0.00%   0 IPv6 ping proces 
 217           0         1          0  0.00%  0.00%  0.00%   0 EM Action CNS    
 218           0         5          0  0.00%  0.00%  0.00%   0 SMI Director DB  
 219           0         1          0  0.00%  0.00%  0.00%   0 SMI CDP Update H 
 220           0         1          0  0.00%  0.00%  0.00%   0 SMI Backup Proce 
 221           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC server p 
 222           0         1          0  0.00%  0.00%  0.00%   0 SMI IBC client p 
 223           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC Download 
 131           0         7          0  0.00%  0.00%  0.00%   0 HRPC system mtu  
 225         667    541593          1  0.00%  0.00%  0.00%   0 Spanning Tree St 
 226           0         2          0  0.00%  0.00%  0.00%   0 KRB5 AAA         
 227          18       110        163  0.00%  0.00%  0.00%   0 SXP CORE         
 228      162382    651849        249  0.00%  0.00%  0.00%   0 CEF background p 
 229           0         1          0  0.00%  0.00%  0.00%   0 IP IRDP          
 230          34         2      17000  0.00%  0.00%  0.00%   0 CEF RF HULC Conv 
 231        2517     17418        144  0.00%  0.00%  0.00%   0 XDR mcast        
 232           8        14        571  0.00%  0.00%  0.00%   0 OBFL Cfg Dispatc 
 233          34         9       3777  0.00%  0.00%  0.00%   0 EEM Callback Thr 
 234         134       131       1022  0.00%  0.00%  0.00%   1 Virtual Exec     
 235      128857   3228265         39  0.00%  0.00%  0.00%   0 IP ACL XDR LC Ba 
 236           0         4          0  0.00%  0.00%  0.00%   0 MDFS LC Process  
 237         334     16052         20  0.00%  0.00%  0.00%   0 TCP Timer        
 238        1133      1351        838  0.00%  0.00%  0.00%   0 TCP Protocols    
 239      100612  33282916          3  0.00%  0.00%  0.00%   0 Socket Timers    
 240         466    108429          4  0.00%  0.00%  0.00%   0 HTTP CORE        
 241         917    406201          2  0.00%  0.00%  0.00%   0 Cluster L2       
 242      173885   3227054         53  0.00%  0.00%  0.00%   0 Cluster RARP     
 243       21824   4063098          5  0.00%  0.00%  0.00%   0 Cluster Base     
 244           0         2          0  0.00%  0.00%  0.00%   0 CEF LC IPC Backg 
 245      168863  39175440          4  0.00%  0.00%  0.00%   0 CEF LC Stats     
 246           0         1          0  0.00%  0.00%  0.00%   0 RARP Input       
 247           0         1          0  0.00%  0.00%  0.00%   0 Critical Auth    
 248           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 249           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 250           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 251           0         4          0  0.00%  0.00%  0.00%   0 HRPC dhcp snoopi 
 252           0         7          0  0.00%  0.00%  0.00%   0 HULC DHCP Snoopi 
 253           0         1          0  0.00%  0.00%  0.00%   0 HRPC stack power 
 254         728      1440        505  0.00%  0.00%  0.00%   0 IGMPSN L2MCM     
 255     6769023  58190305        116  0.00%  0.03%  0.00%   0 IGMPSN MRD       
 256    53618406 248052112        216  0.00%  0.12%  0.16%   0 IGMPSN           
 257           0         1          0  0.00%  0.00%  0.00%   0 IGMPQR           
 258           0         3          0  0.00%  0.00%  0.00%   0 L2TRACE SERVER   
 259         669      1435        466  0.00%  0.00%  0.00%   0 MLDSN L2MCM      
 260           0         1          0  0.00%  0.00%  0.00%   0 MRD              
 261           0         1          0  0.00%  0.00%  0.00%   0 MLD_SNOOP        
 161           0         1          0  0.00%  0.00%  0.00%   0 HRPC obfl reques 
 263           0         1          0  0.00%  0.00%  0.00%   0 HRPC x_setup req 
 264       43448    541183         80  0.00%  0.00%  0.00%   0 IP RIB Update    
 265          16       249         64  0.00%  0.00%  0.00%   0 HRPC hl2mcm mlds 
 266           0        20          0  0.00%  0.00%  0.00%   0 SNMP Timers      
 267           0         2          0  0.00%  0.00%  0.00%   0 EPM MAIN PROCESS 
 268           0        33          0  0.00%  0.00%  0.00%   0 LOCAL AAA        
 269          83       545        152  0.00%  0.00%  0.00%   0 ENABLE AAA       
 270           0         2          0  0.00%  0.00%  0.00%   0 LINE AAA         
 271       18756     11105       1688  0.00%  0.00%  0.00%   0 SNMP Traps       
 272       10522     22584        465  0.00%  0.00%  0.00%   0 TPLUS            
 273           8        12        666  0.00%  0.00%  0.00%   0 crypto engine pr 
 274          25         4       6250  0.00%  0.00%  0.00%   0 Crypto CA        
 275           0         1          0  0.00%  0.00%  0.00%   0 Crypto PKI-CRL   
 276           0         1          0  0.00%  0.00%  0.00%   0 Crypto SSL       
 277           0         1          0  0.00%  0.00%  0.00%   0 encrypt proc     
 278           0        41          0  0.00%  0.00%  0.00%   0 VTP Trap Process 
 279           0         2          0  0.00%  0.00%  0.00%   0 VTPMIB EDIT BUFF 
 280           0         2          0  0.00%  0.00%  0.00%   0 DHCP Security He 
 281           0         1          0  0.00%  0.00%  0.00%   0 HCD Process      
 282           0         5          0  0.00%  0.00%  0.00%   0 HRPC cable diagn 
 283           0         2          0  0.00%  0.00%  0.00%   0 DiagCard2/-1     
 284     2400870 556908702          4  0.00%  0.00%  0.00%   0 PM Callback      
 285          25        16       1562  0.00%  0.00%  0.00%   0 VLAN Manager     
 286           0         1          0  0.00%  0.00%  0.00%   0 DiagCard4/-1     
 287        6264   2600673          2  0.00%  0.00%  0.00%   0 dhcp snooping sw 
 288           0         1          0  0.00%  0.00%  0.00%   0 Licensing MIB pr 
 289           0         2          0  0.00%  0.00%  0.00%   0 EEM ED Routing   
 290         316     20942         15  0.00%  0.00%  0.00%   0 EEM ED Syslog    
 291           0         1          0  0.00%  0.00%  0.00%   0 image mgr        
 292         200      1583        126  0.00%  0.00%  0.00%   0 AAA SEND STOP EV 
 293       36339     10046       3617  0.00%  0.00%  0.00%   0 Syslog Traps     
 294        1494     11047        135  0.00%  0.00%  0.00%   0 Syslog           
 295        4313       825       5227  0.00%  0.00%  0.00%   0 SpanTree Helper  
 296         137       449        305  0.00%  0.00%  0.00%   0 EEM Server       
 297           0         2          0  0.00%  0.00%  0.00%   0 EEM Policy Direc 
 298        3474     18040        192  0.00%  0.00%  0.00%   0 SSH Event handle 
 299           0         2          0  0.00%  0.00%  0.00%   0 EEM ED CLI       
 300           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Counter   
 301           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Interface 
 302           0         3          0  0.00%  0.00%  0.00%   0 EEM ED IOSWD     
 303           0         3          0  0.00%  0.00%  0.00%   0 EEM ED None      
 304           0         3          0  0.00%  0.00%  0.00%   0 EEM ED OIR       
 305           0         1          0  0.00%  0.00%  0.00%   0 DiagCard3/-1     
 306         360      2582        139  0.00%  0.00%  0.00%   0 EEM ED SNMP      
 307           0         3          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Obje 
 308           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Ipsla     
 309           0         2          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Noti 
 310        6982    939565          7  0.00%  0.00%  0.00%   0 EEM ED Timer     
 311           0         2          0  0.00%  0.00%  0.00%   0 STP FAST TRANSIT 
 312          82      1602         51  0.00%  0.00%  0.00%   0 CSRT RAPID TRANS 
 313           0         3          0  0.00%  0.00%  0.00%   0 RBM CORE         
 314    15457835    874002      17686  0.00%  0.00%  0.00%   0 crypto sw pk pro 
 316         200       638        313  0.00%  0.00%  0.00%   0 SpanTree Flush   
 317           0         1          0  0.00%  0.00%  0.00%   0 DiagCard1/-1     
 318           0         1          0  0.00%  0.00%  0.00%   0 Connection Mgr   
 319         889    279819          3  0.00%  0.00%  0.00%   0 DHCPD Timer      
 320       15192    541340         28  0.00%  0.00%  0.00%   0 DHCPD Database   
 321           0         1          0  0.00%  0.00%  0.00%   0 LICENSE AGENT    
 322       14642   2165210          6  0.00%  0.00%  0.00%   0 MDFS LC Download 
 162          17        63        269  0.00%  0.00%  0.00%   0 HRPC system post 
 324     2368689   7408400        319  0.00%  0.03%  0.00%   0 PDU DISPATCHER   
 164           8        80        100  0.00%  0.00%  0.00%   0 HRPC hrcli-event 
 326           0         2          0  0.00%  0.00%  0.00%   0 IP SNMPV6        
 327           0         1          0  0.00%  0.00%  0.00%   0 SNMP ConfCopyPro 
 328      142133  32762050          4  0.00%  0.00%  0.00%   0 NTP              
 170     2324992  32261463         72  0.00%  0.02%  0.00%   0 PI MATM Aging Pr 
 330         149       135       1103  0.00%  0.00%  0.00%   0 hulc cfg mgr mas 
 331      260212      1379     188696  0.00%  0.00%  0.00%   0 hulc running con 
 332           0         1          0  0.00%  0.00%  0.00%   0 RTTYS Process    
 334       19497    541160         36  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 337        4718    180481         26  0.00%  0.00%  0.00%   0 HCMP sync proces 
 338           0         2          0  0.00%  0.00%  0.00%   0 hulc_tb_process  
 339     2416579   9844669        245  0.00%  0.00%  0.00%   0 IPC LC Message H 
 340           0         4          0  0.00%  0.00%  0.00%   0 XDR RP Ping Back 
 341        4576    270968         16  0.00%  0.00%  0.00%   0 XDR RP backgroun 
 342           0         1          0  0.00%  0.00%  0.00%   0 XDR RP Test Back 
 343           0         7          0  0.00%  0.00%  0.00%   0 CEF RP IPC Backg

14:58:45.422 UTC Sun Jul 13 2014

Process 235:  IP ACL XDR LC Background
  Stack segment 0x5A69684 - 0x5A6ADF4
  FP: 0x5A6ADC0, RA: 0x294A248
  FP: 0x5A6ADE0, RA: 0x1013B38
  FP: 0x5A6ADE8, RA: 0x1BCF948
  FP: 0x0, RA: 0x1BC63C0

CPU utilization for five seconds: 81%/0%; one minute: 21%; five minutes: 13%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 325    71954590  29063029       2475 56.31%  8.62%  1.87%   0 SNMP ENGINE      
 149    70365005 922590436         76  5.75%  0.91%  0.32%   0 Hulc LED Process 
  93   209282090   3228477      64824  3.35%  0.71%  0.61%   0 HULC Tcam Memory 
  71   1093966061691340293         64  1.75%  0.60%  0.39%   0 Fifo Error Detec 
   4   313611314  14483676      21652  1.43%  1.04%  0.93%   0 Check heaps      
 204    32420529  40437641        801  1.27%  0.14%  0.07%   0 CDP Protocol     
 110   292104316  66908096       4365  0.79%  0.89%  0.85%   0 hpm counter proc 
  36    14385841    554067      25964  0.63%  0.07%  0.01%   0 Per-minute Jobs  
  75    30678290 134074322        228  0.63%  0.36%  0.13%   0 hrpc <- response 
 224    42221244 212687841        198  0.47%  0.13%  0.11%   0 Spanning Tree    
 111    46293754 207815887        222  0.47%  0.14%  0.11%   0 HRPC pm-counters 
 158   124818988   6457016      19330  0.47%  0.36%  0.36%   0 HQM Stack Proces 
  65    52094188 720582708         72  0.31%  0.15%  0.16%   0 RedEarth Tx Mana 
  35     3272331  32343859        101  0.31%  0.02%  0.00%   0 Per-Second Jobs  
 284     2401894 557156839          4  0.15%  0.01%  0.00%   0 PM Callback      
  87    12722467 949371888         13  0.15%  0.03%  0.00%   0 HLFM address lea 
 159   106475866  51623681       2062  0.15%  0.42%  0.43%   0 HRPC qos request 
 329     1716057 327670421          5  0.15%  0.03%  0.00%   0 MDFS RP process  
 323     4050598  15007641        269  0.15%  0.28%  0.06%   0 IP SNMP          
 196      596257 321243172          1  0.15%  0.01%  0.00%   0 MDFS MFIB Proces 
  40    25051571   6682478       3748  0.15%  0.06%  0.06%   0 Compute load avg 
  31    21272435   3941092       5397  0.15%  0.05%  0.05%   0 Net Background   
 262     3365891  67999629         49  0.15%  0.01%  0.00%   0 DHCPD Receive    
  23          75         4      18750  0.00%  0.00%  0.00%   0 PrstVbl          
  22           0         1          0  0.00%  0.00%  0.00%   0 IPC Session Serv 
  21      476260   8660138         54  0.00%  0.00%  0.00%   0 IPC Seat Manager 
  20       91963  32275874          2  0.00%  0.00%  0.00%   0 IPC Deferred Por 
  24      117939  32275869          3  0.00%  0.01%  0.00%   0 Dynamic ARP Insp 
  25           0         1          0  0.00%  0.00%  0.00%   0 ARP Snoop        
  30           0         1          0  0.00%  0.00%  0.00%   0 Critical Bkgnd   
  26           0         1          0  0.00%  0.00%  0.00%   0 License IPC stat 
  32           0         1          0  0.00%  0.00%  0.00%   0 IDB Work         
  27           0         1          0  0.00%  0.00%  0.00%   0 License IPC serv 
  19           0        40          0  0.00%  0.00%  0.00%   0 IPC Managed Time 
  15           0         1          0  0.00%  0.00%  0.00%   0 IFS Agent Manage 
  14          93        30       3100  0.00%  0.00%  0.00%   0 Entity MIB API   
  28       91067  32275743          2  0.00%  0.00%  0.00%   0 GraphIt          
  29           0         2          0  0.00%  0.00%  0.00%   0 XML Proxy Client 
  39           0         5          0  0.00%  0.00%  0.00%   0 IP Admission HA  
  18      110822  32275871          3  0.00%  0.00%  0.00%   0 IPC Periodic Tim 
  41           0         1          0  0.00%  0.00%  0.00%   0 AggMgr Process   
  42          35      5316          6  0.00%  0.00%  0.00%   0 Transport Port A 
  43     2894015   6963595        415  0.00%  0.00%  0.00%   0 HC Counter Timer 
  44           0         1          0  0.00%  0.00%  0.00%   0 SFF8472          
  45      694425 640747340          1  0.00%  0.00%  0.00%   0 DownWhenLooped   
  46           0         1          0  0.00%  0.00%  0.00%   0 HULC PBR Tcam Me 
  47           0         1          0  0.00%  0.00%  0.00%   0 HULC ACL Tcam Me 
  33        3462     19721        175  0.00%  0.00%  0.00%   0 Logger           
  34      103095  32275735          3  0.00%  0.00%  0.00%   0 TTY Background   
  50           0         1          0  0.00%  0.00%  0.00%   0 HRPC actual powe 
  37          33        12       2750  0.00%  0.00%  0.00%   0 IF-MGR control p 
  52           0         2          0  0.00%  0.00%  0.00%   0 HLPIP Sync Proce 
  53           0         3          0  0.00%  0.00%  0.00%   0 HRPC Multi-FS Sy 
  54           8        18        444  0.00%  0.00%  0.00%   0 HULC multifs pro 
  55           0         1          0  0.00%  0.00%  0.00%   0 HRPC hnetwpol re 
  56           0         1          0  0.00%  0.00%  0.00%   0 Hulc Warm Upgrad 
  38         239     11186         21  0.00%  0.00%  0.00%   0 IF-MGR event pro 
  58           0         2          0  0.00%  0.00%  0.00%   0 SM RBCP Monitor  
  48           0         1          0  0.00%  0.00%  0.00%   0 HRPC hdwl reques 
  60      190531   1226172        155  0.00%  0.00%  0.00%   0 EEM ED ND        
  61           0       123          0  0.00%  0.00%  0.00%   0 EEM ED Identity  
  62           0       245          0  0.00%  0.00%  0.00%   0 EEM ED MAT       
  63      111970   6456960         17  0.00%  0.00%  0.00%   0 Hulc LED Alchemy 
  64           0         1          0  0.00%  0.00%  0.00%   0 HRPC asic-stats  
  13           0         1          0  0.00%  0.00%  0.00%   0 Policy Manager   
  66     53976551261925972          4  0.00%  0.00%  0.00%   0 RedEarth Rx Mana 
  67        2320    216729         10  0.00%  0.00%  0.00%   0 HULC Thermal Pro 
  68           0         1          0  0.00%  0.00%  0.00%   0 HRPC hsm request 
  69           0        56          0  0.00%  0.00%  0.00%   0 Stack Mgr        
  70        2510       248      10120  0.00%  0.00%  0.00%   0 Stack Mgr Notifi 
  12           0         2          0  0.00%  0.00%  0.00%   0 AAA high-capacit 
  72           0         3          0  0.00%  0.00%  0.00%   0 Adjust Regions   
  73     1543201  32275759         47  0.00%  0.00%  0.00%   0 hrpc -> response 
  74     1647064  69492547         23  0.00%  0.00%  0.00%   0 hrpc -> request  
  11           0         1          0  0.00%  0.00%  0.00%   0 AAA_SERVER_DEADT 
  76           0         7          0  0.00%  0.00%  0.00%   0 HRPC hcomp reque 
  77           0        54          0  0.00%  0.00%  0.00%   0 HULC Device Mana 
  78       10455     30071        347  0.00%  0.00%  0.00%   0 HRPC hdm non blo 
  17           0        21          0  0.00%  0.00%  0.00%   0 ADJ background   
  10           0         1          0  0.00%  0.00%  0.00%   0 CEF MIB API      
  49           0         1          0  0.00%  0.00%  0.00%   0 HRPC EnergyWise  
  51           0         3          0  0.00%  0.00%  0.00%   0 HRPC lpip reques 
  83           0         1          0  0.00%  0.00%  0.00%   0 RTTYC Flush      
  84         478      2192        218  0.00%  0.00%  0.00%   0 Hulc Port-Securi 
   9       67328    599587        112  0.00%  0.00%  0.00%   0 ARP Input        
  86      157272    697369        225  0.00%  0.00%  0.00%   0 HRPC hlfm reques 
  57           0         1          0  0.00%  0.00%  0.00%   0 HRPC ipadm reque 
  88      133444  32275743          4  0.00%  0.00%  0.00%   0 HLFM aging proce 
  89     3111529 949502426          3  0.00%  0.01%  0.00%   0 HLFM address ret 
  90           0         1          0  0.00%  0.00%  0.00%   0 HRPC hrcmd reque 
  91           0         1          0  0.00%  0.00%  0.00%   0 HRPC emac reques 
  92      267066    852795        313  0.00%  0.00%  0.00%   0 HRPC hulc misc r 
   8           0         1          0  0.00%  0.00%  0.00%   0 Crash writer     
  94       71255  10805941          6  0.00%  0.00%  0.00%   0 HVLAN main bkgrd 
  95      249482    557783        447  0.00%  0.00%  0.00%   0 IP Background    
  96           0         2          0  0.00%  0.00%  0.00%   0 Vlan shutdown Pr 
  97       34965    206313        169  0.00%  0.00%  0.00%   0 HRPC vlan reques 
  59           0         1          0  0.00%  0.00%  0.00%   0 HULC QM Tcam Mem 
  99       30479    541578         56  0.00%  0.00%  0.00%   0 hulc_xps_process 
 100           8         9        888  0.00%  0.00%  0.00%   0 HRPC hfbm reques 
 101           0         1          0  0.00%  0.00%  0.00%   0 IPC Zone Manager 
  79           0        15          0  0.00%  0.00%  0.00%   0 HRPC hdm blockin 
 103           0         1          0  0.00%  0.00%  0.00%   0 HULC PM Vector P 
 104           0         1          0  0.00%  0.00%  0.00%   0 HPM Msg Retry Pr 
 105          53      1767         29  0.00%  0.00%  0.00%   0 TACACS+          
 106    13225682 370827741         35  0.00%  0.03%  0.01%   0 hpm main process 
 107         425      3060        138  0.00%  0.00%  0.00%   0 HPM Stack Sync P 
 108       20474     76714        266  0.00%  0.00%  0.00%   0 HRPC pm request  
 109           0         5          0  0.00%  0.00%  0.00%   0 HPM if_num mappi 
   7          27       342         78  0.00%  0.00%  0.00%   0 Net Input        
   6           0         2          0  0.00%  0.00%  0.00%   0 Timers           
   5       29320    893213         32  0.00%  0.00%  0.00%   0 Pool Manager     
 113           0       237          0  0.00%  0.00%  0.00%   0 HRPC hcmp reques 
 114          32     15483          2  0.00%  0.00%  0.00%   0 HCEF ADJ Refresh 
 115           0         1          0  0.00%  0.00%  0.00%   0 HRPC hl3mm reque 
 116           0         1          0  0.00%  0.00%  0.00%   0 hl3md_rpfq_thrl_ 
 117      183095  21385260          8  0.00%  0.00%  0.00%   0 hl3mm            
 118       63906  16142391          3  0.00%  0.00%  0.00%   0 hl3mm_rp         
 119           0         1          0  0.00%  0.00%  0.00%   0 HACL Queue Proce 
 120           0         4          0  0.00%  0.00%  0.00%   0 HRPC acl request 
 121           0        43          0  0.00%  0.00%  0.00%   0 HACL Acl Manager 
 122           0         1          0  0.00%  0.00%  0.00%   0 HRPC backup inte 
 123           0         1          0  0.00%  0.00%  0.00%   0 HRPC cdp request 
 124           0         3          0  0.00%  0.00%  0.00%   0 HRPC lldp reques 
 125           0         5          0  0.00%  0.00%  0.00%   0 HULC CISP Proces 
 126        4676     39864        117  0.00%  0.00%  0.00%   0 HRPC dot1x reque 
 127           0         1          0  0.00%  0.00%  0.00%   0 Dot1X Msg Retry  
 128        3475     22413        155  0.00%  0.00%  0.00%   0 HULC DOT1X Proce 
 129           0         1          0  0.00%  0.00%  0.00%   0 HRPC foxhound re 
 130           0         2          0  0.00%  0.00%  0.00%   0 Hulc Foxhound Pr 
   3     1985674  49748077         39  0.00%  0.00%  0.00%   0 CEF: IPv4 proces 
 132           0         1          0  0.00%  0.00%  0.00%   0 SMI MSG Retry Pr 
 133           0         4          0  0.00%  0.00%  0.00%   0 HRPC Smart Insta 
 134           0         1          0  0.00%  0.00%  0.00%   0 HRPC sdm request 
 135     3268222 160338663         20  0.00%  0.01%  0.00%   0 Hulc Storm Contr 
 136           0         2          0  0.00%  0.00%  0.00%   0 HSTP Sync Proces 
 137         485      4964         97  0.00%  0.00%  0.00%   0 HRPC stp_cli req 
 138         626      4086        153  0.00%  0.00%  0.00%   0 HRPC stp_state_s 
 139           0         2          0  0.00%  0.00%  0.00%   0 S/W Bridge Proce 
 140           0        95          0  0.00%  0.00%  0.00%   0 HRPC hudld reque 
 141           0         1          0  0.00%  0.00%  0.00%   0 HRPC vqpc reques 
  16       16573    541581         30  0.00%  0.00%  0.00%   0 IPC Dynamic Cach 
 143           0         1          0  0.00%  0.00%  0.00%   0 HRPC iec_load_ba 
 144           9        36        250  0.00%  0.00%  0.00%   0 HRPC l2pt qnq rp 
 145           0         1          0  0.00%  0.00%  0.00%   0 HRPC aim request 
 146           0         2          0  0.00%  0.00%  0.00%   0 MACsec Process   
 147           0         1          0  0.00%  0.00%  0.00%   0 HRPC macsec requ 
 148           8        11        727  0.00%  0.00%  0.00%   0 HRPC hled reques 
   2      122646   6491031         18  0.00%  0.00%  0.00%   0 Load Meter       
 150      877968  23666881         37  0.00%  0.00%  0.00%   0 HL3U bkgrd proce 
 151     3375543  38715193         87  0.00%  0.00%  0.00%   0 HRPC hl3u reques 
 152       25970   7421871          3  0.00%  0.00%  0.00%   0 HL3U PBR bkgrd p 
 153        1188    270912          4  0.00%  0.00%  0.00%   0 HL3U PBR n-h res 
 154           0         1          0  0.00%  0.00%  0.00%   0 HRPC dtp request 
 155           0         1          0  0.00%  0.00%  0.00%   0 HRPC show_forwar 
 156          34       127        267  0.00%  0.00%  0.00%   0 HRPC snmp reques 
 157         686       115       5965  0.00%  0.00%  0.00%   0 HULC SNMP Proces 
  80          16         6       2666  0.00%  0.00%  0.00%   0 HRPC cfg_backup  
   1      101670   1616162         62  0.00%  0.00%  0.00%   0 Chunk Manager    
 160           0         1          0  0.00%  0.00%  0.00%   0 HRPC span reques 
  81      124624   6456962         19  0.00%  0.00%  0.00%   0 HIPC bkgrd proce 
  82           0         1          0  0.00%  0.00%  0.00%   0 IPC RTTYC Messag 
 163          25        25       1000  0.00%  0.00%  0.00%   0 Hulc Reload Mana 
  85        2030     20798         97  0.00%  0.00%  0.00%   0 HRPC hpsecure re 
 165       26905     21811       1233  0.00%  0.00%  0.00%   0 HRPC rfs request 
 166           0         1          0  0.00%  0.00%  0.00%   0 HRFS OIR Proc    
 167       50885  10805937          4  0.00%  0.00%  0.00%   0 Power RPS Proces 
 168    81813846 292193365        279  0.00%  0.21%  0.20%   0 HL2MCM           
 169          24        18       1333  0.00%  0.00%  0.00%   0 HL2MCM           
  98           0         1          0  0.00%  0.00%  0.00%   0 HULC VLAN REF Ba 
 171           0         3          0  0.00%  0.00%  0.00%   0 Switch Backup In 
 172       18960    541577         35  0.00%  0.00%  0.00%   0 MMN bkgrd proces 
 173         192      6248         30  0.00%  0.00%  0.00%   0 Auth Manager     
 174           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Mgr Proces 
 175           0         1          0  0.00%  0.00%  0.00%   0 MAB Framework    
 176           0         1          0  0.00%  0.00%  0.00%   0 AUTH POLICY Fram 
 177           0         1          0  0.00%  0.00%  0.00%   0 CMD HANDLER      
 178        1175      6262        187  0.00%  0.00%  0.00%   0 802.1x switch    
 179       25021    541579         46  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 180           0         1          0  0.00%  0.00%  0.00%   0 802.1x Webauth F 
 181      366481   2215192        165  0.00%  0.00%  0.00%   0 DTP Protocol     
 182           0         1          0  0.00%  0.00%  0.00%   0 EAP Framework    
 183           0         1          0  0.00%  0.00%  0.00%   0 EAP Test         
 184           0         1          0  0.00%  0.00%  0.00%   0 HRPC dai request 
 185           0         1          0  0.00%  0.00%  0.00%   0 HULC DAI Process 
 186           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip device t 
 187           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip source g 
 188           0         1          0  0.00%  0.00%  0.00%   0 HULC IP Source g 
 189      346456  32511580         10  0.00%  0.00%  0.00%   0 UDLD             
 190        2339   1083720          2  0.00%  0.00%  0.00%   0 Port-Security    
 191           0         2          0  0.00%  0.00%  0.00%   0 IP Host Track Pr 
 192           0         1          0  0.00%  0.00%  0.00%   0 Link State Group 
 193       97705   3228483         30  0.00%  0.00%  0.00%   0 Ethchnl          
 194        1551      1194       1298  0.00%  0.00%  0.00%   0 VMATM Callback   
 195           0         2          0  0.00%  0.00%  0.00%   0 CDP Forward Proc 
 102           0        13          0  0.00%  0.00%  0.00%   0 HRPC ilp request 
 197           9         2       4500  0.00%  0.00%  0.00%   0 MKA              
 198         235      2964         79  0.00%  0.00%  0.00%   0 AAA Server       
 199         158      1645         96  0.00%  0.00%  0.00%   0 AAA ACCT Proc    
 200           0         1          0  0.00%  0.00%  0.00%   0 ACCT Periodic Pr 
 201           0         1          0  0.00%  0.00%  0.00%   0 AAA System Acct  
 202           0         1          0  0.00%  0.00%  0.00%   0 Auth-proxy AAA B 
 203         394    108371          3  0.00%  0.00%  0.00%   0 IP Admin SM Proc 
 112           0         1          0  0.00%  0.00%  0.00%   0 hpm vp events ca 
 205          50        70        714  0.00%  0.00%  0.00%   0 Collection proce 
 206         851      4694        181  0.00%  0.00%  0.00%   0 HRPC hl2mcm igmp 
 207           0         2          0  0.00%  0.00%  0.00%   0 AAA Dictionary R 
 208        1247    270930          4  0.00%  0.00%  0.00%   0 DHCP Snooping    
 209           0         2          0  0.00%  0.00%  0.00%   0 EAPoUDP Process  
 210           0         3          0  0.00%  0.00%  0.00%   0 CEF switching ba 
 211     9170668  82916814        110  0.00%  0.06%  0.01%   0 IP Input         
 212           0         1          0  0.00%  0.00%  0.00%   0 ICMP event handl 
 213      127528  62437038          2  0.00%  0.00%  0.00%   0 IP ARP Track     
 214           0        17          0  0.00%  0.00%  0.00%   0 ADJ resolve proc 
 215           0         3          0  0.00%  0.00%  0.00%   0 ADJ NSF process  
 216           0         1          0  0.00%  0.00%  0.00%   0 IPv6 ping proces 
 217           0         1          0  0.00%  0.00%  0.00%   0 EM Action CNS    
 218           0         5          0  0.00%  0.00%  0.00%   0 SMI Director DB  
 219           0         1          0  0.00%  0.00%  0.00%   0 SMI CDP Update H 
 220           0         1          0  0.00%  0.00%  0.00%   0 SMI Backup Proce 
 221           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC server p 
 222           0         1          0  0.00%  0.00%  0.00%   0 SMI IBC client p 
 223           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC Download 
 131           0         7          0  0.00%  0.00%  0.00%   0 HRPC system mtu  
 225         667    541833          1  0.00%  0.00%  0.00%   0 Spanning Tree St 
 226           0         2          0  0.00%  0.00%  0.00%   0 KRB5 AAA         
 227          18       110        163  0.00%  0.00%  0.00%   0 SXP CORE         
 228      162442    652137        249  0.00%  0.00%  0.00%   0 CEF background p 
 229           0         1          0  0.00%  0.00%  0.00%   0 IP IRDP          
 230          34         2      17000  0.00%  0.00%  0.00%   0 CEF RF HULC Conv 
 231        2552     17690        144  0.00%  0.00%  0.00%   0 XDR mcast        
 232           8        14        571  0.00%  0.00%  0.00%   0 OBFL Cfg Dispatc 
 233          36         9       4000  0.00%  0.00%  0.00%   0 EEM Callback Thr 
 234         158       131       1206  0.00%  0.00%  0.00%   1 Virtual Exec     
 235      128933   3229695         39  0.00%  0.00%  0.00%   0 IP ACL XDR LC Ba 
 236           0         4          0  0.00%  0.00%  0.00%   0 MDFS LC Process  
 237         334     16052         20  0.00%  0.00%  0.00%   0 TCP Timer        
 238        1133      1351        838  0.00%  0.00%  0.00%   0 TCP Protocols    
 239      100661  33297644          3  0.00%  0.00%  0.00%   0 Socket Timers    
 240         466    108477          4  0.00%  0.00%  0.00%   0 HTTP CORE        
 241         917    406381          2  0.00%  0.00%  0.00%   0 Cluster L2       
 242      173986   3228482         53  0.00%  0.00%  0.00%   0 Cluster RARP     
 243       21832   4064895          5  0.00%  0.00%  0.00%   0 Cluster Base     
 244           0         2          0  0.00%  0.00%  0.00%   0 CEF LC IPC Backg 
 245      168929  39192775          4  0.00%  0.00%  0.00%   0 CEF LC Stats     
 246           0         1          0  0.00%  0.00%  0.00%   0 RARP Input       
 247           0         1          0  0.00%  0.00%  0.00%   0 Critical Auth    
 248           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 249           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 250           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 251           0         4          0  0.00%  0.00%  0.00%   0 HRPC dhcp snoopi 
 252           0         7          0  0.00%  0.00%  0.00%   0 HULC DHCP Snoopi 
 253           0         1          0  0.00%  0.00%  0.00%   0 HRPC stack power 
 254         728      1440        505  0.00%  0.00%  0.00%   0 IGMPSN L2MCM     
 255     6774216  58236088        116  0.00%  0.04%  0.01%   0 IGMPSN MRD       
 256    53646337 248186647        216  0.00%  0.16%  0.19%   0 IGMPSN           
 257           0         1          0  0.00%  0.00%  0.00%   0 IGMPQR           
 258           0         3          0  0.00%  0.00%  0.00%   0 L2TRACE SERVER   
 259         669      1435        466  0.00%  0.00%  0.00%   0 MLDSN L2MCM      
 260           0         1          0  0.00%  0.00%  0.00%   0 MRD              
 261           0         1          0  0.00%  0.00%  0.00%   0 MLD_SNOOP        
 142           0         1          0  0.00%  0.00%  0.00%   0 BCM cable diags  
 263           0         1          0  0.00%  0.00%  0.00%   0 HRPC x_setup req 
 264       43456    541423         80  0.00%  0.00%  0.00%   0 IP RIB Update    
 265          16       249         64  0.00%  0.00%  0.00%   0 HRPC hl2mcm mlds 
 266           0        20          0  0.00%  0.00%  0.00%   0 SNMP Timers      
 267           0         2          0  0.00%  0.00%  0.00%   0 EPM MAIN PROCESS 
 268           0        33          0  0.00%  0.00%  0.00%   0 LOCAL AAA        
 269          83       545        152  0.00%  0.00%  0.00%   0 ENABLE AAA       
 270           0         2          0  0.00%  0.00%  0.00%   0 LINE AAA         
 271       19072     11305       1687  0.00%  0.00%  0.00%   0 SNMP Traps       
 272       10522     22584        465  0.00%  0.00%  0.00%   0 TPLUS            
 273           8        12        666  0.00%  0.00%  0.00%   0 crypto engine pr 
 274          25         4       6250  0.00%  0.00%  0.00%   0 Crypto CA        
 275           0         1          0  0.00%  0.00%  0.00%   0 Crypto PKI-CRL   
 276           0         1          0  0.00%  0.00%  0.00%   0 Crypto SSL       
 277           0         1          0  0.00%  0.00%  0.00%   0 encrypt proc     
 278           0        41          0  0.00%  0.00%  0.00%   0 VTP Trap Process 
 279           0         2          0  0.00%  0.00%  0.00%   0 VTPMIB EDIT BUFF 
 280           0         2          0  0.00%  0.00%  0.00%   0 DHCP Security He 
 281           0         1          0  0.00%  0.00%  0.00%   0 HCD Process      
 282           0         5          0  0.00%  0.00%  0.00%   0 HRPC cable diagn 
 283           0         2          0  0.00%  0.00%  0.00%   0 DiagCard2/-1     
 161           0         1          0  0.00%  0.00%  0.00%   0 HRPC obfl reques 
 285          25        16       1562  0.00%  0.00%  0.00%   0 VLAN Manager     
 286           0         1          0  0.00%  0.00%  0.00%   0 DiagCard4/-1     
 287        6264   2601823          2  0.00%  0.00%  0.00%   0 dhcp snooping sw 
 288           0         1          0  0.00%  0.00%  0.00%   0 Licensing MIB pr 
 289           0         2          0  0.00%  0.00%  0.00%   0 EEM ED Routing   
 290         316     21322         14  0.00%  0.00%  0.00%   0 EEM ED Syslog    
 291           0         1          0  0.00%  0.00%  0.00%   0 image mgr        
 292         200      1583        126  0.00%  0.00%  0.00%   0 AAA SEND STOP EV 
 293       36914     10227       3609  0.00%  0.00%  0.00%   0 Syslog Traps     
 294        1536     11252        136  0.00%  0.00%  0.00%   0 Syslog           
 295        4313       825       5227  0.00%  0.00%  0.00%   0 SpanTree Helper  
 296         137       455        301  0.00%  0.00%  0.00%   0 EEM Server       
 297           0         2          0  0.00%  0.00%  0.00%   0 EEM Policy Direc 
 298        3474     18048        192  0.00%  0.00%  0.00%   0 SSH Event handle 
 299           0         2          0  0.00%  0.00%  0.00%   0 EEM ED CLI       
 300           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Counter   
 301           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Interface 
 302           0         3          0  0.00%  0.00%  0.00%   0 EEM ED IOSWD     
 303           0         3          0  0.00%  0.00%  0.00%   0 EEM ED None      
 304           0         3          0  0.00%  0.00%  0.00%   0 EEM ED OIR       
 305           0         1          0  0.00%  0.00%  0.00%   0 DiagCard3/-1     
 306        1119      6860        163  0.00%  0.00%  0.00%   0 EEM ED SNMP      
 307           0         3          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Obje 
 308           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Ipsla     
 309           0         2          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Noti 
 310        6982    939996          7  0.00%  0.00%  0.00%   0 EEM ED Timer     
 311           0         2          0  0.00%  0.00%  0.00%   0 STP FAST TRANSIT 
 312          82      1602         51  0.00%  0.00%  0.00%   0 CSRT RAPID TRANS 
 313           0         3          0  0.00%  0.00%  0.00%   0 RBM CORE         
 314    15464446    874377      17686  0.00%  0.00%  0.00%   0 crypto sw pk pro 
 316         200       638        313  0.00%  0.00%  0.00%   0 SpanTree Flush   
 317           0         1          0  0.00%  0.00%  0.00%   0 DiagCard1/-1     
 318           0         1          0  0.00%  0.00%  0.00%   0 Connection Mgr   
 319         889    279943          3  0.00%  0.00%  0.00%   0 DHCPD Timer      
 320       15192    541580         28  0.00%  0.00%  0.00%   0 DHCPD Database   
 321           0         1          0  0.00%  0.00%  0.00%   0 LICENSE AGENT    
 322       14642   2166168          6  0.00%  0.00%  0.00%   0 MDFS LC Download 
 162          17        63        269  0.00%  0.00%  0.00%   0 HRPC system post 
 324     2368838   7408898        319  0.00%  0.06%  0.01%   0 PDU DISPATCHER   
 164           8        80        100  0.00%  0.00%  0.00%   0 HRPC hrcli-event 
 326           0         2          0  0.00%  0.00%  0.00%   0 IP SNMPV6        
 327           0         1          0  0.00%  0.00%  0.00%   0 SNMP ConfCopyPro 
 328      142192  32776571          4  0.00%  0.00%  0.00%   0 NTP              
 170     2325961  32275740         72  0.00%  0.00%  0.00%   0 PI MATM Aging Pr 
 330         149       135       1103  0.00%  0.00%  0.00%   0 hulc cfg mgr mas 
 331      260212      1379     188696  0.00%  0.00%  0.00%   0 hulc running con 
 332           0         1          0  0.00%  0.00%  0.00%   0 RTTYS Process    
 334       19505    541400         36  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 337        4735    180561         26  0.00%  0.00%  0.00%   0 HCMP sync proces 
 338           0         2          0  0.00%  0.00%  0.00%   0 hulc_tb_process  
 339     2417420   9849019        245  0.00%  0.00%  0.00%   0 IPC LC Message H 
 340           0         4          0  0.00%  0.00%  0.00%   0 XDR RP Ping Back 
 341        4576    271087         16  0.00%  0.00%  0.00%   0 XDR RP backgroun 
 342           0         1          0  0.00%  0.00%  0.00%   0 XDR RP Test Back 
 343           0         7          0  0.00%  0.00%  0.00%   0 CEF RP IPC Backg

18:59:01.162 UTC Sun Jul 13 2014

Process 235:  IP ACL XDR LC Background
  Stack segment 0x5A69684 - 0x5A6ADF4
  FP: 0x5A6ADC0, RA: 0x294A248
  FP: 0x5A6ADE0, RA: 0x1013B38
  FP: 0x5A6ADE8, RA: 0x1BCF948
  FP: 0x0, RA: 0x1BC63C0

It took time, but now it is easier to see reason for High CPU. Seems max CPU is taken by :

1. Virtual Exec Process

CPU utilization for five seconds: 99%/1%; one minute: 32%; five minutes: 18%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 234       19360    235134         82 85.62%  8.55%  2.94%   1 Virtual Exec

2. SNMP ENGINE  Process    

CPU utilization for five seconds: 81%/0%; one minute: 21%; five minutes: 13%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 325    71954590  29063029       2475 56.31%  8.62%  1.87%   0 SNMP ENGINE   

CPU utilization for five seconds: 72%/1%; one minute: 20%; five minutes: 13%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 325    71942425  29061721       2475 53.18%  8.25%  1.83%   0 SNMP ENGINE   

CPU utilization for five seconds: 81%/0%; one minute: 21%; five minutes: 13%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 325    71954590  29063029       2475 56.31%  8.62%  1.87%   0 SNMP ENGINE   

Now to know what brings the SNMP Engine to Spike the CPU, which MIB is responsible when queried, we need the Stack Trace for SNMP ENGINE.

The Current Stack Trace collected is for IP ACL XDR LC Background. I suggested PID : 235 as, the first post has 235 for SNMP ENGINE:

235    22681449   5799556       3910  0.00%  0.00%  0.00%   0 SNMP ENGINE  

Now it seems you may have configured the script to another device, or this device is rebooted, after which PID's change. Current PID for SNMP ENGINE is 325.

Edit the EEM with this info.

-Thanks

Vinod

**Encourage Contributors. RATE Them.**

 

-Thanks Vinod **Rating Encourages contributors, and its really free. **

Dear Vinod,

 

Thanks for the prompt response.

 

My current eem script is the below (as per your first post)

 

event manager applet cpu_stats
 event snmp oid 1.3.6.1.4.1.9.9.109.1.1.1.1.3.1 get-type exact entry-op gt entry-val "70" exit-op lt exit-val "70" poll-interval 5
 action 1.1 syslog msg "------HIGH CPU DETECTED----, CPU: $_snmp_oid_val %"
 action 1.2 cli command "enable"
 action 1.3 cli command "show clock | append flash:cpu_stats"
 action 1.4 cli command "show stack 235 | append flash:cpu_stats"
 action 1.5 cli command "show proc cpu sort | append flash:cpu_stats"
!
end

 

------------------------------------------------------------------------------------------------

Also the device up-time on show version is more than 1 year so we can assume no reboot happened. Can you please suggest what modification I need to do on EEM.Because currently we are polling for PID 235 only do i need to change it. Also am attaching the full out put of eem script which I got yesterday. (From this file only I pasted the output)

 

Thanks

Nibin Rodrigues 

nibinrodrigues
Level 1
Level 1

Hi,

 

Finally I got output from EEM. Still facing issue with CPU spike (reaching above 90% every 3 hours)  Kindly let me know which process/poll from LMS causing spike.

 

more cpu_stats   
08:34:50.900 UTC Sun Jul 13 2014

Process 235:  IP ACL XDR LC Background
  Stack segment 0x5A69684 - 0x5A6ADF4
  FP: 0x5A6ADC0, RA: 0x294A248
  FP: 0x5A6ADE0, RA: 0x1013B38
  FP: 0x5A6ADE8, RA: 0x1BCF948
  FP: 0x0, RA: 0x1BC63C0

CPU utilization for five seconds: 99%/1%; one minute: 32%; five minutes: 18%
 PID Runtime(ms)   Invoked      uSecs   5Sec   1Min   5Min TTY Process 
 234       19360    235134         82 85.62%  8.55%  2.94%   1 Virtual Exec     
  71   1093114471690141903         64  2.39%  0.74%  0.46%   0 Fifo Error Detec 
 110   291896714  66860698       4365  1.27%  0.87%  0.85%   0 hpm counter proc 
 333         144       134       1074  0.95%  0.07%  0.01%   2 Virtual Exec     
  93   209133659   3226190      64823  0.47%  0.56%  0.58%   0 HULC Tcam Memory 
 158   124730186   6452441      19330  0.47%  0.37%  0.35%   0 HQM Stack Proces 
 315          26        24       1083  0.31%  0.02%  0.00%   0 EEM Callback Thr 
 149    70316360 921938032         76  0.31%  0.17%  0.16%   0 Hulc LED Process 
   3     1984170  49712892         39  0.15%  0.03%  0.00%   0 CEF: IPv4 proces 
  75    30660149 133990691        228  0.15%  0.08%  0.06%   0 hrpc <- response 
 168    81754951 291989576        279  0.15%  0.16%  0.19%   0 HL2MCM           
 159   106398380  51587099       2062  0.15%  0.38%  0.36%   0 HRPC qos request 
 135     3265881 160225069         20  0.15%  0.01%  0.00%   0 Hulc Storm Contr 
 170     2324295  32252873         72  0.15%  0.03%  0.00%   0 PI MATM Aging Pr 
 106    13216454 370564211         35  0.15%  0.04%  0.01%   0 hpm main process 
  31    21256458   3937866       5397  0.15%  0.07%  0.05%   0 Net Background   
 224    42191188 212546120        198  0.15%  0.09%  0.09%   0 Spanning Tree    
  87    12713230 948699751         13  0.15%  0.04%  0.01%   0 HLFM address lea 
  35     3270263  32320941        101  0.15%  0.01%  0.00%   0 Per-Second Jobs  
  19           0        40          0  0.00%  0.00%  0.00%   0 IPC Managed Time 
  18      110764  32253004          3  0.00%  0.00%  0.00%   0 IPC Periodic Tim 
  17           0        21          0  0.00%  0.00%  0.00%   0 ADJ background   
  16       16573    541197         30  0.00%  0.00%  0.00%   0 IPC Dynamic Cach 
  20       91946  32253007          2  0.00%  0.00%  0.00%   0 IPC Deferred Por 
  21      476008   8653999         55  0.00%  0.00%  0.00%   0 IPC Seat Manager 
  26           0         1          0  0.00%  0.00%  0.00%   0 License IPC stat 
  15           0         1          0  0.00%  0.00%  0.00%   0 IFS Agent Manage 
  28       91032  32252876          2  0.00%  0.00%  0.00%   0 GraphIt          
  22           0         1          0  0.00%  0.00%  0.00%   0 IPC Session Serv 
  23          75         4      18750  0.00%  0.00%  0.00%   0 PrstVbl          
  14          93        30       3100  0.00%  0.00%  0.00%   0 Entity MIB API   
  32           0         1          0  0.00%  0.00%  0.00%   0 IDB Work         
  33        3419     19354        176  0.00%  0.00%  0.00%   0 Logger           
  24      117864  32253002          3  0.00%  0.01%  0.00%   0 Dynamic ARP Insp 
  25           0         1          0  0.00%  0.00%  0.00%   0 ARP Snoop        
  36    14375584    553673      25964  0.00%  0.04%  0.00%   0 Per-minute Jobs  
  27           0         1          0  0.00%  0.00%  0.00%   0 License IPC serv 
  38         239     10986         21  0.00%  0.00%  0.00%   0 IF-MGR event pro 
  39           0         5          0  0.00%  0.00%  0.00%   0 IP Admission HA  
  40    25033048   6677903       3748  0.00%  0.08%  0.08%   0 Compute load avg 
  41           0         1          0  0.00%  0.00%  0.00%   0 AggMgr Process   
  29           0         2          0  0.00%  0.00%  0.00%   0 XML Proxy Client 
  43     2892158   6958636        415  0.00%  0.00%  0.00%   0 HC Counter Timer 
  44           0         1          0  0.00%  0.00%  0.00%   0 SFF8472          
  13           0         1          0  0.00%  0.00%  0.00%   0 Policy Manager   
  46           0         1          0  0.00%  0.00%  0.00%   0 HULC PBR Tcam Me 
  12           0         2          0  0.00%  0.00%  0.00%   0 AAA high-capacit 
  30           0         1          0  0.00%  0.00%  0.00%   0 Critical Bkgnd   
  34      103029  32252868          3  0.00%  0.00%  0.00%   0 TTY Background   
  50           0         1          0  0.00%  0.00%  0.00%   0 HRPC actual powe 
  51           0         3          0  0.00%  0.00%  0.00%   0 HRPC lpip reques 
  52           0         2          0  0.00%  0.00%  0.00%   0 HLPIP Sync Proce 
  53           0         3          0  0.00%  0.00%  0.00%   0 HRPC Multi-FS Sy 
  54           8        18        444  0.00%  0.00%  0.00%   0 HULC multifs pro 
  55           0         1          0  0.00%  0.00%  0.00%   0 HRPC hnetwpol re 
  56           0         1          0  0.00%  0.00%  0.00%   0 Hulc Warm Upgrad 
  57           0         1          0  0.00%  0.00%  0.00%   0 HRPC ipadm reque 
  37          33        12       2750  0.00%  0.00%  0.00%   0 IF-MGR control p 
  59           0         1          0  0.00%  0.00%  0.00%   0 HULC QM Tcam Mem 
  60      190380   1224938        155  0.00%  0.00%  0.00%   0 EEM ED ND        
  61           0       123          0  0.00%  0.00%  0.00%   0 EEM ED Identity  
  62           0       245          0  0.00%  0.00%  0.00%   0 EEM ED MAT       
  63      111903   6452385         17  0.00%  0.00%  0.00%   0 Hulc LED Alchemy 
  42          35      5315          6  0.00%  0.00%  0.00%   0 Transport Port A 
  65    52048843 720046943         72  0.00%  0.16%  0.16%   0 RedEarth Tx Mana 
  66     53937781261032382          4  0.00%  0.01%  0.00%   0 RedEarth Rx Mana 
  67        2311    216575         10  0.00%  0.00%  0.00%   0 HULC Thermal Pro 
  68           0         1          0  0.00%  0.00%  0.00%   0 HRPC hsm request 
  69           0        56          0  0.00%  0.00%  0.00%   0 Stack Mgr        
  70        2510       248      10120  0.00%  0.00%  0.00%   0 Stack Mgr Notifi 
  10           0         1          0  0.00%  0.00%  0.00%   0 CEF MIB API      
  72           0         3          0  0.00%  0.00%  0.00%   0 Adjust Regions   
  45      694015 640293487          1  0.00%  0.00%  0.00%   0 DownWhenLooped   
  74     1646076  69449052         23  0.00%  0.00%  0.00%   0 hrpc -> request  
   9       67025    599011        111  0.00%  0.00%  0.00%   0 ARP Input        
  76           0         7          0  0.00%  0.00%  0.00%   0 HRPC hcomp reque 
  77           0        54          0  0.00%  0.00%  0.00%   0 HULC Device Mana 
  78       10438     30037        347  0.00%  0.00%  0.00%   0 HRPC hdm non blo 
   8           0         1          0  0.00%  0.00%  0.00%   0 Crash writer     
  47           0         1          0  0.00%  0.00%  0.00%   0 HULC ACL Tcam Me 
  81      124554   6452387         19  0.00%  0.00%  0.00%   0 HIPC bkgrd proce 
  82           0         1          0  0.00%  0.00%  0.00%   0 IPC RTTYC Messag 
  11           0         1          0  0.00%  0.00%  0.00%   0 AAA_SERVER_DEADT 
   6           0         2          0  0.00%  0.00%  0.00%   0 Timers           
  48           0         1          0  0.00%  0.00%  0.00%   0 HRPC hdwl reques 
  49           0         1          0  0.00%  0.00%  0.00%   0 HRPC EnergyWise  
  58           0         2          0  0.00%  0.00%  0.00%   0 SM RBCP Monitor  
  88      133387  32252876          4  0.00%  0.00%  0.00%   0 HLFM aging proce 
  89     3109394 948830216          3  0.00%  0.00%  0.00%   0 HLFM address ret 
  90           0         1          0  0.00%  0.00%  0.00%   0 HRPC hrcmd reque 
  91           0         1          0  0.00%  0.00%  0.00%   0 HRPC emac reques 
  92      267066    852731        313  0.00%  0.00%  0.00%   0 HRPC hulc misc r 
   5       29303    892572         32  0.00%  0.00%  0.00%   0 Pool Manager     
  94       71237  10798283          6  0.00%  0.00%  0.00%   0 HVLAN main bkgrd 
  95      249139    557119        447  0.00%  0.00%  0.00%   0 IP Background    
  96           0         2          0  0.00%  0.00%  0.00%   0 Vlan shutdown Pr 
  97       34932    206235        169  0.00%  0.00%  0.00%   0 HRPC vlan reques 
  98           0         1          0  0.00%  0.00%  0.00%   0 HULC VLAN REF Ba 
  99       30454    541194         56  0.00%  0.00%  0.00%   0 hulc_xps_process 
 100           8         9        888  0.00%  0.00%  0.00%   0 HRPC hfbm reques 
 101           0         1          0  0.00%  0.00%  0.00%   0 IPC Zone Manager 
 102           0        13          0  0.00%  0.00%  0.00%   0 HRPC ilp request 
 103           0         1          0  0.00%  0.00%  0.00%   0 HULC PM Vector P 
 104           0         1          0  0.00%  0.00%  0.00%   0 HPM Msg Retry Pr 
 105          53      1767         29  0.00%  0.00%  0.00%   0 TACACS+          
  64           0         1          0  0.00%  0.00%  0.00%   0 HRPC asic-stats  
 107         425      3060        138  0.00%  0.00%  0.00%   0 HPM Stack Sync P 
 108       20145     75351        267  0.00%  0.00%  0.00%   0 HRPC pm request  
 109           0         5          0  0.00%  0.00%  0.00%   0 HPM if_num mappi 
   4   313387584  14473401      21652  0.00%  0.53%  0.81%   0 Check heaps      
 111    46264013 207669797        222  0.00%  0.10%  0.12%   0 HRPC pm-counters 
   2      122556   6486432         18  0.00%  0.00%  0.00%   0 Load Meter       
 113           0       237          0  0.00%  0.00%  0.00%   0 HRPC hcmp reques 
 114          32     15472          2  0.00%  0.00%  0.00%   0 HCEF ADJ Refresh 
 115           0         1          0  0.00%  0.00%  0.00%   0 HRPC hl3mm reque 
 116           0         1          0  0.00%  0.00%  0.00%   0 hl3md_rpfq_thrl_ 
  73     1542060  32252892         47  0.00%  0.01%  0.00%   0 hrpc -> response 
 118       63793  16130954          3  0.00%  0.00%  0.00%   0 hl3mm_rp         
 119           0         1          0  0.00%  0.00%  0.00%   0 HACL Queue Proce 
 120           0         4          0  0.00%  0.00%  0.00%   0 HRPC acl request 
 121           0        43          0  0.00%  0.00%  0.00%   0 HACL Acl Manager 
 122           0         1          0  0.00%  0.00%  0.00%   0 HRPC backup inte 
 123           0         1          0  0.00%  0.00%  0.00%   0 HRPC cdp request 
 124           0         3          0  0.00%  0.00%  0.00%   0 HRPC lldp reques 
 125           0         5          0  0.00%  0.00%  0.00%   0 HULC CISP Proces 
 126        4577     39096        117  0.00%  0.00%  0.00%   0 HRPC dot1x reque 
 127           0         1          0  0.00%  0.00%  0.00%   0 Dot1X Msg Retry  
 128        3417     22012        155  0.00%  0.00%  0.00%   0 HULC DOT1X Proce 
 129           0         1          0  0.00%  0.00%  0.00%   0 HRPC foxhound re 
 130           0         2          0  0.00%  0.00%  0.00%   0 Hulc Foxhound Pr 
 131           0         7          0  0.00%  0.00%  0.00%   0 HRPC system mtu  
 132           0         1          0  0.00%  0.00%  0.00%   0 SMI MSG Retry Pr 
 133           0         4          0  0.00%  0.00%  0.00%   0 HRPC Smart Insta 
 134           0         1          0  0.00%  0.00%  0.00%   0 HRPC sdm request 
   7          27       342         78  0.00%  0.00%  0.00%   0 Net Input        
 136           0         2          0  0.00%  0.00%  0.00%   0 HSTP Sync Proces 
 137         485      4964         97  0.00%  0.00%  0.00%   0 HRPC stp_cli req 
 138         626      4086        153  0.00%  0.00%  0.00%   0 HRPC stp_state_s 
 139           0         2          0  0.00%  0.00%  0.00%   0 S/W Bridge Proce 
 140           0        95          0  0.00%  0.00%  0.00%   0 HRPC hudld reque 
 141           0         1          0  0.00%  0.00%  0.00%   0 HRPC vqpc reques 
 142           0         1          0  0.00%  0.00%  0.00%   0 BCM cable diags  
 143           0         1          0  0.00%  0.00%  0.00%   0 HRPC iec_load_ba 
 144           9        36        250  0.00%  0.00%  0.00%   0 HRPC l2pt qnq rp 
 145           0         1          0  0.00%  0.00%  0.00%   0 HRPC aim request 
 146           0         2          0  0.00%  0.00%  0.00%   0 MACsec Process   
 147           0         1          0  0.00%  0.00%  0.00%   0 HRPC macsec requ 
 148           8        11        727  0.00%  0.00%  0.00%   0 HRPC hled reques 
   1      101398   1612550         62  0.00%  0.00%  0.00%   0 Chunk Manager    
 150      877240  23650115         37  0.00%  0.00%  0.00%   0 HL3U bkgrd proce 
 151     3373734  38687769         87  0.00%  0.00%  0.00%   0 HRPC hl3u reques 
 152       25962   7416600          3  0.00%  0.00%  0.00%   0 HL3U PBR bkgrd p 
 153        1180    270720          4  0.00%  0.00%  0.00%   0 HL3U PBR n-h res 
 154           0         1          0  0.00%  0.00%  0.00%   0 HRPC dtp request 
 155           0         1          0  0.00%  0.00%  0.00%   0 HRPC show_forwar 
 156          34       127        267  0.00%  0.00%  0.00%   0 HRPC snmp reques 
  79           0        15          0  0.00%  0.00%  0.00%   0 HRPC hdm blockin 
  80          16         6       2666  0.00%  0.00%  0.00%   0 HRPC cfg_backup  
  83           0         1          0  0.00%  0.00%  0.00%   0 RTTYC Flush      
 160           0         1          0  0.00%  0.00%  0.00%   0 HRPC span reques 
 161           0         1          0  0.00%  0.00%  0.00%   0 HRPC obfl reques 
 162          17        63        269  0.00%  0.00%  0.00%   0 HRPC system post 
 163          25        25       1000  0.00%  0.00%  0.00%   0 Hulc Reload Mana 
 164           8        80        100  0.00%  0.00%  0.00%   0 HRPC hrcli-event 
 165       26905     21811       1233  0.00%  0.00%  0.00%   0 HRPC rfs request 
  84         478      2192        218  0.00%  0.00%  0.00%   0 Hulc Port-Securi 
 167       50860  10798279          4  0.00%  0.00%  0.00%   0 Power RPS Proces 
  85        2003     20399         98  0.00%  0.00%  0.00%   0 HRPC hpsecure re 
 169          24        18       1333  0.00%  0.00%  0.00%   0 HL2MCM           
  86      157094    696496        225  0.00%  0.00%  0.00%   0 HRPC hlfm reques 
 112           0         1          0  0.00%  0.00%  0.00%   0 hpm vp events ca 
 172       18952    541193         35  0.00%  0.00%  0.00%   0 MMN bkgrd proces 
 173         192      6148         31  0.00%  0.00%  0.00%   0 Auth Manager     
 174           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Mgr Proces 
 175           0         1          0  0.00%  0.00%  0.00%   0 MAB Framework    
 176           0         1          0  0.00%  0.00%  0.00%   0 AUTH POLICY Fram 
 177           0         1          0  0.00%  0.00%  0.00%   0 CMD HANDLER      
 178        1167      6162        189  0.00%  0.00%  0.00%   0 802.1x switch    
 179       25004    541195         46  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 180           0         1          0  0.00%  0.00%  0.00%   0 802.1x Webauth F 
 181      366276   2213645        165  0.00%  0.00%  0.00%   0 DTP Protocol     
 182           0         1          0  0.00%  0.00%  0.00%   0 EAP Framework    
 183           0         1          0  0.00%  0.00%  0.00%   0 EAP Test         
 184           0         1          0  0.00%  0.00%  0.00%   0 HRPC dai request 
 185           0         1          0  0.00%  0.00%  0.00%   0 HULC DAI Process 
 186           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip device t 
 187           0         1          0  0.00%  0.00%  0.00%   0 HRPC ip source g 
 188           0         1          0  0.00%  0.00%  0.00%   0 HULC IP Source g 
 189      346181  32488545         10  0.00%  0.00%  0.00%   0 UDLD             
 190        2331   1082952          2  0.00%  0.00%  0.00%   0 Port-Security    
 191           0         2          0  0.00%  0.00%  0.00%   0 IP Host Track Pr 
 192           0         1          0  0.00%  0.00%  0.00%   0 Link State Group 
 193       97603   3226196         30  0.00%  0.00%  0.00%   0 Ethchnl          
 194        1551      1194       1298  0.00%  0.00%  0.00%   0 VMATM Callback   
 195           0         2          0  0.00%  0.00%  0.00%   0 CDP Forward Proc 
 196      595836 321015593          1  0.00%  0.00%  0.00%   0 MDFS MFIB Proces 
 197           9         2       4500  0.00%  0.00%  0.00%   0 MKA              
 198         235      2964         79  0.00%  0.00%  0.00%   0 AAA Server       
 199         158      1645         96  0.00%  0.00%  0.00%   0 AAA ACCT Proc    
 200           0         1          0  0.00%  0.00%  0.00%   0 ACCT Periodic Pr 
 201           0         1          0  0.00%  0.00%  0.00%   0 AAA System Acct  
 202           0         1          0  0.00%  0.00%  0.00%   0 Auth-proxy AAA B 
 203         394    108295          3  0.00%  0.00%  0.00%   0 IP Admin SM Proc 
 204    32395513  40403923        801  0.00%  0.08%  0.07%   0 CDP Protocol     
 205          50        70        714  0.00%  0.00%  0.00%   0 Collection proce 
 206         851      4694        181  0.00%  0.00%  0.00%   0 HRPC hl2mcm igmp 
 207           0         2          0  0.00%  0.00%  0.00%   0 AAA Dictionary R 
 208        1229    270738          4  0.00%  0.00%  0.00%   0 DHCP Snooping    
 209           0         2          0  0.00%  0.00%  0.00%   0 EAPoUDP Process  
 210           0         3          0  0.00%  0.00%  0.00%   0 CEF switching ba 
 211     9165208  82862034        110  0.00%  0.03%  0.00%   0 IP Input         
 212           0         1          0  0.00%  0.00%  0.00%   0 ICMP event handl 
 213      127478  62392808          2  0.00%  0.00%  0.00%   0 IP ARP Track     
 214           0        17          0  0.00%  0.00%  0.00%   0 ADJ resolve proc 
 215           0         3          0  0.00%  0.00%  0.00%   0 ADJ NSF process  
 216           0         1          0  0.00%  0.00%  0.00%   0 IPv6 ping proces 
 217           0         1          0  0.00%  0.00%  0.00%   0 EM Action CNS    
 218           0         5          0  0.00%  0.00%  0.00%   0 SMI Director DB  
 219           0         1          0  0.00%  0.00%  0.00%   0 SMI CDP Update H 
 220           0         1          0  0.00%  0.00%  0.00%   0 SMI Backup Proce 
 221           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC server p 
 222           0         1          0  0.00%  0.00%  0.00%   0 SMI IBC client p 
 223           0         2          0  0.00%  0.00%  0.00%   0 SMI IBC Download 
 117      182970  21370114          8  0.00%  0.00%  0.00%   0 hl3mm            
 225         667    541449          1  0.00%  0.00%  0.00%   0 Spanning Tree St 
 226           0         2          0  0.00%  0.00%  0.00%   0 KRB5 AAA         
 227          18       109        165  0.00%  0.00%  0.00%   0 SXP CORE         
 228      162358    651676        249  0.00%  0.00%  0.00%   0 CEF background p 
 229           0         1          0  0.00%  0.00%  0.00%   0 IP IRDP          
 230          34         2      17000  0.00%  0.00%  0.00%   0 CEF RF HULC Conv 
 231        2517     17418        144  0.00%  0.00%  0.00%   0 XDR mcast        
 232           8        14        571  0.00%  0.00%  0.00%   0 OBFL Cfg Dispatc 
 157         686       115       5965  0.00%  0.00%  0.00%   0 HULC SNMP Proces 
 235      128798   3227405         39  0.00%  0.00%  0.00%   0 IP ACL XDR LC Ba 
 236           0         4          0  0.00%  0.00%  0.00%   0 MDFS LC Process  
 237         318     15620         20  0.00%  0.00%  0.00%   0 TCP Timer        
 238        1133      1351        838  0.00%  0.00%  0.00%   0 TCP Protocols    
 239      100560  33274059          3  0.00%  0.00%  0.00%   0 Socket Timers    
 240         466    108401          4  0.00%  0.00%  0.00%   0 HTTP CORE        
 241         917    406093          2  0.00%  0.00%  0.00%   0 Cluster L2       
 242      173851   3226195         53  0.00%  0.00%  0.00%   0 Cluster RARP     
 243       21824   4062016          5  0.00%  0.00%  0.00%   0 Cluster Base     
 244           0         2          0  0.00%  0.00%  0.00%   0 CEF LC IPC Backg 
 245      168805  39165013          4  0.00%  0.00%  0.00%   0 CEF LC Stats     
 246           0         1          0  0.00%  0.00%  0.00%   0 RARP Input       
 247           0         1          0  0.00%  0.00%  0.00%   0 Critical Auth    
 248           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 249           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 250           0         2          0  0.00%  0.00%  0.00%   0 Dot1x Supplicant 
 251           0         4          0  0.00%  0.00%  0.00%   0 HRPC dhcp snoopi 
 252           0         7          0  0.00%  0.00%  0.00%   0 HULC DHCP Snoopi 
 253           0         1          0  0.00%  0.00%  0.00%   0 HRPC stack power 
 254         728      1440        505  0.00%  0.00%  0.00%   0 IGMPSN L2MCM     
 255     6765968  58162831        116  0.00%  0.00%  0.00%   0 IGMPSN MRD       
 256    53600923 247971190        216  0.00%  0.16%  0.16%   0 IGMPSN           
 257           0         1          0  0.00%  0.00%  0.00%   0 IGMPQR           
 258           0         3          0  0.00%  0.00%  0.00%   0 L2TRACE SERVER   
 259         669      1435        466  0.00%  0.00%  0.00%   0 MLDSN L2MCM      
 260           0         1          0  0.00%  0.00%  0.00%   0 MRD              
 261           0         1          0  0.00%  0.00%  0.00%   0 MLD_SNOOP        
 262     3363323  67951467         49  0.00%  0.01%  0.00%   0 DHCPD Receive    
 263           0         1          0  0.00%  0.00%  0.00%   0 HRPC x_setup req 
 264       43432    541039         80  0.00%  0.00%  0.00%   0 IP RIB Update    
 265          16       249         64  0.00%  0.00%  0.00%   0 HRPC hl2mcm mlds 
 266           0        20          0  0.00%  0.00%  0.00%   0 SNMP Timers      
 267           0         2          0  0.00%  0.00%  0.00%   0 EPM MAIN PROCESS 
 268           0        33          0  0.00%  0.00%  0.00%   0 LOCAL AAA        
 269          83       545        152  0.00%  0.00%  0.00%   0 ENABLE AAA       
 270           0         2          0  0.00%  0.00%  0.00%   0 LINE AAA         
 271       18756     11105       1688  0.00%  0.00%  0.00%   0 SNMP Traps       
 272       10522     22584        465  0.00%  0.00%  0.00%   0 TPLUS            
 273           8        12        666  0.00%  0.00%  0.00%   0 crypto engine pr 
 274          25         4       6250  0.00%  0.00%  0.00%   0 Crypto CA        
 275           0         1          0  0.00%  0.00%  0.00%   0 Crypto PKI-CRL   
 276           0         1          0  0.00%  0.00%  0.00%   0 Crypto SSL       
 277           0         1          0  0.00%  0.00%  0.00%   0 encrypt proc     
 278           0        41          0  0.00%  0.00%  0.00%   0 VTP Trap Process 
 279           0         2          0  0.00%  0.00%  0.00%   0 VTPMIB EDIT BUFF 
 280           0         2          0  0.00%  0.00%  0.00%   0 DHCP Security He 
 281           0         1          0  0.00%  0.00%  0.00%   0 HCD Process      
 282           0         5          0  0.00%  0.00%  0.00%   0 HRPC cable diagn 
 283           0         2          0  0.00%  0.00%  0.00%   0 DiagCard2/-1     
 284     2400249 556767328          4  0.00%  0.01%  0.00%   0 PM Callback      
 285          25        16       1562  0.00%  0.00%  0.00%   0 VLAN Manager     
 286           0         1          0  0.00%  0.00%  0.00%   0 DiagCard4/-1     
 287        6264   2599981          2  0.00%  0.00%  0.00%   0 dhcp snooping sw 
 288           0         1          0  0.00%  0.00%  0.00%   0 Licensing MIB pr 
 289           0         2          0  0.00%  0.00%  0.00%   0 EEM ED Routing   
 290         316     20942         15  0.00%  0.00%  0.00%   0 EEM ED Syslog    
 291           0         1          0  0.00%  0.00%  0.00%   0 image mgr        
 292         200      1583        126  0.00%  0.00%  0.00%   0 AAA SEND STOP EV 
 293       36339     10046       3617  0.00%  0.00%  0.00%   0 Syslog Traps     
 294        1494     11046        135  0.00%  0.00%  0.00%   0 Syslog           
 295        4313       825       5227  0.00%  0.00%  0.00%   0 SpanTree Helper  
 296         137       436        314  0.00%  0.00%  0.00%   0 EEM Server       
 297           0         2          0  0.00%  0.00%  0.00%   0 EEM Policy Direc 
 298        3474     18034        192  0.00%  0.00%  0.00%   0 SSH Event handle 
 299           0         2          0  0.00%  0.00%  0.00%   0 EEM ED CLI       
 300           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Counter   
 301           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Interface 
 302           0         3          0  0.00%  0.00%  0.00%   0 EEM ED IOSWD     
 303           0         3          0  0.00%  0.00%  0.00%   0 EEM ED None      
 304           0         3          0  0.00%  0.00%  0.00%   0 EEM ED OIR       
 305           0         1          0  0.00%  0.00%  0.00%   0 DiagCard3/-1     
 306           0         6          0  0.00%  0.00%  0.00%   0 EEM ED SNMP      
 307           0         3          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Obje 
 308           0         3          0  0.00%  0.00%  0.00%   0 EEM ED Ipsla     
 309           0         2          0  0.00%  0.00%  0.00%   0 EEM ED SNMP Noti 
 310        6982    939301          7  0.00%  0.00%  0.00%   0 EEM ED Timer     
 311           0         2          0  0.00%  0.00%  0.00%   0 STP FAST TRANSIT 
 312          82      1602         51  0.00%  0.00%  0.00%   0 CSRT RAPID TRANS 
 313           0         3          0  0.00%  0.00%  0.00%   0 RBM CORE         
 314    15452081    873675      17686  0.00%  0.00%  0.00%   0 crypto sw pk pro 
 166           0         1          0  0.00%  0.00%  0.00%   0 HRFS OIR Proc    
 316         200       638        313  0.00%  0.00%  0.00%   0 SpanTree Flush   
 317           0         1          0  0.00%  0.00%  0.00%   0 DiagCard1/-1     
 318           0         1          0  0.00%  0.00%  0.00%   0 Connection Mgr   
 319         889    279745          3  0.00%  0.00%  0.00%   0 DHCPD Timer      
 320       15192    541196         28  0.00%  0.00%  0.00%   0 DHCPD Database   
 321           0         1          0  0.00%  0.00%  0.00%   0 LICENSE AGENT    
 322       14624   2164634          6  0.00%  0.00%  0.00%   0 MDFS LC Download 
 323     4050002  15005407        269  0.00%  0.00%  0.00%   0 IP SNMP          
 324     2368639   7407993        319  0.00%  0.00%  0.00%   0 PDU DISPATCHER   
 325    71933335  29059939       2475  0.00%  0.00%  0.00%   0 SNMP ENGINE      
 326           0         2          0  0.00%  0.00%  0.00%   0 IP SNMPV6        
 327           0         1          0  0.00%  0.00%  0.00%   0 SNMP ConfCopyPro 
 328      142064  32753263          4  0.00%  0.00%  0.00%   0 NTP              
 329     1714687 327438225          5  0.00%  0.00%  0.00%   0 MDFS RP process  
 330         149       135       1103  0.00%  0.00%  0.00%   0 hulc cfg mgr mas 
 331      260212      1379     188696  0.00% 12.64%  4.50%   0 hulc running con 
 332           0         1          0  0.00%  0.00%  0.00%   0 RTTYS Process    
 171           0         3          0  0.00%  0.00%  0.00%   0 Switch Backup In 
 334       19497    541016         36  0.00%  0.00%  0.00%   0 802.1x MDA Aging 
 337        4718    180433         26  0.00%  0.00%  0.00%   0 HCMP sync proces 
 338           0         2          0  0.00%  0.00%  0.00%   0 hulc_tb_process  
 339     2415904   9842050        245  0.00%  0.01%  0.00%   0 IPC LC Message H 
 340           0         4          0  0.00%  0.00%  0.00%   0 XDR RP Ping Back 
 341        4567    270896         16  0.00%  0.00%  0.00%   0 XDR RP backgroun 
 342           0         1          0  0.00%  0.00%  0.00%   0 XDR RP Test Back 
 343           0         7          0  0.00%  0.00%  0.00%   0 CEF RP IPC Backg