'Re: [Nagios-users] =?utf-8?q?how_to_fix_excessive_latency?='

[prev in list] [next in list] [prev in thread] [next in thread] 

List:       nagios-users
Subject:    Re: [Nagios-users] =?utf-8?q?how_to_fix_excessive_latency?=
From:       "=?utf-8?B?d3dhbmdob25ncnVp?=" <wwanghongrui () cebbank ! com>
Date:       2010-06-29 1:57:47
Message-ID: 201006290957462960388 () cebbank ! com
[Download RAW message or body]

[Attachment #2 (multipart/alternative)]

[Attachment #4 (text/plain)]

Thanks your reply. We are writing to mysql database by ndoutils.We don't use nsca. \
About external_command_buffer_slots, we don't set it up. status_update_interval 

I use vmstate to capture system performance,like below.Maybe the bottleneck is not at \
system.

procs -----------memory---------- ---swap-- -----io---- -system-- -----cpu------
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 1  0    160 239708 289248 6031924    0    0     1    29    0    0  2  3 94  1  0
 1  0    160 242168 289248 6031924    0    0     0     0  260 1023  0  6 94  0  0
 1  0    160 246912 289248 6031924    0    0     0   392  291 1044  0  6 93  1  0
 1  0    160 246696 289248 6031924    0    0     0   100  265 1056  0  6 93  0  0
 2  0    160 243604 289248 6035008    0    0  4668     0  598 1324  1  7 91  1  0
 1  0    160 245276 289248 6035008    0    0    32     0  265 1403  0  6 93  0  0
 1  0    160 245268 289248 6035008    0    0     0     0  253 1187  0  6 94  0  0
 1  1    160 245548 289248 6035008    0    0     0  4728  887 1759  0  6 88  5  0
 1  1    160 246288 289248 6036036    0    0     0  1740 1065 1103  1  6 87  6  0
 0  1    160 247368 289248 6036036    0    0     0  1720 1086 2252  1  3 90  6  0
 0  0    160 247492 289248 6036036    0    0     0   980  984  539  4  0 90  6  0
 0  0    160 247624 289248 6036036    0    0     0     0  254  330  0  0 100  0  0
 0  0    160 247624 289248 6036036    0    0     0  5420  622  342  0  0 97  3  0
 0  0    160 247844 289248 6036036    0    0     0     0  254  312  0  0 100  0  0
 0  0    160 247844 289248 6036036    0    0     0     0  254  317  0  0 100  0  0
 0  0    160 247984 289248 6036036    0    0     0     0  254  313  0  0 100  0  0
 0  0    160 247984 289248 6036036    0    0     0     0  254  315  0  0 100  0  0
 0  0    160 248260 289248 6036036    0    0     0   352  362  317  0  0 99  1  0
 0  0    160 248260 289248 6036036    0    0     0     0  306  303  0  0 100  0  0
 1  0    160 248876 289248 6036036    0    0     0   100  270  367  0  0 99  0  0
 5  0    160 233840 289248 6036036    0    0     0     0  341 1490  6  8 86  0  0
 5  0    160 187468 289248 6036036    0    0     0     4  866 2736  9 22 69  0  0
 4  1    160 171508 289248 6036036    0    0     0  5352  837 2205  3 20 76  1  0
procs -----------memory---------- ---swap-- -----io---- -system-- -----cpu------
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 4  0    160 175172 289248 6036036    0    0     0   568  453 2091  1 15 83  0  0
 3  0    160 154108 289248 6036036    0    0     0     0  427 3456  1 20 79  0  0
 5  0    160 125684 289248 6036036    0    0     0     4  469 2620  1 19 80  0  0
 9  0    160 146712 289248 6036036    0    0     0     0  603 2272  4 26 70  0  0
 6  0    160 168804 289248 6036036    0    0     0     0  668 2784  9 27 64  0  0
 4  0    160 181032 289248 6036036    0    0     0  1164  736 2654  4 25 70  1  0
 1  0    160 210728 289248 6036036    0    0     0     0  465 2152  5 19 76  0  0
 1  0    160 211216 289248 6036036    0    0     0     0  294  837  0  6 94  0  0
 1  0    160 216644 289248 6036036    0    0     0     0  293  954  0  7 93  0  0
 1  0    160 227320 289248 6036036    0    0     0     0  285  943  0  8 92  0  0
 1  0    160 238864 289248 6036036    0    0     0   576  343 2308  1  8 91  1  0
 1  2    160 233660 289248 6039120    0    0  2252   100  393 1046  1  6 92  1  0
 1  0    160 239548 289248 6039120    0    0   984  3316  571 1055  1  6 92  1  0
 1  0    160 240084 289248 6039120    0    0     0     0  253  998  0  6 94  0  0
 1  0    160 239968 289248 6039120    0    0     0     0  253  990  0  6 93  0  0
 1  1    160 240388 289248 6039120    0    0     0  1956  781 1111  0  6 89  4  0
 1  1    160 240256 289248 6039120    0    0     0  1828 1088 1452  1  6 87  6  0
 1  2    160 239648 289248 6039120    0    0     0  1620 1038 1614  1  6 87  6  0
 1  1    160 240028 289248 6039120    0    0     0  1700 1065 1459  0  6 85  9  0
 1  1    160 239912 289248 6039120    0    0     0  2512 1211 1623  0  6 87  6  0
 1  1    160 240648 289248 6039120    0    0     4  2880 1380 1128  0  5 87  7  0
 1  0    160 241124 289248 6039120    0    0     0    84  499 1024  0  6 93  0  0
 1  0    160 241000 289248 6039120    0    0     0   296  287 1757  1  6 93  1  0
procs -----------memory---------- ---swap-- -----io---- -system-- -----cpu------
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 3  0    160 241808 289248 6039120    0    0     0     0  253 1630  1  6 93  0  0
 1  0    160 241800 289248 6039120    0    0     0     0  253  977  0  6 94  0  0
 1  0    160 241880 289248 6039120    0    0     0     0  253  989  0  6 94  0  0
 3  0    160 218192 289248 6039120    0    0     0   100  350 1810  3 14 83  0  0
 4  0    160 181560 289248 6039120    0    0     0  5792  957 2948  6 21 72  1  0
 6  0    160 182036 289248 6040148    0    0     0     0  853 2947  7 22 70  0  0
 4  0    160 187860 289248 6040148    0    0     0     0  564 2748 12 25 64  0  0
 4  0    160 202880 289248 6040148    0    0     0     0  432 2336  5 22 73  0  0
 5  0    160 189956 289248 6040148    0    0     0   416  824 2762  7 24 69  1  0
 2  0    160 195912 289248 6041176    0    0    52  1224  789 2332  5 15 78  2  0
 1  0    160 205060 289248 6041176    0    0     0     8  343 1718  2  8 90  0  0
 1  0    160 205076 289248 6041176    0    0     0     0  320 1177  0  6 93  0  0
 1  0    160 213844 289248 6041176    0    0     0     0  315 1100  0  7 92  0  0
 1  0    160 226900 289248 6041176    0    0     0     0  305 1210  0  8 92  0  0
 2  0    160 227188 289248 6041176    0    0     0   956  556  901  0  4 92  3  0
 1  0    160 228924 289248 6041176    0    0     0     0  294 1034  1  6 93  0  0
 1  0    160 229740 289248 6041176    0    0     0     0  292 1235  1  6 93  0  0
 1  0    160 230228 289248 6041176    0    0     0     0  287 1696  1  6 93  0  0
 3  1    160 230456 289248 6041176    0    0     0   128  288 1307  1  6 93  0  0
 1  1    160 228756 289248 6042204    0    0  3052  4944  921 1673  5  7 84  4  0
 1  1    160 229004 289248 6042204    0    0     0  1676 1061 1122  1  6 87  6  0
 1  1    160 229004 289248 6042204    0    0     0  1672 1081 1093  0  6 87  6  0
 1  1    160 230788 289248 6042204    0    0     0  1856 1171 1198  1  6 87  6  0

Regards

HongRui Wang
Mail:wwanghongrui@cebbank.com
2010-06-29



发件人： shadih rahman
发送时间： 2010-06-29 00:57:24
收件人： wwanghongrui; Nagios Users List
抄送：
主题： Re: [Nagios-users] how to fix excessive latency

There is something definitely not right here.  We have about 10000 checks and the \
performance is lot better.  Anyhow we are using the following values

check_result_reaper_frequency
max_check_result_reaper_time 


You should enabled debug mode and check the debug logs.  Are you writing to any \
backend database?  Are you using nsca to transfer service information to remote \
location.  what is the value of your status_update_interval?  what is your \
external_command_buffer_slots?





2010/6/28 wwanghongrui <wwanghongrui@cebbank.com>

Hi,guys~

Our nagios server envrionment: Nagios3.2.0 + Suse10-sp2 x86_64 + 8 GB mem + 4 x ( \
Xeon(R) CPU  E7420  @ 2.13GHz ) We have 500+ active check hosts and 3k+ active check \
services.  I have adjust some perfomance parameters in nagios.cfg, like below: \
use_large_installation_tweaks=1 child_processes_fork_twice=0
enable_environment_macros=0
check_result_reaper_frequency=5
max_check_result_reaper_time0

But, The nagios performance is still bad, like below:

Services Actively Checked:Time FrameServices Checked
<= 1 minute:271 (9.4%)
<= 5 minutes:1749 (60.4%)
<= 15 minutes:2824 (97.4%)
<= 1 hour:2898 (100.0%)
Since program start:  2869 (99.0%)

MetricMin.Max.Average
Check Execution Time:  0.09 sec32.23 sec1.113 sec
Check Latency:1.12 sec212.59 sec116.329 sec
Percent State Change:0.00%23.88%0.05%


Hosts Acrively Checked:Time FrameHosts Checked
<= 1 minute:32 (5.5%)
<= 5 minutes:419 (71.5%)
<= 15 minutes:586 (100.0%)
<= 1 hour:586 (100.0%)
Since program start:  586 (100.0%)

MetricMin.Max.Average
Check Execution Time:  0.08 sec4.29 sec3.035 sec
Check Latency:0.00 sec135.25 sec116.420 sec
Percent State Change:0.00%11.32%0.09%




 How could I find which services check or hosts check cause this seriously check \
latency?


Regards

HongRui Wang
mail: wwanghongrui@cebbank.com
2010-06-28



------------------------------------------------------------------------------
This SF.net email is sponsored by Sprint
What will you do first with EVO, the first 4G phone?
Visit sprint.com/first -- http://p.sf.net/sfu/sprint-com-first
_______________________________________________
Nagios-users mailing list
Nagios-users@lists.sourceforge.net
https://lists.sourceforge.net/lists/listinfo/nagios-users
> > > Please include Nagios version, plugin version (-v) and OS when reporting any \
> > > issue.
> > > Messages without supporting info will risk being sent to /dev/null




--
Cordially,
Shadhin Rahman


[Attachment #5 (text/html)]

<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.0 Transitional//EN">
<HTML><HEAD>
<STYLE type=text/css>@import url( C:\Documents and Settings\user\Local \
Settings\Temporary Internet Files\scrollbar.css ); </STYLE>

<META http-equiv=Content-Type content="text/html; charset=UTF-8">
<META content="MSHTML 6.00.6000.16735" name=GENERATOR>
<STYLE>@font-face {
	font-family: 宋体;
}
@font-face {
	font-family: Verdana;
}
@font-face {
	font-family: @宋体;
}
@page Section1 {size: 595.3pt 841.9pt; margin: 72.0pt 90.0pt 72.0pt 90.0pt; \
layout-grid: 15.6pt; } P.MsoNormal {
	TEXT-JUSTIFY: inter-ideograph; FONT-SIZE: 10.5pt; MARGIN: 0cm 0cm 0pt; FONT-FAMILY: \
"Times New Roman"; TEXT-ALIGN: justify }
LI.MsoNormal {
	TEXT-JUSTIFY: inter-ideograph; FONT-SIZE: 10.5pt; MARGIN: 0cm 0cm 0pt; FONT-FAMILY: \
"Times New Roman"; TEXT-ALIGN: justify }
DIV.MsoNormal {
	TEXT-JUSTIFY: inter-ideograph; FONT-SIZE: 10.5pt; MARGIN: 0cm 0cm 0pt; FONT-FAMILY: \
"Times New Roman"; TEXT-ALIGN: justify }
A:link {
	COLOR: blue; TEXT-DECORATION: underline
}
SPAN.MsoHyperlink {
	COLOR: blue; TEXT-DECORATION: underline
}
A:visited {
	COLOR: purple; TEXT-DECORATION: underline
}
SPAN.MsoHyperlinkFollowed {
	COLOR: purple; TEXT-DECORATION: underline
}
SPAN.EmailStyle17 {
	FONT-WEIGHT: normal; COLOR: windowtext; FONT-STYLE: normal; FONT-FAMILY: Verdana; \
TEXT-DECORATION: none; mso-style-type: personal-compose }
DIV.Section1 {
	page: Section1
}
BLOCKQUOTE {
	MARGIN-TOP: 0px; MARGIN-BOTTOM: 0px; MARGIN-LEFT: 2em
}
OL {
	MARGIN-TOP: 0px; MARGIN-BOTTOM: 0px
}
UL {
	MARGIN-TOP: 0px; MARGIN-BOTTOM: 0px
}
</STYLE>
</HEAD>
<BODY>
<DIV><FONT face=Verdana size=2><FONT color=#00ccff>Thanks your reply. We are 
writing to mysql database by ndoutils.We don't use nsca. <FONT size=3><FONT 
size=2>About external_command_buffer_slots, we don't set it up.</FONT> 
</FONT></FONT></FONT></DIV>
<DIV style="TEXT-INDENT: 6em"><FONT color=#00ccff><FONT face=Verdana 
size=2>status_update_interval</FONT>&nbsp;=15</FONT> </DIV>
<DIV>&nbsp;</DIV>
<DIV>I use vmstate to capture system performance,like below.Maybe the bottleneck 
is not at system.</DIV>
<DIV>&nbsp;</DIV>
<DIV>
<DIV>procs&nbsp;-----------memory----------&nbsp;---swap--&nbsp;-----io----&nbsp;-system--&nbsp;-----cpu------</DIV>
 <DIV>&nbsp;r&nbsp;&nbsp;b&nbsp;&nbsp;&nbsp;swpd&nbsp;&nbsp;&nbsp;free&nbsp;&nbsp;&nbs \
p;buff&nbsp;&nbsp;cache&nbsp;&nbsp;&nbsp;si&nbsp;&nbsp;&nbsp;so&nbsp;&nbsp;&nbsp;&nbsp \
;bi&nbsp;&nbsp;&nbsp;&nbsp;bo&nbsp;&nbsp;&nbsp;in&nbsp;&nbsp;&nbsp;cs&nbsp;us&nbsp;sy&nbsp;id&nbsp;wa&nbsp;st</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;239708&nbsp;289248&nbsp;603 \
1924&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;1& \
nbsp;&nbsp;&nbsp;&nbsp;29&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;2&nbsp;&nbsp;3&nbsp;94&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;242168&nbsp;289248&nbsp;603 \
1924&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;260&nbsp;1023&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;94&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;246912&nbsp;289248&nbsp;603 \
1924&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;392&nbsp;&nbsp;291&nbsp;1044&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;246696&nbsp;289248&nbsp;603 \
1924&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;100&nbsp;&nbsp;265&nbsp;1056&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;2&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;243604&nbsp;289248&nbsp;603 \
5008&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;4668&nbsp;&nbsp;&nbs \
p;&nbsp;&nbsp;0&nbsp;&nbsp;598&nbsp;1324&nbsp;&nbsp;1&nbsp;&nbsp;7&nbsp;91&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;245276&nbsp;289248&nbsp;603 \
5008&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;32&nbsp; \
&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;265&nbsp;1403&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;245268&nbsp;289248&nbsp;603 \
5008&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;253&nbsp;1187&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;94&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;245548&nbsp;289248&nbsp;603 \
5008&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;4728&nbsp;&nbsp;887&nbsp;1759&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;88&nbsp;&nbsp;5&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;246288&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1740&nbsp;1065&nbsp;1103&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;87&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247368&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1720&nbsp;1086&nbsp;2252&nbsp;&nbsp;1&nbsp;&nbsp;3&nbsp;90&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247492&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;980&nbsp;&nbsp;984&nbsp;&nbsp;539&nbsp;&nbsp;4&nbsp;&nbsp;0&nbsp;90&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247624&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;254&nbsp;&nbsp;330&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;100&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247624&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;5420&nbsp;&nbsp;622&nbsp;&nbsp;342&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;97&nbsp;&nbsp;3&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247844&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;254&nbsp;&nbsp;312&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;100&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247844&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;254&nbsp;&nbsp;317&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;100&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247984&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;254&nbsp;&nbsp;313&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;100&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;247984&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;254&nbsp;&nbsp;315&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;100&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;248260&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;352&nbsp;&nbsp;362&nbsp;&nbsp;317&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;99&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;0&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;248260&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;306&nbsp;&nbsp;303&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;100&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;248876&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;100&nbsp;&nbsp;270&nbsp;&nbsp;367&nbsp;&nbsp;0&nbsp;&nbsp;0&nbsp;99&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;5&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;233840&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;341&nbsp;1490&nbsp;&nbsp;6&nbsp;&nbsp;8&nbsp;86&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;5&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;187468&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;4&nbsp;&nbsp;866&nbsp;2736&nbsp;&nbsp;9&nbsp;22&nbsp;69&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;4&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;171508&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;5352&nbsp;&nbsp;837&nbsp;2205&nbsp;&nbsp;3&nbsp;20&nbsp;76&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>procs&nbsp;-----------memory----------&nbsp;---swap--&nbsp;-----io----&nbsp;-system--&nbsp;-----cpu------</DIV>
 <DIV>&nbsp;r&nbsp;&nbsp;b&nbsp;&nbsp;&nbsp;swpd&nbsp;&nbsp;&nbsp;free&nbsp;&nbsp;&nbs \
p;buff&nbsp;&nbsp;cache&nbsp;&nbsp;&nbsp;si&nbsp;&nbsp;&nbsp;so&nbsp;&nbsp;&nbsp;&nbsp \
;bi&nbsp;&nbsp;&nbsp;&nbsp;bo&nbsp;&nbsp;&nbsp;in&nbsp;&nbsp;&nbsp;cs&nbsp;us&nbsp;sy&nbsp;id&nbsp;wa&nbsp;st</DIV>
 <DIV>&nbsp;4&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;175172&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;568&nbsp;&nbsp;453&nbsp;2091&nbsp;&nbsp;1&nbsp;15&nbsp;83&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;3&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;154108&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;427&nbsp;3456&nbsp;&nbsp;1&nbsp;20&nbsp;79&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;5&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;125684&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;4&nbsp;&nbsp;469&nbsp;2620&nbsp;&nbsp;1&nbsp;19&nbsp;80&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;9&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;146712&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;603&nbsp;2272&nbsp;&nbsp;4&nbsp;26&nbsp;70&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;6&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;168804&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;668&nbsp;2784&nbsp;&nbsp;9&nbsp;27&nbsp;64&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;4&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;181032&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1164&nbsp;&nbsp;736&nbsp;2654&nbsp;&nbsp;4&nbsp;25&nbsp;70&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;210728&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;465&nbsp;2152&nbsp;&nbsp;5&nbsp;19&nbsp;76&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;211216&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;294&nbsp;&nbsp;837&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;94&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;216644&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;293&nbsp;&nbsp;954&nbsp;&nbsp;0&nbsp;&nbsp;7&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;227320&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;285&nbsp;&nbsp;943&nbsp;&nbsp;0&nbsp;&nbsp;8&nbsp;92&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;238864&nbsp;289248&nbsp;603 \
6036&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;576&nbsp;&nbsp;343&nbsp;2308&nbsp;&nbsp;1&nbsp;&nbsp;8&nbsp;91&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;2&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;233660&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;2252&nbsp;&nbsp;&nbs \
p;100&nbsp;&nbsp;393&nbsp;1046&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;92&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;239548&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;984&nbsp;&nbsp \
;3316&nbsp;&nbsp;571&nbsp;1055&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;92&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;240084&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;253&nbsp;&nbsp;998&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;94&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;239968&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;253&nbsp;&nbsp;990&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;240388&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1956&nbsp;&nbsp;781&nbsp;1111&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;89&nbsp;&nbsp;4&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;240256&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1828&nbsp;1088&nbsp;1452&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;87&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;2&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;239648&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1620&nbsp;1038&nbsp;1614&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;87&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;240028&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1700&nbsp;1065&nbsp;1459&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;85&nbsp;&nbsp;9&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;239912&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;2512&nbsp;1211&nbsp;1623&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;87&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;240648&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;4& \
nbsp;&nbsp;2880&nbsp;1380&nbsp;1128&nbsp;&nbsp;0&nbsp;&nbsp;5&nbsp;87&nbsp;&nbsp;7&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;241124&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;84&nbsp;&nbsp;499&nbsp;1024&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;241000&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;296&nbsp;&nbsp;287&nbsp;1757&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>procs&nbsp;-----------memory----------&nbsp;---swap--&nbsp;-----io----&nbsp;-system--&nbsp;-----cpu------</DIV>
 <DIV>&nbsp;r&nbsp;&nbsp;b&nbsp;&nbsp;&nbsp;swpd&nbsp;&nbsp;&nbsp;free&nbsp;&nbsp;&nbs \
p;buff&nbsp;&nbsp;cache&nbsp;&nbsp;&nbsp;si&nbsp;&nbsp;&nbsp;so&nbsp;&nbsp;&nbsp;&nbsp \
;bi&nbsp;&nbsp;&nbsp;&nbsp;bo&nbsp;&nbsp;&nbsp;in&nbsp;&nbsp;&nbsp;cs&nbsp;us&nbsp;sy&nbsp;id&nbsp;wa&nbsp;st</DIV>
 <DIV>&nbsp;3&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;241808&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;253&nbsp;1630&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;241800&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;253&nbsp;&nbsp;977&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;94&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;241880&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;253&nbsp;&nbsp;989&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;94&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;3&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;218192&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;100&nbsp;&nbsp;350&nbsp;1810&nbsp;&nbsp;3&nbsp;14&nbsp;83&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;4&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;181560&nbsp;289248&nbsp;603 \
9120&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;5792&nbsp;&nbsp;957&nbsp;2948&nbsp;&nbsp;6&nbsp;21&nbsp;72&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;6&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;182036&nbsp;289248&nbsp;604 \
0148&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;853&nbsp;2947&nbsp;&nbsp;7&nbsp;22&nbsp;70&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;4&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;187860&nbsp;289248&nbsp;604 \
0148&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;564&nbsp;2748&nbsp;12&nbsp;25&nbsp;64&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;4&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;202880&nbsp;289248&nbsp;604 \
0148&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;432&nbsp;2336&nbsp;&nbsp;5&nbsp;22&nbsp;73&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;5&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;189956&nbsp;289248&nbsp;604 \
0148&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;416&nbsp;&nbsp;824&nbsp;2762&nbsp;&nbsp;7&nbsp;24&nbsp;69&nbsp;&nbsp;1&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;2&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;195912&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;52&nbsp; \
&nbsp;1224&nbsp;&nbsp;789&nbsp;2332&nbsp;&nbsp;5&nbsp;15&nbsp;78&nbsp;&nbsp;2&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;205060&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;8&nbsp;&nbsp;343&nbsp;1718&nbsp;&nbsp;2&nbsp;&nbsp;8&nbsp;90&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;205076&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;320&nbsp;1177&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;213844&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;315&nbsp;1100&nbsp;&nbsp;0&nbsp;&nbsp;7&nbsp;92&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;226900&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;305&nbsp;1210&nbsp;&nbsp;0&nbsp;&nbsp;8&nbsp;92&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;2&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;227188&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;956&nbsp;&nbsp;556&nbsp;&nbsp;901&nbsp;&nbsp;0&nbsp;&nbsp;4&nbsp;92&nbsp;&nbsp;3&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;228924&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;294&nbsp;1034&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;229740&nbsp;289248&nbsp;604 \
1176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;292&nbsp;1235&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;230228&nbsp;289248&nbsp;604 \
<DIV>&nbsp;3&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;230456&nbsp;289248&nbsp;6041 \
176&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0&n \
bsp;&nbsp;&nbsp;128&nbsp;&nbsp;288&nbsp;1307&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;93&nbsp;&nbsp;0&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;228756&nbsp;289248&nbsp;604 \
2204&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;3052&nbsp;&nbsp;4944 \
&nbsp;&nbsp;921&nbsp;1673&nbsp;&nbsp;5&nbsp;&nbsp;7&nbsp;84&nbsp;&nbsp;4&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;229004&nbsp;289248&nbsp;604 \
2204&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1676&nbsp;1061&nbsp;1122&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;87&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;229004&nbsp;289248&nbsp;604 \
2204&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1672&nbsp;1081&nbsp;1093&nbsp;&nbsp;0&nbsp;&nbsp;6&nbsp;87&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;1&nbsp;&nbsp;1&nbsp;&nbsp;&nbsp;&nbsp;160&nbsp;230788&nbsp;289248&nbsp;604 \
2204&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;0& \
nbsp;&nbsp;1856&nbsp;1171&nbsp;1198&nbsp;&nbsp;1&nbsp;&nbsp;6&nbsp;87&nbsp;&nbsp;6&nbsp;&nbsp;0</DIV>
 <DIV>&nbsp;</DIV></DIV>
<DIV><FONT face=Verdana size=2>Regards</FONT></DIV>
<DIV><FONT face=Verdana size=2></FONT>&nbsp;</DIV>
<DIV><FONT face=Verdana size=2>HongRui Wang</FONT></DIV>
<DIV><FONT face=Verdana size=2>Mail:wwanghongrui@cebbank.com</FONT></DIV>
<DIV><FONT face=Verdana size=2>2010-06-29</FONT></DIV>
<DIV align=left><FONT color=#c0c0c0>
<DIV align=left><FONT face=Verdana size=2></FONT></FONT></DIV><FONT face=Verdana 
size=2><FONT color=#c0c0c0></FONT></FONT></DIV>
<DIV align=left><FONT face=Verdana size=2>
<DIV align=left>
<HR>
</DIV></FONT></DIV>
<DIV><FONT face=Verdana><FONT size=2><STRONG>发件人：</STRONG> shadih 
rahman</FONT></FONT></DIV>
<DIV><FONT face=Verdana><FONT size=2><STRONG>发送时间：</STRONG> 
2010-06-29&nbsp;00:57:24</FONT></FONT></DIV>
<DIV><FONT face=Verdana><FONT size=2><STRONG>收件人：</STRONG> wwanghongrui; \
Nagios  Users List</FONT></FONT></DIV>
<DIV><FONT face=Verdana><FONT size=2><STRONG>抄送：</STRONG> </FONT></FONT></DIV>
<DIV><FONT face=Verdana><FONT size=2><STRONG>主题：</STRONG> Re: [Nagios-users] \
how  to fix excessive latency</FONT></FONT></DIV>
<DIV><FONT face=Verdana size=2></FONT>&nbsp;</DIV>
<DIV><FONT face=Verdana size=2>There is something definitely not right 
here.&nbsp; We have about 10000 checks and the performance is lot better.&nbsp; 
Anyhow we are using the following values<BR><FONT face=Verdana><FONT size=3>
<DIV style="TEXT-INDENT: 4em"><FONT 
face=@Terminal>check_result_reaper_frequency=10</FONT></DIV>
<DIV style="TEXT-INDENT: 4em"><FONT 
face=@Terminal>max_check_result_reaper_time=20<BR><BR><BR>You should enabled 
debug mode and check the debug logs.&nbsp; Are you writing to any backend 
database?&nbsp; Are you using nsca to transfer service information to remote 
location.&nbsp; what is the value of your status_update_interval?&nbsp; what is 
your external_command_buffer_slots?<BR><BR></FONT></DIV></FONT></FONT><BR><BR>
<DIV class=gmail_quote>2010/6/28 wwanghongrui <SPAN dir=ltr>&lt;<A 
href="mailto:wwanghongrui@cebbank.com">wwanghongrui@cebbank.com</A>&gt;</SPAN><BR>
<BLOCKQUOTE class=gmail_quote 
style="PADDING-LEFT: 1ex; MARGIN: 0pt 0pt 0pt 0.8ex; BORDER-LEFT: rgb(204,204,204) \
1px solid">  <DIV>
  <DIV><FONT face=Verdana><FONT size=2>Hi,guys~</FONT></FONT></DIV>
  <DIV><FONT face=Verdana><FONT size=2></FONT></FONT>&nbsp;</DIV>
  <DIV style="TEXT-INDENT: 2em"><FONT face=Verdana><FONT size=2>Our nagios 
  server envrionment: Nagios3.2.0 + Suse10-sp2 x86_64&nbsp;+ 8 GB mem + 4 x 
  (&nbsp;Xeon(R)&nbsp;CPU&nbsp;&nbsp;E7420&nbsp;&nbsp;@&nbsp;2.13GHz&nbsp;)</FONT></FONT></DIV>
  <DIV style="TEXT-INDENT: 2em"><FONT face=Verdana><FONT size=2>We have 500+ 
  active check hosts and 3k+ active check&nbsp;services. &nbsp;I have adjust 
  some perfomance parameters in nagios.cfg, like below:</FONT></FONT></DIV>
  <DIV style="TEXT-INDENT: 4em">
  <DIV><FONT face=@Terminal>use_large_installation_tweaks=1</FONT></DIV>
  <DIV><FONT face=@Terminal>child_processes_fork_twice=0</FONT></DIV>
  <DIV><FONT face=@Terminal>enable_environment_macros=0</FONT></DIV></DIV><FONT 
  face=Verdana><FONT size=3>
  <DIV style="TEXT-INDENT: 4em"><FONT 
  face=@Terminal>check_result_reaper_frequency=5</FONT></DIV>
  <DIV style="TEXT-INDENT: 4em"><FONT 
  face=@Terminal>max_check_result_reaper_time=30</FONT></DIV>
  <DIV style="TEXT-INDENT: 4em" align=left><FONT size=2></FONT>&nbsp;</DIV>
  <DIV style="TEXT-INDENT: 4em" align=left><FONT size=2>But, The nagios 
  performance is still bad, like below:</FONT></DIV>
  <DIV style="TEXT-INDENT: 6em" align=left>&nbsp;</DIV></FONT><FONT size=2>
  <DIV align=left>
  <TABLE cellPadding=10 border=0>
    <TBODY>
    <TR>
      <TD vAlign=center>
        <DIV>Services Actively Checked<FONT face=Terminal 
      size=2>:</FONT></DIV></TD>
      <TD vAlign=top>
        <TABLE cellSpacing=0 cellPadding=0 border=1>
          <TBODY>
          <TR>
            <TD>
              <TABLE border=0>
                <TBODY>
                <TR>
                  <TH><FONT face=Terminal size=2>Time Frame</FONT></TH>
                  <TH><FONT face=Terminal size=2>Services Checked</FONT></TH></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 1 minute:</FONT></TD>
                  <TD><FONT face=Terminal size=2>271 (9.4%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 5 minutes:</FONT></TD>
                  <TD><FONT face=Terminal size=2>1749 (60.4%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 15 minutes:</FONT></TD>
                  <TD><FONT face=Terminal size=2>2824 (97.4%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 1 hour:</FONT></TD>
                  <TD><FONT face=Terminal size=2>2898 (100.0%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Since program 
                    start:&nbsp;&nbsp;</FONT></TD>
                  <TD><FONT face=Terminal size=2>2869 
                (99.0%)</FONT></TD></TR></TBODY></TABLE></TD></TR></TBODY></TABLE></TD>
  <TD vAlign=top>
        <TABLE cellSpacing=0 cellPadding=0 border=1>
          <TBODY>
          <TR>
            <TD>
              <TABLE border=0>
                <TBODY>
                <TR>
                  <TH><FONT face=Terminal size=2>Metric</FONT></TH>
                  <TH><FONT face=Terminal size=2>Min.</FONT></TH>
                  <TH><FONT face=Terminal size=2>Max.</FONT></TH>
                  <TH><FONT face=Terminal size=2>Average</FONT></TH></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Check Execution 
                    Time:&nbsp;&nbsp;</FONT></TD>
                  <TD><FONT face=Terminal size=2>0.09 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>32.23 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>1.113 sec</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Check Latency:</FONT></TD>
                  <TD><FONT face=Terminal size=2>1.12 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>212.59 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>116.329 sec</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Percent State 
                  Change:</FONT></TD>
                  <TD><FONT face=Terminal size=2>0.00%</FONT></TD>
                  <TD><FONT face=Terminal size=2>23.88%</FONT></TD>
                  <TD><FONT face=Terminal 
              size=2>0.05%</FONT></TD></TR></TBODY></TABLE></TD></TR></TBODY></TABLE></TD></TR>
  <TR>
      <TD vAlign=center>
        <DIV><FONT face=Terminal size=2>Hosts Acrively Checked:</FONT></DIV></TD>
      <TD vAlign=top>
        <TABLE cellSpacing=0 cellPadding=0 border=1>
          <TBODY>
          <TR>
            <TD>
              <TABLE border=0>
                <TBODY>
                <TR>
                  <TH><FONT face=Terminal size=2>Time Frame</FONT></TH>
                  <TH><FONT face=Terminal size=2>Hosts Checked</FONT></TH></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 1 minute:</FONT></TD>
                  <TD><FONT face=Terminal size=2>32 (5.5%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 5 minutes:</FONT></TD>
                  <TD><FONT face=Terminal size=2>419 (71.5%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 15 minutes:</FONT></TD>
                  <TD><FONT face=Terminal size=2>586 (100.0%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>&lt;= 1 hour:</FONT></TD>
                  <TD><FONT face=Terminal size=2>586 (100.0%)</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Since program 
                    start:&nbsp;&nbsp;</FONT></TD>
                  <TD><FONT face=Terminal size=2>586 
                (100.0%)</FONT></TD></TR></TBODY></TABLE></TD></TR></TBODY></TABLE></TD>
  <TD vAlign=top>
        <TABLE cellSpacing=0 cellPadding=0 border=1>
          <TBODY>
          <TR>
            <TD>
              <TABLE border=0>
                <TBODY>
                <TR>
                  <TH><FONT face=Terminal size=2>Metric</FONT></TH>
                  <TH><FONT face=Terminal size=2>Min.</FONT></TH>
                  <TH><FONT face=Terminal size=2>Max.</FONT></TH>
                  <TH><FONT face=Terminal size=2>Average</FONT></TH></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Check Execution 
                    Time:&nbsp;&nbsp;</FONT></TD>
                  <TD><FONT face=Terminal size=2>0.08 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>4.29 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>3.035 sec</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Check Latency:</FONT></TD>
                  <TD><FONT face=Terminal size=2>0.00 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>135.25 sec</FONT></TD>
                  <TD><FONT face=Terminal size=2>116.420 sec</FONT></TD></TR>
                <TR>
                  <TD><FONT face=Terminal size=2>Percent State 
                  Change:</FONT></TD>
                  <TD><FONT face=Terminal size=2>0.00%</FONT></TD>
                  <TD><FONT face=Terminal size=2>11.32%</FONT></TD>
                  <TD><FONT face=Terminal 
              size=2>0.09%</FONT></TD></TR></TBODY></TABLE></TD></TR></TBODY></TABLE></TD></TR></TBODY></TABLE></DIV></FONT>
  <DIV><FONT color=#c0c0c0><FONT size=2><SPAN></SPAN></FONT></FONT>&nbsp;</DIV>
  <DIV><FONT size=+0><FONT size=+0><SPAN><FONT size=2>&nbsp;How could I find 
  which services check&nbsp;or hosts check&nbsp;cause this&nbsp;seriously check 
  latency? </FONT></SPAN></FONT></FONT></DIV>
  <DIV><FONT size=+0><FONT size=2><SPAN></SPAN></FONT></FONT>&nbsp;</DIV>
  <DIV><FONT size=+0><FONT size=2><SPAN></SPAN></FONT></FONT>&nbsp;</DIV>
  <DIV><FONT size=+0><FONT size=2><SPAN>Regards </SPAN></FONT></FONT></DIV>
  <DIV><FONT size=+0><FONT size=2><SPAN></SPAN></FONT></FONT>&nbsp;</DIV>
  <DIV><FONT size=+0><FONT size=2><SPAN>HongRui Wang</SPAN></FONT></FONT></DIV>
  <DIV><FONT size=+0><FONT size=2><SPAN>mail: <A 
  href="mailto:wwanghongrui@cebbank.com" 
  target=_blank>wwanghongrui@cebbank.com</A></SPAN></FONT></FONT></DIV>
  <DIV><FONT size=+0><FONT size=2><SPAN>2010-06-28</SPAN></FONT></FONT></DIV>
  <DIV><FONT color=#c0c0c0><FONT size=2><SPAN></SPAN></FONT></FONT>&nbsp;</DIV>
  <DIV><FONT color=#c0c0c0><FONT 
  size=2></FONT></FONT>&nbsp;</DIV></FONT></DIV><BR>------------------------------------------------------------------------------<BR>This \
  SF.net email is sponsored by Sprint<BR>What will you do first with EVO, the 
  first 4G phone?<BR>Visit <A href="http://sprint.com/first" 
  target=_blank>sprint.com/first</A> -- <A 
  href="http://p.sf.net/sfu/sprint-com-first" 
  target=_blank>http://p.sf.net/sfu/sprint-com-first</A><BR>_______________________________________________<BR>Nagios-users \
  mailing list<BR><A 
  href="mailto:Nagios-users@lists.sourceforge.net">Nagios-users@lists.sourceforge.net</A><BR><A \
  href="https://lists.sourceforge.net/lists/listinfo/nagios-users" 
  target=_blank>https://lists.sourceforge.net/lists/listinfo/nagios-users</A><BR>::: 
  Please include Nagios version, plugin version (-v) and OS when reporting any 
  issue.<BR>::: Messages without supporting info will risk being sent to 
  /dev/null<BR></BLOCKQUOTE></DIV><BR><BR clear=all><BR>-- 
<BR>Cordially,<BR>Shadhin Rahman<BR></FONT></DIV></BODY></HTML>



------------------------------------------------------------------------------
This SF.net email is sponsored by Sprint
What will you do first with EVO, the first 4G phone?
Visit sprint.com/first -- http://p.sf.net/sfu/sprint-com-first

_______________________________________________
Nagios-users mailing list
Nagios-users@lists.sourceforge.net
https://lists.sourceforge.net/lists/listinfo/nagios-users
::: Please include Nagios version, plugin version (-v) and OS when reporting any issue. 
::: Messages without supporting info will risk being sent to /dev/null

[prev in list] [next in list] [prev in thread] [next in thread]
Configure | About | News | Add a list | Sponsored by KoreLogic