[DRBD-user] high load average

Lorenzo Milesi lorenzo.milesi at yetopen.it
Fri Oct 17 12:14:26 CEST 2008

Note: "permalinks" may not be as permanent as we would like,
direct links of old sources may well be a few messages off.


Il giorno ven, 10/10/2008 alle 09.41 -0400, Poyner, Brandon ha scritto:
> As Maciej says, you might be hitting the limit of the disk.  In your circumstance where the disk accesses are slow and the load average is going up I'd take a direct look at the IO wait.  You could be spending much of your cpu cycles waiting on the disk(s).  IO wait is found in the CPU section as the 'wa' field when you run vmstat or top.  

right now i cannot install a custom kernel to run systemtap, but i
installed sar and this is the result:

Linux 2.6.22-4-686 (server)        17/10/2008

00:00:01          CPU     %user     %nice   %system   %iowait    %steal
%idle
00:05:01          all      0,22      3,33      1,25      0,19      0,00
95,01
00:15:01          all      0,19      0,00      0,27      0,06      0,00
99,48
00:25:01          all      0,19      0,00      0,27      0,15      0,00
99,40
00:35:01          all      0,20      0,00      0,24      0,13      0,00
99,43
00:45:01          all      0,20      0,00      0,25      0,06      0,00
99,49
00:55:01          all      0,19      0,00      0,25      0,04      0,00
99,52
01:05:01          all      0,20      0,00      0,25      0,09      0,00
99,46
01:15:02          all      0,20      0,00      0,26      0,09      0,00
99,45
01:25:01          all      0,19      0,00      0,25      0,12      0,00
99,44
01:35:01          all      0,18      0,00      0,26      0,17      0,00
99,38
01:45:01          all      0,18      0,00      0,27      0,19      0,00
99,37
01:55:01          all      0,18      0,00      0,24      0,18      0,00
99,40
02:05:01          all      0,19      0,00      0,23      0,13      0,00
99,44
02:15:01          all      0,18      0,00      0,25      0,13      0,00
99,44
02:25:01          all      0,19      0,00      0,25      0,12      0,00
99,44
02:35:01          all      0,19      0,00      0,26      0,17      0,00
99,38
02:45:01          all      0,18      0,00      0,27      0,14      0,00
99,41
02:55:01          all      0,18      0,00      0,28      0,12      0,00
99,42
03:05:01          all      0,18      0,00      0,27      0,25      0,00
99,30
03:15:01          all      0,18      0,00      0,32      0,25      0,00
99,24
03:25:01          all      0,20      0,00      0,36      0,39      0,00
99,05
03:35:01          all      0,20      0,00      0,36      0,42      0,00
99,02
03:45:01          all      0,19      0,00      0,34      0,44      0,00
99,03
03:55:01          all      0,18      0,00      0,36      0,38      0,00
99,08
04:05:01          all      0,19      0,00      0,34      0,40      0,00
99,06
04:15:01          all      0,19      0,00      0,34      0,37      0,00
99,10
04:25:01          all      0,19      0,00      0,38      0,31      0,00
99,12
04:35:01          all      0,19      0,00      0,35      0,34      0,00
99,11
04:45:01          all      0,20      0,00      0,33      0,28      0,00
99,19
04:55:01          all      0,19      0,00      0,35      0,18      0,00
99,28
05:05:01          all      0,20      0,00      0,35      0,22      0,00
99,23
05:15:01          all      0,18      0,00      0,35      0,23      0,00
99,24
05:25:01          all      0,19      0,00      0,36      0,25      0,00
99,20
05:35:01          all      0,19      0,00      0,36      0,21      0,00
99,24
05:45:01          all      0,18      0,00      0,36      0,39      0,00
99,07
05:55:01          all      0,19      0,00      0,35      0,40      0,00
99,06
06:05:01          all      0,19      0,00      0,35      0,24      0,00
99,21
06:15:01          all      0,19      0,00      0,34      0,35      0,00
99,12
06:25:01          all      0,19      0,00      0,38      0,32      0,00
99,12
06:35:01          all      0,35      6,20      1,69     18,95      0,00
72,82
06:45:01          all      0,20      0,00      0,35      0,34      0,00
99,11
06:55:01          all      0,19      0,00      0,35      0,42      0,00
99,03
07:05:01          all      0,19      0,00      0,38      0,34      0,00
99,09
07:15:01          all      0,20      0,00      0,36      0,31      0,00
99,12
07:25:01          all      0,20      0,00      0,34      0,26      0,00
99,20
07:35:01          all      0,18      0,00      0,36      0,37      0,00
99,09
07:45:01          all      0,18      0,00      0,36      0,18      0,00
99,28
07:55:01          all      0,19      0,00      0,37      0,31      0,00
99,13
08:05:01          all      0,18      0,00      0,37      0,36      0,00
99,09
08:15:01          all      0,20      0,00      0,35      0,37      0,00
99,09
08:25:01          all      0,22      0,00      0,39      0,33      0,00
99,06
08:35:01          all      0,19      0,00      0,38      0,21      0,00
99,21
08:45:01          all      0,29      0,00      0,50      0,29      0,00
98,92
08:55:01          all      0,31      0,00      0,57      0,25      0,00
98,87
09:05:01          all      0,23      0,00      0,37      0,24      0,00
99,16
09:15:01          all      0,25      0,00      0,46      0,32      0,00
98,97
09:25:01          all      0,23      0,00      0,44      0,47      0,00
98,86
09:35:01          all      0,20      0,00      0,46      0,30      0,00
99,04
09:45:01          all      0,26      0,00      0,39      0,35      0,00
98,99
09:55:01          all      0,23      0,00      0,44      0,23      0,00
99,10
10:05:01          all      0,22      0,00      0,42      0,27      0,00
99,09
10:15:01          all      0,50      0,00      0,63      0,27      0,00
98,59
10:25:02          all      0,27      0,00      0,49      0,07      0,00
99,16
10:35:01          all      0,21      0,00      0,82      0,28      0,00
98,69
10:45:01          all      0,44      0,00      1,15      0,56      0,00
97,85
10:55:01          all      0,93      0,00      1,90      1,85      0,00
95,32
11:05:01          all      0,49      0,00      1,43      0,63      0,00
97,45
11:15:01          all      0,36      0,00      0,65      0,20      0,00
98,79
11:25:01          all      0,34      0,00      0,62      0,13      0,00
98,91
11:35:01          all      0,35      0,00      0,64      0,68      0,00
98,32
11:45:01          all      0,48      0,00      0,97      8,08      0,00
90,47
11:55:02          all      0,66      0,00      1,15      3,36      0,00
94,84
12:05:01          all      0,87      0,00      1,41      0,34      0,00
97,38
Media:            all      0,25      0,11      0,47      0,70      0,00
98,47


not so high peaks, iowait in top very low, but in this precise moment i
have a load average above 1.
i had a rsync running who kept it up over 2 for some hrs, now i stopped
it but still it's not "relaxing" after 20 minutes.

thanks
-- 

Lorenzo Milesi - lorenzo.milesi at yetopen.it

YetOpen S.r.l. - http://www.yetopen.it/
C.so E. Filiberto, 74 23900 Lecco - ITALY -
Tel 0341 220 205 - Fax 178 607 8199

GPG/PGP Key-Id: 0xE704E230 - http://keyserver.linux.it




More information about the drbd-user mailing list