Но вот iostat -x -m 3 когда сервер загружен и nginx медленнее всего отдает статику (медленные клиенты могут уже прерываться) показывает что значения util 80-100%, вот:

Device: rrqm/s wrqm/s r/s w/s rMB/s wMB/s avgrq-sz avgqu-sz await svctm %util
sda 51,67 1194,67 617,33 73,33 4,25 2,13 18,93 138,70 226,30 1,45 100,13
sdb 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00

у nginx ситуация при этом такая:
Active connections: 167
server accepts handled requests
36267 36267 95379
Reading: 5 Writing: 33 Waiting: 129

у apache такая:
Current Time: Friday, 19-Oct-2012 11:03:56 ALMT
Restart Time: Thursday, 18-Oct-2012 20:12:50 ALMT
Parent Server Generation: 0
Server uptime: 14 hours 51 minutes 6 seconds
Total accesses: 162073 - Total Traffic: 5.0 GB
CPU Usage: u378.47 s41.43 cu.02 cs0 - .785% CPU load
3.03 requests/sec - 97.2 kB/second - 32.1 kB/request
25 requests currently being processed, 0 idle workers
LWWWWWLRWWWWRRWWWLWWWWLWW.......................................
................................................................
всего в конфиге апача стоит Max lient 25

А в обычном состоянии - когда все быстро работает даже на медленных клиентах, вот:
Device: rrqm/s wrqm/s r/s w/s rMB/s wMB/s avgrq-sz avgqu-sz await svctm %util
sda 0,00 109,33 53,67 37,67 0,32 0,57 20,00 2,21 24,18 2,41 22,00
sdb 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00

Device: rrqm/s wrqm/s r/s w/s rMB/s wMB/s avgrq-sz avgqu-sz await svctm %util
sda 1,00 162,67 62,00 30,67 0,39 0,76 25,35 3,13 33,80 2,71 25,07
sdb 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00 0,00

при это коннектов у нжинкса может snmc только же 80-150, у апача процессов коненчо же не столько а 3-5 штук