DOMU
tty xbd0 dk0 xbd1
dk1 CPU
tin tout KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t
t/s MB/s us ni sy in id
0 45 15.33 0 0.006 15.33 0 0.006 29.09 38 1.079 29.09
38 1.079 0 0 0 0 100
0 284 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 198 0.000 0 0.000 0.000 0 0.000 32.00 6 0.183
32.00 6 0.183 0 0 0 0 100
0 132 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 119 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 108 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 110 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 105 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 117 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 106 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 176 0.000 0 0.000 0.000 0 0.000 32.00 2 0.069
32.00 2 0.069 0 0 0 0 100
0 206 0.000 0 0.000 0.000 0 0.000 32.00 42 1.301 32.00
42 1.301 0 0 0 0 100
0 312 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 141 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 240 0.000 0 0.000 0.000 0 0.000 32.00 16 0.498 32.00
16 0.498 0 0 0 0 100
0 145 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 227 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 139 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 284 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 266 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 343 0.000 0 0.000 0.000 0 0.000 32.00 5 0.158
32.00 5 0.158 0 0 0 0 100
0 181 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 246 0.000 0 0.000 0.000 0 0.000 32.00 14 0.442 32.00
14 0.442 0 0 0 0 100
0 142 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 192 0.000 0 0.000 0.000 0 0.000 32.00 10 0.299 32.00
10 0.299 0 0 0 0 100
0 133 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 218 0.000 0 0.000 0.000 0 0.000 32.00 44 1.385 32.00
44 1.385 0 0 0 0 100
0 139 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 189 0.000 0 0.000 0.000 0 0.000 32.00 38 1.193 32.00
38 1.193 0 0 0 0 100
0 211 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 348 9.368 0 0.001 9.368 0 0.001 32.00 107 3.337 32.00
107 3.337 0 0 1 0 99
0 218 0.000 0 0.000 0.000 0 0.000 32.00 45 1.405 32.00
45 1.405 0 0 0 0 100
DOM0
Toblerone# iostat 5
tty ld0 ld1 ld2
dk0 dk1 dk2 dk3
vnd0 CPU
tin tout KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t
t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t
t/s MB/s us ni sy in id
0 5 8.398 3 0.028 16.79 0 0.007 35.95 33 1.159 35.96
33 1.159 16.80 0 0.007 8.398 3 0.028 0.500 0 0.000 16.42
0 0.005 0 0 0 1 99
0 204 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 32.72 5 0.147
32.72 5 0.147 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 1 0 99
0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 32.00 0 0.000 0.000 0 0.000 33.19 6 0.183
33.19 6 0.183 0.000 0 0.000 32.00 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 1 0 99
0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 34.16 2 0.069
34.16 2 0.069 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 33.86 39 1.301 33.86
39 1.301 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000
0 0.000 0 0 1 0 99
0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 32.00 0 0.000 0.000 0 0.000 34.57 15 0.498 34.57
15 0.498 0.000 0 0.000 32.00 0 0.000 0.000 0 0.000 0.000
0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 1 0 99
0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 32.00 0 0.000 0.000 0 0.000 34.25 5 0.158
34.25 5 0.158 0.000 0 0.000 32.00 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 34.77 13 0.442 34.77
13 0.442 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000
0 0.000 0 0 0 0 100
0 69 28.00 0 0.000 0.000 0 0.000 33.44 9 0.299
33.44 9 0.299 0.000 0 0.000 28.00 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 1 0 99
0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 32.00 3 0.000 0.000 0 0.000 34.18 42 1.385 34.18
42 1.385 0.000 0 0.000 32.00 3 0.000 0.000 0 0.000 0.000
0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 18.74 1 0.023 0.000 0 0.000 34.23 36 1.193 34.23
36 1.193 0.000 0 0.000 18.74 1 0.023 0.000 0 0.000 0.000
0 0.000 0 0 0 0 99
0 68 18.00 0 0.000 9.368 0 0.000 33.71 101 3.337 33.71
101 3.337 9.368 0 0.000 18.00 0 0.000 0.000 0 0.000
9.368 0 0.000 0 0 1 0 99
0 68 32.00 3 0.000 0.000 0 0.000 34.73 41 1.405 34.73
41 1.405 0.000 0 0.000 32.00 3 0.000 0.000 0 0.000 0.000
0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
0 69 4.000 0 0.000 0.000 0 0.000 33.99 9 0.293
33.99 9 0.293 0.000 0 0.000 4.000 0 0.000 0.000 0 0.000
0.000 0 0.000 0 0 0 0 100
To me it looks more like locking issues or xen scheduling features.
It makes progress, but very very slowly.
Frank
On 03/10/20 18:14, Manuel Bouyer wrote:
On Tue, Mar 10, 2020 at 04:20:22PM +0100, Frank Kardel wrote:
This is my first XEN setup so I may have misconfigured something:
I have a 4G DOM0 on a 512G System with a EPYC 7302P 16-Core Processor.
On that I configured a 400G DOMU with 12 vcpus. like this:
name = "system"
kernel = "/netbsd-XEN3_DOMU.gz"
memory = 400000
cpus="all"
vcpus=4
maxvcpus=12
vif = [ 'mac=aa:00:00:d1:00:01,bridge=bridge0',
'mac=aa:00:00:d1:00:02,bridge=bridge1' ]
disk = [ 'file:/data0/xen-roots/root-Alpine-system.img,0x0,w',
'phy:/dev/wedges/data1,0x1,w' ]
On that I run postgresql 11 attempting to load a 1TB database.
Usually this workload keeps a machine continually busy cpu/io-wise.
I was expecting that I/O via the xen backend would be the bottleneck.
Instead DOM0 is only seldom busy for IO. DOMU is crawling along sleeping
at all sorts of places:
What does
iostat 5
show about the disks, in the dom0 and domU ?
