<html><head><meta http-equiv="content-type" content="text/html; charset=utf-8"></head><body dir="auto"><br><br><div dir="ltr">Envoyé de mon iPhone</div><div dir="ltr"><br>Début du message transféré&nbsp;:<br><br></div><blockquote type="cite"><div dir="ltr"><b>Expéditeur:</b> Christophe NOUVEL &lt;christophe.nouvel@gmail.com&gt;<br><b>Date:</b> 27 janvier 2020 à 15:17:06 UTC+1<br><b>Destinataire:</b> Roland Kammerer &lt;roland.kammerer@linbit.com&gt;<br><b>Objet:</b> <b>Rép:&nbsp; [DRBD-user] [proxmox 5.4]Cannot create VM, cannot restore : timeout linstor sp l...</b><br><br></div></blockquote><blockquote type="cite"><div dir="ltr"><div dir="ltr"><div>Hi,</div><div><br></div><div>pvs, lvs and vgs are fast on both nodes :</div><div><br></div><div>[root@px1:~]# time pvs<br>&nbsp; PV &nbsp; &nbsp; &nbsp; &nbsp; VG &nbsp; &nbsp; &nbsp;Fmt &nbsp;Attr PSize &nbsp; PFree<br>&nbsp; /dev/sda3 &nbsp;pve &nbsp; &nbsp; lvm2 a-- &nbsp;277.96g 16.00g<br>&nbsp; /dev/sdb1 &nbsp;vg_drbd lvm2 a-- &nbsp; &nbsp;4.54t &nbsp;3.59t<br><br>real &nbsp; &nbsp;0m0.059s<br>user &nbsp; &nbsp;0m0.005s<br>sys &nbsp; &nbsp; 0m0.013s<br>[root@px1:~]# time vgs<br>&nbsp; VG &nbsp; &nbsp; &nbsp;#PV #LV #SN Attr &nbsp; VSize &nbsp; VFree<br>&nbsp; pve &nbsp; &nbsp; &nbsp; 1 &nbsp; 3 &nbsp; 0 wz--n- 277.96g 16.00g<br>&nbsp; vg_drbd &nbsp; 1 &nbsp; 3 &nbsp; 0 wz--n- &nbsp; 4.54t &nbsp;3.59t<br><br>real &nbsp; &nbsp;0m0.020s<br>user &nbsp; &nbsp;0m0.005s<br>sys &nbsp; &nbsp; 0m0.012s<br>[root@px1:~]# time lvs<br>&nbsp; LV &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; VG &nbsp; &nbsp; &nbsp;Attr &nbsp; &nbsp; &nbsp; LSize &nbsp; Pool Origin Data% &nbsp;Meta% &nbsp;Move Log Cpy%Sync Convert<br>&nbsp; data &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; pve &nbsp; &nbsp; twi-a-tz-- 181.02g &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 0.00 &nbsp; 0.89<br>&nbsp; root &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; pve &nbsp; &nbsp; -wi-ao---- &nbsp;69.25g<br>&nbsp; swap &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; pve &nbsp; &nbsp; -wi-ao---- &nbsp; 8.00g<br>&nbsp; vm-100102-disk-1_00000 vg_drbd -wi-ao---- 910.21g<br>&nbsp; vm-100104-disk-1_00000 vg_drbd -wi-ao---- &nbsp;32.01g<br>&nbsp; vm-100106-disk-1_00000 vg_drbd -wi-ao---- &nbsp;32.01g<br><br>real &nbsp; &nbsp;0m0.051s<br>user &nbsp; &nbsp;0m0.009s<br>sys &nbsp; &nbsp; 0m0.008s</div><div><br></div><div><br></div><div>Same times for second node.</div><div><br></div><div>Only one line has been modified in lvm.conf on each node :</div><div>[root@px2:~]# diff /etc/lvm/lvm.conf /etc/lvm/lvm.conf.orig<br>129,130c129<br>&lt; &nbsp; &nbsp; &nbsp; &nbsp; global_filter = [ "r|/dev/zd.*|", "r|/dev/mapper/pve-.*|", "r|/dev/drbd.*|" ]<br>&lt; &nbsp; &nbsp; &nbsp; # global_filter = [ "r|/dev/zd.*|", "r|/dev/mapper/pve-.*|" ]<br>---<br>&gt; &nbsp; &nbsp; &nbsp; global_filter = [ "r|/dev/zd.*|", "r|/dev/mapper/pve-.*|" ]<br></div><div><br></div><div><br></div><div>All was working ok before resize...</div><div><br></div><div>&nbsp; Christophe.<br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">Le&nbsp;lun. 27 janv. 2020 à&nbsp;11:35, Roland Kammerer &lt;<a href="mailto:roland.kammerer@linbit.com">roland.kammerer@linbit.com</a>&gt; a écrit&nbsp;:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On Mon, Jan 27, 2020 at 10:19:31AM +0100, Christophe NOUVEL wrote:<br>
&gt; We noticed long response time when :<br>
&gt; linstor sp pl<br>
<br>
And that is the root cause for the plugin timeout.<br>
<br>
&gt; An strace give a long wait (20s) to :<br>
&gt; sendto(3, "GET /v1/view/storage-pools HTTP/"..., 153, 0, NULL, 0) = 153<br>
&gt; poll([{fd=3, events=POLLIN}], 1, 300000<br>
&gt; <br>
&gt; Any idea?<br>
<br>
Best guess is that LVM is very slow on at least one of your nodes. Just<br>
try 'lvs' on all of them. If this is already slow (yes, I see that *a*<br>
*lot*), then properly configure your LVM (by setting some filters in<br>
lvm.conf).<br>
<br>
Regards, rck<br>
_______________________________________________<br>
Star us on GITHUB: <a href="https://github.com/LINBIT" rel="noreferrer" target="_blank">https://github.com/LINBIT</a><br>
drbd-user mailing list<br>
<a href="mailto:drbd-user@lists.linbit.com" target="_blank">drbd-user@lists.linbit.com</a><br>
<a href="https://lists.linbit.com/mailman/listinfo/drbd-user" rel="noreferrer" target="_blank">https://lists.linbit.com/mailman/listinfo/drbd-user</a><br>
</blockquote></div>
</div></blockquote></body></html>