<div dir="ltr"><div>It turned out that the NFS daemon was blocking DRBD.</div><div>Thanks, the comment about the &#39;drbd&#39; kernel processes was helpful.<br></div><div><br></div><div>BTW, the documentation (man pages) for DRBD 9.0 is still from 8.4 and some options are no longer there.<br></div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Oct 11, 2018 at 9:48 AM, Radoslaw Garbacz <span dir="ltr">&lt;<a href="mailto:radoslaw.garbacz@xtremedatainc.com" target="_blank">radoslaw.garbacz@xtremedatainc.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Thanks, will take a closer look at this.<br></div><div class="gmail_extra"><div><div class="h5"><br><div class="gmail_quote">On Thu, Oct 11, 2018 at 3:47 AM, Lars Ellenberg <span dir="ltr">&lt;<a href="mailto:lars.ellenberg@linbit.com" target="_blank">lars.ellenberg@linbit.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span>On Tue, Oct 02, 2018 at 12:56:38PM -0500, Radoslaw Garbacz wrote:<br>
&gt; Hi,<br>
&gt; <br>
&gt; <br>
&gt; I have a problem, which (from what I found) has been discussed, however not<br>
&gt; in the particular case, which I experienced, so I would be grateful for any<br>
&gt; suggestions of how to deal with it.<br>
&gt; <br>
&gt; <br>
&gt; I.<br>
&gt; 1. I get an error when demoting DRBD resource:<br>
&gt; * drbdadm down data0<br>
&gt; <br>
&gt; data0: State change failed: (-12) Device is held open by someone<br>
&gt; additional info from kernel:<br>
&gt; failed to demote<br>
&gt; Command &#39;drbdsetup-84 down data0&#39; terminated with exit code 11<br>
&gt; <br>
&gt; 2. The device is not mounted and not used by any LVM, so based on some<br>
&gt; online discussions I checked the blocking process and it is &quot;drbd0_submit&quot;<br>
&gt; <br>
&gt; * lsof | grep drbd0<br>
&gt; drbd0_sub 16687         root  cwd       DIR              202,1 251 64 /<br>
<br>
</span>No, it is not.<br>
<br>
drbd*submitter (only 16 bytes of that name actually make it into the<br>
comm part of the task struct, which is what ps or lsof or the like can<br>
display) are kernel threads, and part of DRBD operations.<br>
They are certainly NOT &quot;holding it open&quot;.<br>
They are a required part of its existence.<br>
<br>
&quot;Holding it open&quot; when you think you already unmounted it<br>
is typically either some forgotten device mapper thingy<br>
(semi-automatically created by kpartx e.g.),<br>
or some racy &quot;udev triggered probe&quot;.<br>
<br>
In the latter case, if you retry after a couple seconds,<br>
demoting should work.<br>
<span><br>
&gt; Is there a good way to deal with this case, as whether some DRBD step is<br>
&gt; missing, which leaves the process or killing the process is the right way?<br>
<br>
</span>Again, that &quot;process&quot; has nothing to do with drbd being &quot;held open&quot;,<br>
but is a kernel thread that is part of the existence of that DRBD volume.<br>
<span class="m_2096524923523822805HOEnZb"><font color="#888888"><br>
-- <br>
: Lars Ellenberg<br>
: LINBIT | Keeping the Digital World Running<br>
: DRBD -- Heartbeat -- Corosync -- Pacemaker<br>
<br>
DRBD® and LINBIT® are registered trademarks of LINBIT<br>
__<br>
please don&#39;t Cc me, but send to list -- I&#39;m subscribed<br>
</font></span><div class="m_2096524923523822805HOEnZb"><div class="m_2096524923523822805h5">______________________________<wbr>_________________<br>
drbd-user mailing list<br>
<a href="mailto:drbd-user@lists.linbit.com" target="_blank">drbd-user@lists.linbit.com</a><br>
<a href="http://lists.linbit.com/mailman/listinfo/drbd-user" rel="noreferrer" target="_blank">http://lists.linbit.com/mailma<wbr>n/listinfo/drbd-user</a><br>
</div></div></blockquote></div><br><br clear="all"><br></div></div><span class="">-- <br><div class="m_2096524923523822805gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div>Best Regards,<br><br>Radoslaw Garbacz<br></div>XtremeData Incorporated<br></div></div></div></div>
</span></div>
</blockquote></div><br><br clear="all"><br>-- <br><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div>Best Regards,<br><br>Radoslaw Garbacz<br></div>XtremeData Incorporated<br></div></div></div></div>
</div>