<div dir="ltr">One thing I didnt mention is that the virtual IPs I&#39;m using are F5 VIPs, which weren&#39;t configured in the hosts at all. Would that be the issue?</div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Jun 4, 2015 at 10:21 AM, Kimly Heler <span dir="ltr">&lt;<a href="mailto:kimlyheler@gmail.com" target="_blank">kimlyheler@gmail.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Hi Igor, I just tried that and still getting the same error:<div><br></div><div>on the primary node:</div><div><div>[root@node1-datacenterA]$ drbdadm up --stacked r0</div><div>drbd.d/r0.res:57: in resource r0, on node1-datacenterA node2-datacenterA:</div><div><span style="white-space:pre-wrap">        </span>IP 192.168.42.1 not found on this host.<br></div></div><div><br></div><div>I just tried 1 stacked drbd on cluster A, for now. I reduced cluster B to just a standalone server (no stacked), then the command was run fine on the backup standalone node, while the command was failing as above (note that I have the same r0.res file on all the nodes)</div><div><br></div><div>on a backup node:</div><div>[root@node1-datacenterB]$ drbdadm up r0<br></div><div><br></div><div>So looks like it doesn&#39;t like --stacked with a virtual IP. Any idea?</div><span class="HOEnZb"><font color="#888888"><div><br></div><div>Kimly</div></font></span><div><div class="h5"><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Jun 4, 2015 at 6:26 AM, Igor Cicimov <span dir="ltr">&lt;<a href="mailto:icicimov@gmail.com" target="_blank">icicimov@gmail.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div><p dir="ltr"><br>
On 04/06/2015 8:50 PM, &quot;Kimly Heler&quot; &lt;<a href="mailto:kimlyheler@gmail.com" target="_blank">kimlyheler@gmail.com</a>&gt; wrote:<br>
&gt;<br>
&gt; Hello,<br>
&gt;<br>
&gt; I have 2 of two-node clusters in different data centers. I have configured drbd of lvm resource on each cluster. Now I need to configure a stacked drbd on top of these 2 clusters.<br>
&gt;<br>
&gt; It should be similar to section 8.4.2 in <a href="http://drbd.linbit.com/users-guide-emb/s-pacemaker-stacked-resources.html" target="_blank">http://drbd.linbit.com/users-guide-emb/s-pacemaker-stacked-resources.html</a> except I need to find a way to assign floating IPs to the stacked drbd.<br>
&gt;<br>
&gt; Here is what I derived from the user guide:<br>
&gt;<br>
&gt; resource clusterA {<br>
&gt;   net {<br>
&gt;     protocol C;<br>
&gt;   }<br>
&gt;<br>
&gt;   on host1-datacenterA {<br>
&gt;     device     /dev/drbd0;<br>
&gt;     disk       /dev/sda6;<br>
&gt;     address    <a href="http://10.0.0.1:7788" target="_blank">10.0.0.1:7788</a>;<br>
&gt;     meta-disk internal;<br>
&gt;   }<br>
&gt;<br>
&gt;   on host2-datacenterA {<br>
&gt;     device    /dev/drbd0;<br>
&gt;     disk      /dev/sda6;<br>
&gt;     address   <a href="http://10.0.0.2:7788" target="_blank">10.0.0.2:7788</a>;<br>
&gt;     meta-disk internal;<br>
&gt;   }<br>
&gt; }<br>
&gt;<br>
&gt; resource clusterB {<br>
&gt;   net {<br>
&gt;     protocol C;<br>
&gt;   }<br>
&gt;<br>
&gt;   on host1-datacenterB {<br>
&gt;     device     /dev/drbd0;<br>
&gt;     disk       /dev/sda6;<br>
&gt;     address    <a href="http://10.0.0.3:7788" target="_blank">10.0.0.3:7788</a>;<br>
&gt;     meta-disk internal;<br>
&gt;   }<br>
&gt;<br>
&gt;   on host2-datacenterB {<br>
&gt;     device    /dev/drbd0;<br>
&gt;     disk      /dev/sda6;<br>
&gt;     address   <a href="http://10.0.0.3:7788" target="_blank">10.0.0.3:7788</a>;<br>
&gt;     meta-disk internal;<br>
&gt;   }<br>
&gt; }<br>
&gt;<br>
&gt; resource r0 {<br>
&gt;   net {<br>
&gt;     protocol A;<br>
&gt;   }<br>
&gt;<br>
&gt;   stacked-on-top-of clusterA {<br>
&gt;     device     /dev/drbd10;<br>
&gt;     address    <a href="http://192.168.42.1:7788" target="_blank">192.168.42.1:7788</a>; # Virtual IP of cluster A<br>
&gt;   }<br>
&gt;<br>
&gt;   stacked-on-top-of clusterB {<br>
&gt;     device     /dev/drbd10;<br>
&gt;     address    <a href="http://192.168.42.2:7788" target="_blank">192.168.42.2:7788</a>; # Virtual IP of cluster B<br>
&gt;   }<br>
&gt; }<br>
&gt;<br>
&gt; With this, it would error out with the virtual IP address with &quot;IP not found on host&quot;. <br>
&gt;<br>
&gt; I also looked at Floating peers in the user guide, but floating <a href="http://192.168.42.1:7789" target="_blank">192.168.42.1:7789</a> would replace the whole section stacked-on-top-of. <br>
&gt;<br>
&gt; How can I tell drbd that r0 is a stacked drbd resource, and the peers IPs are floating?<br>
&gt;</p>
</div></div><p dir="ltr">Did you try setting:</p>
<p dir="ltr">net.ipv4.ip_nonlocal_bind=1</p>
<p dir="ltr">so apps can bind to non local ip?<br>
&gt; Thanks in advance<br>
&gt;<br>
&gt; Kimly<br>
&gt;<br>
&gt;<br>
&gt; _______________________________________________<br>
&gt; drbd-user mailing list<br>
&gt; <a href="mailto:drbd-user@lists.linbit.com" target="_blank">drbd-user@lists.linbit.com</a><br>
&gt; <a href="http://lists.linbit.com/mailman/listinfo/drbd-user" target="_blank">http://lists.linbit.com/mailman/listinfo/drbd-user</a><br>
&gt;<br>
</p>
</blockquote></div><br></div></div></div></div>
</blockquote></div><br></div>