Hi.<div><br></div><div>I&#39;m still struggling to get a stacked device to work on DRBD 8.3.0.</div><div><br></div><div>Config excerpt:</div><div><br></div><div><div>common {</div><div>&nbsp;&nbsp;syncer {</div><div>&nbsp;&nbsp; &nbsp; &nbsp; &nbsp;rate 70M;</div>
<div>&nbsp;&nbsp; &nbsp; &nbsp; &nbsp;verify-alg md5;<br></div><div>&nbsp;&nbsp;}<br></div><div><br></div><div>&nbsp;&nbsp;protocol C;</div><div><br></div><div>&nbsp;&nbsp;startup {</div><div>&nbsp;&nbsp; &nbsp;wfc-timeout &nbsp; &nbsp; &nbsp; &nbsp; 0; &nbsp;## Infinite!</div><div>&nbsp;&nbsp; &nbsp;degr-wfc-timeout &nbsp;120; &nbsp;## 2 minutes.</div>
<div>&nbsp;&nbsp;}</div><div><br></div><div>&nbsp;&nbsp;disk {</div><div>&nbsp;&nbsp; &nbsp;on-io-error detach;</div><div>&nbsp;&nbsp;}</div><div><br></div><div>&nbsp;&nbsp;net {</div><div>&nbsp;&nbsp; &nbsp;allow-two-primaries;<br></div><div>&nbsp;&nbsp;}</div><div>}</div><div><br></div><div><div>resource ftp01-root {</div>
<div>&nbsp;&nbsp;device &nbsp; &nbsp; &nbsp; &nbsp;/dev/drbd2;</div><div>&nbsp;&nbsp;disk &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;/dev/datavg/ftp01-root;</div><div>&nbsp;&nbsp;flexible-meta-disk internal;</div><div><br></div><div>&nbsp;&nbsp;on xen-33-18-02 {</div><div>&nbsp;&nbsp; &nbsp;address &nbsp; &nbsp;<a href="http://192.168.250.12:7702">192.168.250.12:7702</a>;</div>
<div>&nbsp;&nbsp;}</div><div><br></div><div>&nbsp;&nbsp;on xen-33-18-03 {</div><div>&nbsp;&nbsp; &nbsp;address &nbsp; &nbsp;<a href="http://192.168.250.13:7702">192.168.250.13:7702</a>;</div><div>&nbsp;&nbsp;}</div><div>} &nbsp;# ftp01-root</div><div><br></div><div>resource ftp01-root-b {</div>
<div>&nbsp;&nbsp;device &nbsp; &nbsp; &nbsp; &nbsp;/dev/drbd2;</div><div>&nbsp;&nbsp;disk &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;/dev/datavg/ftp01-root;</div><div>&nbsp;&nbsp;meta-disk &nbsp; &nbsp; /dev/datavg/drbd_log[2];</div><div><br></div><div>&nbsp;&nbsp;on xen-80-31-00 {</div><div>&nbsp;&nbsp; &nbsp;address &nbsp; &nbsp;<a href="http://192.168.250.14:7702">192.168.250.14:7702</a>;</div>
<div>&nbsp;&nbsp;}</div><div><br></div><div>&nbsp;&nbsp;on xen-80-31-01 {</div><div>&nbsp;&nbsp; &nbsp;address &nbsp; &nbsp;<a href="http://192.168.250.15:7702">192.168.250.15:7702</a>;</div><div>&nbsp;&nbsp;}</div><div>} &nbsp;# ftp01-root-b</div><div><br></div><div>resource ftp01-root-r {</div>
<div>&nbsp;&nbsp;protocol &nbsp; &nbsp; &nbsp;A;</div><div><br></div><div>&nbsp;&nbsp;stacked-on-top-of ftp01-root {</div><div>&nbsp;&nbsp; &nbsp;device &nbsp; &nbsp; &nbsp;/dev/drbd102;</div><div>&nbsp;&nbsp; &nbsp;address &nbsp; &nbsp; <a href="http://10.80.31.51:7702">10.80.31.51:7702</a>;</div><div>&nbsp;&nbsp;}</div>
<div><div><br></div><div>&nbsp;&nbsp;stacked-on-top-of ftp01-root-b {</div><div>&nbsp;&nbsp; &nbsp;device &nbsp; &nbsp; &nbsp;/dev/drbd102;</div><div>&nbsp;&nbsp; &nbsp;address &nbsp; &nbsp; <a href="http://10.80.31.50:7702">10.80.31.50:7702</a>;</div><div>&nbsp;&nbsp;}</div><div>} &nbsp;# ftp01-root-r</div>
<div><br></div><div>=========================================</div><div><br></div><div>I have the ftp01-root device up and running (currently in use and working fine). &nbsp;I build my new server (xen-80-31-00) and got its device &quot;ftp01-root-b&quot; running.</div>
<div><br></div><div>xen-33-18-03 (ftp01-root):</div><div><div>&nbsp;2: cs:WFConnection ro:Primary/Unknown ds:UpToDate/DUnknown C r---</div><div>&nbsp;&nbsp; &nbsp;ns:2176532 nr:999236 dw:3190465 dr:2068626 al:79 bm:78 lo:0 pe:0 ua:0 ap:0 e</div>
<div>p:1 wo:b oos:1420</div><div><br></div><div>xen-80-31-00 (ftp01-root-b):</div><div><div>&nbsp;2: cs:WFConnection ro:Primary/Unknown ds:UpToDate/DUnknown C r---</div><div>&nbsp;&nbsp; &nbsp;ns:0 nr:0 dw:0 dr:0 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:4194304</div>
<div><br></div><div>On both hosts, the other node is down, hence the &quot;DUnknown&quot; for the second host.</div><div><br></div><div>Trying to create the stacked device fails with:</div><div><br></div></div><div><div>root@xen-33-18-03:/etc# drbdadm --stacked up ftp01-root-r</div>
<div>/dev/drbd102: Failure: (127) Device minor not allocated</div><div>Command &#39;drbdsetup /dev/drbd102 disk /dev/drbd2 /dev/drbd2 internal --set-defaults --create-device --on-io-error=detach&#39; terminated with exit code 10</div>
<div><br></div><div>I do see the device (/dev/drbd102) *is* getting created:</div><div><br></div><div><div>brw-rw---- 1 root disk 147, 102 2009-02-02 01:37 /dev/drbd102</div><div><br></div></div></div></div><div>Google has not been much help, and I&#39;m really stuck now.</div>
<div><br></div><div>Just to make it more fun, it seems the batch of Samsung 750GB drives that are in the xen-33-18-xx servers aren&#39;t very good and I&#39;m loosing drives left and right, so I need to get this data moved ASAP.</div>
<div><br></div><div>What can I try next?</div><div><br></div><div>Thanks,</div><div>Sam</div></div></div></div>