<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2//EN">
<HTML>
<HEAD>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=utf-8">
<META NAME="Generator" CONTENT="MS Exchange Server version 6.5.7652.24">
<TITLE>Re: [DRBD-user] DRBD LVM2 Trouble</TITLE>
</HEAD>
<BODY>
<!-- Converted from text/plain format -->

<P><FONT SIZE=2>&gt; NOTE: the SDB devices on nfs2 are numbered differently.<BR>
<BR>
Yet in your config they match up.<BR>
<BR>
May be a case of putting 2.0TB into a 1.5TB bag.<BR>
<BR>
-Ross<BR>
<BR>
<BR>
----- Original Message -----<BR>
From: drbd-user-bounces@lists.linbit.com &lt;drbd-user-bounces@lists.linbit.com&gt;<BR>
To: drbd-user@lists.linbit.com &lt;drbd-user@lists.linbit.com&gt;<BR>
Sent: Wed Mar 05 20:52:31 2008<BR>
Subject: [DRBD-user] DRBD LVM2 Trouble<BR>
<BR>
Hey Guys,<BR>
<BR>
I have a pretty bad situation on my hands.<BR>
<BR>
We had a node configured running DRBD 8.0.6. The goal was to keep this&nbsp;<BR>
running in standalone mode until we provisioned a matching machine. We&nbsp;<BR>
purchased the matching machine and finally had it fully configured&nbsp;<BR>
today. I kicked off the initial sync, and had hoped that we would have&nbsp;<BR>
both machines in sync within a day or two.<BR>
<BR>
This was unfortunately not the case. When I kicked off the sync all&nbsp;<BR>
seemed well however our application quickly began throwing error's as&nbsp;<BR>
the primary node became read only. I quickly shut off drbd on the&nbsp;<BR>
secondary node and attempted to return the original configuration to&nbsp;<BR>
the primary server. Sadly no amount of back peddling has helped us. We&nbsp;<BR>
are currently dead in the water.<BR>
<BR>
DRBD was configured on the primary node with LVM. We have/had 3&nbsp;<BR>
resources configured the first 2 being 2TB in size and the 3rd being&nbsp;<BR>
1.4-5TB in size. Since stopping the initial sync I have not been able&nbsp;<BR>
to mount LVM Volume Group that sits above the three resources. NOTE:&nbsp;<BR>
the SDB devices on nfs2 are numbered differently.<BR>
<BR>
/var/log/messages was giving the following messages:<BR>
<BR>
Mar&nbsp; 5 14:38:35 nfs2 kernel: drbd2: rw=0, want=3434534208,&nbsp;<BR>
limit=3421310910<BR>
Mar&nbsp; 5 14:38:35 nfs2 kernel: attempt to access beyond end of device<BR>
Mar&nbsp; 5 14:38:35 nfs2 kernel: drbd2: rw=0, want=3434534216,&nbsp;<BR>
limit=3421310910<BR>
Mar&nbsp; 5 14:38:35 nfs2 kernel: attempt to access beyond end of device<BR>
Mar&nbsp; 5 14:38:35 nfs2 kernel: drbd2: rw=0, want=3434534224,&nbsp;<BR>
limit=3421310910<BR>
Mar&nbsp; 5 14:38:35 nfs2 kernel: attempt to access beyond end of device<BR>
<BR>
<BR>
Here is my conf:<BR>
<BR>
global {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; usage-count no;<BR>
}<BR>
<BR>
common {<BR>
<BR>
&nbsp;&nbsp; syncer {rate 20M;}<BR>
<BR>
&nbsp;&nbsp; handlers {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; local-io-error &quot;echo o &gt; /proc/sysrq-trigger ; halt -f&quot;;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; outdate-peer &quot;/sbin/drbd-peer-outdater&quot;;<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; startup {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; wfc-timeout&nbsp; 120;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; # s<BR>
&nbsp;&nbsp;&nbsp;&nbsp; degr-wfc-timeout 120;&nbsp;&nbsp;&nbsp; # 2 minutes.<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; disk {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; on-io-error&nbsp;&nbsp; detach;<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; net {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; sndbuf-size 512k;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; max-buffers&nbsp;&nbsp;&nbsp;&nbsp; 2048;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; unplug-watermark&nbsp;&nbsp; 128;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; cram-hmac-alg &quot;xxx&quot;;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; shared-secret &quot;xxx&quot;;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; after-sb-0pri disconnect;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; after-sb-1pri disconnect;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; after-sb-2pri disconnect;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; rr-conflict disconnect;<BR>
&nbsp;&nbsp; }<BR>
<BR>
}<BR>
<BR>
resource drbd_sdb1 {<BR>
&nbsp;&nbsp; protocol C;<BR>
<BR>
&nbsp;&nbsp; syncer {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; al-extents 1031;<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; on nfs2.imprev.net {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp;&nbsp; /dev/drbd0;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb1;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp;&nbsp; 216.145.23.104:7788;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; flexible-meta-disk&nbsp; /dev/sdb2;<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; on nfs1.imprev.net {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp; /dev/drbd0;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb1;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp; 216.145.23.103:7788;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; flexible-meta-disk /dev/sdb2;<BR>
&nbsp;&nbsp; }<BR>
}<BR>
<BR>
resource drbd_sdb3 {<BR>
&nbsp;&nbsp; protocol C;<BR>
<BR>
&nbsp;&nbsp; syncer {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; al-extents 1031;<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; on nfs2.imprev.net {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp;&nbsp; /dev/drbd1;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb3;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp;&nbsp; 216.145.23.104:7789;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; flexible-meta-disk&nbsp; /dev/sdb4;<BR>
<BR>
&nbsp;&nbsp; on nfs1.imprev.net {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp; /dev/drbd1;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb3;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp; 216.145.23.103:7789;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; flexible-meta-disk /dev/sdb4;<BR>
&nbsp;&nbsp; }<BR>
}<BR>
<BR>
resource drbd_sdb5 {<BR>
&nbsp;&nbsp; protocol C;<BR>
<BR>
&nbsp;&nbsp; syncer {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; al-extents 1031;<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; on nfs2.imprev.net {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp;&nbsp; /dev/drbd2;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb5;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp;&nbsp; 216.145.23.104:7790;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; flexible-meta-disk&nbsp; /dev/sdb6;<BR>
&nbsp;&nbsp; }<BR>
<BR>
&nbsp;&nbsp; on nfs1.imprev.net {<BR>
&nbsp;&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp; /dev/drbd2;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb5;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp; 216.145.23.103:7790;<BR>
&nbsp;&nbsp;&nbsp;&nbsp; flexible-meta-disk /dev/sdb6;<BR>
&nbsp;&nbsp; }<BR>
}<BR>
<BR>
<BR>
&nbsp;<BR>
&nbsp;<BR>
_______________________________________________<BR>
drbd-user mailing list<BR>
drbd-user@lists.linbit.com<BR>
<A HREF="http://lists.linbit.com/mailman/listinfo/drbd-user">http://lists.linbit.com/mailman/listinfo/drbd-user</A><BR>
</FONT>
</P>


<P></P>
<HR WIDTH="100%">
This e-mail, and any attachments thereto, is intended only for use by
the addressee(s) named herein and may contain legally privileged
and/or confidential information. If you are not the intended recipient
of this e-mail, you are hereby notified that any dissemination,
distribution or copying of this e-mail, and any attachments thereto,
is strictly prohibited. If you have received this e-mail in error,
please immediately notify the sender and permanently delete the
original and any copy or printout thereof.

</BODY>
</HTML>