<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">

<head>
<meta http-equiv=Content-Type content="text/html; charset=us-ascii">
<meta name=Generator content="Microsoft Word 12 (filtered medium)">
<style>
<!--
 /* Font Definitions */
 @font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page Section1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.Section1
        {page:Section1;}
-->
</style>
<!--[if gte mso 9]><xml>
 <o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
 <o:shapelayout v:ext="edit">
  <o:idmap v:ext="edit" data="1" />
 </o:shapelayout></xml><![endif]-->
</head>

<body lang=EN-GB link=blue vlink=purple>

<div class=Section1>

<p class=MsoNormal>Hi List,<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>Please help. I have installed drbd 8.3.5 on Open Suse 11.1
(Kernel 2.6.27.29-0.1). <o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>I have run drbdadm create-md dbms-test on one node and
create-md dbms-test2 on the other node. I then ran drbdadm up all on both
nodes. I then ran drbdadm -- --overwrite-data-of-my-peer primary dbms-test on
the first node and the same with dbms-test2 on the other node. They then run
for a short while before stalling. I have tried older version without success
and turning the sync rate down does not make any difference. Downing the resources
and bringing back up starts the sync again but this then stalls quickly.<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>I have attached /proc/drbd, /etc/drbd.conf and a section
from /var/log/messages. Any pointers would be greatly appreciated.<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>version: 8.3.5 (api:88/proto:86-91)<o:p></o:p></p>

<p class=MsoNormal>GIT-hash: ded8cdf09b0efa1460e8ce7a72327c60ff2210fb build by
root@hp-tm-40, 2009-11-24 12:21:46<o:p></o:p></p>

<p class=MsoNormal>&nbsp;0: cs:SyncSource ro:Secondary/Secondary
ds:UpToDate/Inconsistent C r----<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; ns:160896 nr:0 dw:0 dr:160896 al:0 bm:9
lo:1 pe:0 ua:0 ap:0 ep:1 wo:b oos:926694296<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; [&gt;.]
sync'ed:&nbsp; 0.1% (905040/905132)M&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 4972<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; stalled<o:p></o:p></p>

<p class=MsoNormal>&nbsp;1: cs:SyncTarget ro:Secondary/Secondary
ds:Inconsistent/UpToDate C r----<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; ns:0 nr:2173248 dw:2173248 dr:0 al:0
bm:132 lo:0 pe:29878 ua:0 ap:0 ep:1 wo:b oos:777971256<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; [&gt;.]
sync'ed:&nbsp; 0.3% (759736/761856)M<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Stalled<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>Drbd.conf<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>global {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; # minor-count 64;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; # dialog-refresh 5; # 5 seconds<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; # disable-ip-verification;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; usage-count no;<o:p></o:p></p>

<p class=MsoNormal>}<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>common {<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>handlers {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; pri-on-incon-degr &quot;echo o &gt;
/proc/sysrq-trigger ; halt -f&quot;;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; pri-lost-after-sb &quot;echo o &gt;
/proc/sysrq-trigger ; halt -f&quot;;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; local-io-error &quot;echo o &gt;
/proc/sysrq-trigger ; halt -f&quot;;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; outdate-peer
&quot;/usr/lib/heartbeat/drbd-peer-outdater -t 5&quot;;<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; startup {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; degr-wfc-timeout 120;&nbsp;&nbsp;&nbsp; #
2 minutes.<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; disk {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; on-io-error&nbsp;&nbsp; detach;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; # fencing resource-only;<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; net {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp; <o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; max-buffers&nbsp;&nbsp;&nbsp;&nbsp;
40000;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; unplug-watermark&nbsp;&nbsp; 40000;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; after-sb-0pri disconnect;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; after-sb-1pri disconnect;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; after-sb-2pri disconnect;<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; rr-conflict disconnect;<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; syncer {<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; rate 90M;<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; al-extents 257;<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; verify-alg crc32c;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; cpu-mask 1;<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>}<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>resource dbms-test {<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; protocol C;<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; on hp-tm-40 {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp;&nbsp;
/dev/drbd0;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
/dev/cciss/c0d1p4;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp;&nbsp;
192.168.95.53:7789;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; meta-disk&nbsp; /dev/cciss/c0d1p1[0];<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; on hp-tm-41 {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp; /dev/drbd0;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
/dev/cciss/c0d1p4;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp; 192.168.95.54:7789;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; meta-disk /dev/cciss/c0d1p1[0];<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal>}<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>resource dbms-test2 {<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; protocol C;<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; on hp-tm-40 {<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp;&nbsp;
/dev/drbd1;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
/dev/cciss/c0d1p3;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp; 192.168.95.53:7788;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; meta-disk /dev/cciss/c0d1p2[0];<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>&nbsp; on hp-tm-41{<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp;&nbsp;
/dev/drbd1;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
/dev/cciss/c0d1p3;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp; 192.168.95.54:7788;<o:p></o:p></p>

<p class=MsoNormal>&nbsp;&nbsp;&nbsp; meta-disk /dev/cciss/c0d1p2[0];<o:p></o:p></p>

<p class=MsoNormal>&nbsp; }<o:p></o:p></p>

<p class=MsoNormal>}<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>Section from /var/log/messages<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: peer(
Secondary -&gt; Unknown ) conn( SyncTarget -&gt; TearDown ) pdsk( UpToDate
-&gt; DUnknown )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: asender
terminated<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: Terminating
asender thread<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: Connection
closed<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: conn( TearDown
-&gt; Unconnected )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: receiver
terminated<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: Restarting
receiver thread<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: receiver
(re)started<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:43 hp-tm-41 kernel: block drbd0: conn(
Unconnected -&gt; WFConnection )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: conn(
WFConnection -&gt; Disconnecting )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: Discarding
network configuration.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: Connection closed<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: conn(
Disconnecting -&gt; StandAlone )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: receiver
terminated<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: Terminating
receiver thread<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: disk(
Inconsistent -&gt; Diskless )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: drbd_bm_resize
called with capacity == 0<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: worker
terminated<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd0: Terminating
worker thread<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: peer(
Secondary -&gt; Unknown ) conn( SyncSource -&gt; Disconnecting )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: meta
connection shut down by peer.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: asender
terminated<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: Terminating
asender thread<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: drbd_pp_alloc
interrupted!<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: alloc_ee:
Allocation of a page failed<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: error
receiving RSDataRequest, l: 24!<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: Connection
closed<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: conn(
Disconnecting -&gt; StandAlone )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: disk( UpToDate
-&gt; Diskless ) pdsk( Inconsistent -&gt; DUnknown )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: net_ee not
empty, killed 5000 entries<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: receiver
terminated<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: Terminating
receiver thread<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: drbd_bm_resize
called with capacity == 0<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: worker
terminated<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:46 hp-tm-41 kernel: block drbd1: Terminating
worker thread<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: Starting
worker thread (from cqueue [86])<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: disk( Diskless
-&gt; Attaching )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: No usable
activity log found.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: Method to
ensure write ordering: barrier<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0:
max_segment_size ( = BIO size ) = 32768<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: drbd_bm_resize
called with capacity == 1887428655<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: resync bitmap:
bits=235928582 words=3686385<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: size = 900 GB
(943714327 KB)<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: recounting of
set bits took additional 6 jiffies<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: 884 GB
(231676934 bits) marked out-of-sync by on disk bit-map.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: disk(
Attaching -&gt; Inconsistent )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: Barriers not
supported on meta data device - disabling<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: Starting
worker thread (from cqueue [86])<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: disk( Diskless
-&gt; Attaching )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: No usable
activity log found.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: Method to
ensure write ordering: barrier<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1:
max_segment_size ( = BIO size ) = 32768<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: drbd_bm_resize
called with capacity == 1887444720<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: resync bitmap:
bits=235930590 words=3686416<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: size = 900 GB
(943722360 KB)<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: recounting of
set bits took additional 6 jiffies<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: 742 GB
(194495454 bits) marked out-of-sync by on disk bit-map.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: disk(
Attaching -&gt; UpToDate ) pdsk( DUnknown -&gt; Outdated )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: Barriers not
supported on meta data device - disabling<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: conn(
StandAlone -&gt; Unconnected )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: Starting
receiver thread (from drbd0_worker [6688])<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: receiver
(re)started<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd0: conn(
Unconnected -&gt; WFConnection )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: conn(
StandAlone -&gt; Unconnected )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: Starting
receiver thread (from drbd1_worker [6695])<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: receiver
(re)started<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:50 hp-tm-41 kernel: block drbd1: conn(
Unconnected -&gt; WFConnection )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: Handshake
successful: Agreed network protocol version 91<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: conn(
WFConnection -&gt; WFReportParams )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: Starting
asender thread (from drbd0_receiver [6717])<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0:
data-integrity-alg: &lt;not-used&gt;<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0:
drbd_sync_handshake:<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: self
88E0ED22FECE2B68:0000000000000000:0000000000000000:0000000000000000
bits:231676934 flags:0<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: peer
5299E3A47E1A3F30:88E0ED22FECE2B69:8810A1CE27BB9808:27DB4B359F02FE48 bits:231676934
flags:0<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0:
uuid_compare()=-1 by rule 50<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: Becoming sync
target due to disk states.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: peer( Unknown
-&gt; Secondary ) conn( WFReportParams -&gt; WFBitMapT ) pdsk( DUnknown -&gt;
UpToDate )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1: Handshake
successful: Agreed network protocol version 91<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1: conn(
WFConnection -&gt; WFReportParams )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1: Starting
asender thread (from drbd1_receiver [6721])<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1:
data-integrity-alg: &lt;not-used&gt;<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1:
drbd_sync_handshake:<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1: self
12DFCDD264D5E7AE:20C37C56C7437B76:441CA1FB5B900754:4A4B9D0203491EC4
bits:194495454 flags:0<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1: peer
20C37C56C7437B76:0000000000000000:0000000000000000:0000000000000000
bits:194495454 flags:0<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1:
uuid_compare()=1 by rule 70<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1: Becoming sync
source due to disk states.<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd1: peer( Unknown
-&gt; Secondary ) conn( WFReportParams -&gt; WFBitMapS ) pdsk( Outdated -&gt;
Inconsistent )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: conn(
WFBitMapT -&gt; WFSyncUUID )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: helper
command: /sbin/drbdadm before-resync-target minor-0<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: helper
command: /sbin/drbdadm before-resync-target minor-0 exit code 0 (0x0)<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: conn(
WFSyncUUID -&gt; SyncTarget )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:53 hp-tm-41 kernel: block drbd0: Began resync
as SyncTarget (will sync 926707736 KB [231676934 bits set]).<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:54 hp-tm-41 kernel: block drbd1: conn(
WFBitMapS -&gt; SyncSource )<o:p></o:p></p>

<p class=MsoNormal>Nov 24 13:03:54 hp-tm-41 kernel: block drbd1: Began resync
as SyncSource (will sync 777981816 KB [194495454 bits set]).<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal>Thanks<o:p></o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

<p class=MsoNormal><o:p>&nbsp;</o:p></p>

</div>

</body>

</html>

<table><tr><td bgcolor=#ffffff><font color=#000000>*************************************************************************<br>This e-mail is confidential and may be legally privileged. It is intended<br>solely for the use of the individual(s) to whom it is addressed. Any<br>content in this message is not necessarily a view or statement from Road<br>Tech Computer Systems Limited but is that of the individual sender. If<br>you are not the intended recipient, be advised that you have received<br>this e-mail in error and that any use, dissemination, forwarding,<br>printing, or copying of this e-mail is strictly prohibited. We use<br>reasonable endeavours to virus scan all e-mails leaving the company but<br>no warranty is given that this e-mail and any attachments are virus free.<br>You should undertake your own virus checking. The right to monitor e-mail<br>communications through our networks is reserved by us<br></font></td></tr></table>
<table><tr><td bgcolor=#ffffff><font color=#000000>  Road Tech Computer Systems Ltd. Shenley Hall, Rectory Lane, Shenley,<br>  Radlett, Hertfordshire, WD7 9AN. - VAT Registration No GB 449 3582 17<br>  Registered in England No: 02017435, Registered Address: Charter Court, <br>  Midland Road, Hemel Hempstead,  Hertfordshire, HP2 5GE. <br>*************************************************************************<br></font></td></tr></table>