<!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html>
<head>
  <meta content="text/html;charset=ISO-8859-1" http-equiv="Content-Type">
</head>
<body bgcolor="#ffffff" text="#000000">
hrm. i thought i had heard of someone using drbd over 10 gig with
netxen cards. i went looking for a few minutes and didn't find anything
though. my recommendation would be try newer drivers either through
compiling the drivers for you existing kernel or using a newer kernel.
i don't have details on how to do that for your cards cause i have
never used any 10 gig from hp or netxen. other than that, my only
recommendation is new nics.<br>
<br>
good luck<br>
<br>
mike<br>
<br>
James Larcombe wrote:
<blockquote cite="mid:00a001ca6df3$6ffa36f0$4feea4d0$@co.uk" type="cite">
  <meta http-equiv="Content-Type" content="text/html; ">
  <meta name="Generator" content="Microsoft Word 12 (filtered medium)">
  <style>
<!--
 /* Font Definitions */
 @font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";
        color:black;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
span.EmailStyle18
        {mso-style-type:personal;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
span.EmailStyle19
        {mso-style-type:personal-reply;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page Section1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.Section1
        {page:Section1;}
-->
  </style>
<!--[if gte mso 9]><xml>
 <o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
 <o:shapelayout v:ext="edit">
  <o:idmap v:ext="edit" data="1" />
 </o:shapelayout></xml><![endif]-->
  <div class="Section1">
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">Hi Mike,<o:p></o:p></span></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);"><o:p>&nbsp;</o:p></span></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">The cards
I&#8217;m using are HP
NC522SFP Dual Port 10GbE Server Adapters with HP BLc 10Gb SR SFP+ Fiber
Transceivers. I could try running these with 1GB Fiber cables instead
of 10GB. <o:p></o:p></span></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);"><o:p>&nbsp;</o:p></span></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">James<o:p></o:p></span></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);"><o:p>&nbsp;</o:p></span></p>
  <div>
  <div
 style="border-style: solid none none; border-color: rgb(181, 196, 223) -moz-use-text-color -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><span
 style="font-size: 10pt; font-family: &quot;Tahoma&quot;,&quot;sans-serif&quot;; color: windowtext;"
 lang="EN-US">From:</span></b><span
 style="font-size: 10pt; font-family: &quot;Tahoma&quot;,&quot;sans-serif&quot;; color: windowtext;"
 lang="EN-US">
Mike Lovell [<a class="moz-txt-link-freetext" href="mailto:mike@dev-zero.net">mailto:mike@dev-zero.net</a>] <br>
  <b>Sent:</b> 25 November 2009 16:01<br>
  <b>To:</b> James Larcombe<br>
  <b>Cc:</b> <a class="moz-txt-link-abbreviated" href="mailto:drbd-user@lists.linbit.com">drbd-user@lists.linbit.com</a><br>
  <b>Subject:</b> Re: [DRBD-user] 8.3.5 Stalling on sync<o:p></o:p></span></p>
  </div>
  </div>
  <p class="MsoNormal"><o:p>&nbsp;</o:p></p>
  <p class="MsoNormal">nothing i tried tweaking in drbd.conf worked.
the only thing
that did was changing the 10gig interfaces. what cards are you using? i
was
using ones with an intel chip. the cards that i did get it to work with
were
from chelsio. in my previous thread on the list, someone mentioned that
they
had neterion cards working.<br>
  <br>
mike<br>
  <br>
James Larcombe wrote: <o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">Hi Mike,</span><o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">&nbsp;</span><o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">Thanks
for the quick response.
Yes you are correct we are using 10gig fibre cards. I&#8217;m not sure we
could
change them though as the fibre modules used in them cost over &pound;400
each.</span><o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">&nbsp;</span><o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">Is there
anything I can tweak in
the drbd.conf file to get these to work.</span><o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">&nbsp;</span><o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">James</span><o:p></o:p></p>
  <p class="MsoNormal"><span style="color: rgb(31, 73, 125);">&nbsp;</span><o:p></o:p></p>
  <div>
  <div
 style="border-style: solid none none; border-color: -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><span
 style="font-size: 10pt; font-family: &quot;Tahoma&quot;,&quot;sans-serif&quot;; color: windowtext;"
 lang="EN-US">From:</span></b><span
 style="font-size: 10pt; font-family: &quot;Tahoma&quot;,&quot;sans-serif&quot;; color: windowtext;"
 lang="EN-US">
Mike Lovell [<a moz-do-not-send="true" href="mailto:mike@dev-zero.net">mailto:mike@dev-zero.net</a>]
  <br>
  <b>Sent:</b> 24 November 2009 17:49<br>
  <b>To:</b> James Larcombe<br>
  <b>Cc:</b> <a moz-do-not-send="true"
 href="mailto:drbd-user@lists.linbit.com">drbd-user@lists.linbit.com</a><br>
  <b>Subject:</b> Re: [DRBD-user] 8.3.5 Stalling on sync</span><o:p></o:p></p>
  </div>
  </div>
  <p class="MsoNormal">&nbsp;<o:p></o:p></p>
  <p class="MsoNormal">James Larcombe wrote: <o:p></o:p></p>
  <p class="MsoNormal">Hi List,<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;<o:p></o:p></p>
  <p class="MsoNormal">Please help. I have installed drbd 8.3.5 on Open
Suse 11.1
(Kernel 2.6.27.29-0.1). <o:p></o:p></p>
  <p class="MsoNormal">&nbsp;<o:p></o:p></p>
  <p class="MsoNormal">I have run drbdadm create-md dbms-test on one
node and
create-md dbms-test2 on the other node. I then ran drbdadm up all on
both
nodes. I then ran drbdadm -- --overwrite-data-of-my-peer primary
dbms-test on
the first node and the same with dbms-test2 on the other node. They
then run
for a short while before stalling. I have tried older version without
success
and turning the sync rate down does not make any difference. Downing
the
resources and bringing back up starts the sync again but this then
stalls
quickly.<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;<o:p></o:p></p>
  <p class="MsoNormal">I have attached /proc/drbd, /etc/drbd.conf and a
section
from /var/log/messages. Any pointers would be greatly appreciated.<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;<o:p></o:p></p>
  <p class="MsoNormal">version: 8.3.5 (api:88/proto:86-91)<o:p></o:p></p>
  <p class="MsoNormal">GIT-hash:
ded8cdf09b0efa1460e8ce7a72327c60ff2210fb build by
root@hp-tm-40, 2009-11-24 12:21:46<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;0: cs:SyncSource ro:Secondary/Secondary
ds:UpToDate/Inconsistent C r----<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;&nbsp;&nbsp; ns:160896 nr:0 dw:0 dr:160896 al:0 bm:9
lo:1 pe:0 ua:0 ap:0 ep:1 wo:b oos:926694296<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; [&gt;.]
sync'ed:&nbsp; 0.1% (905040/905132)M&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 4972<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; stalled<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;1: cs:SyncTarget ro:Secondary/Secondary
ds:Inconsistent/UpToDate C r----<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;&nbsp;&nbsp; ns:0 nr:2173248 dw:2173248 dr:0 al:0
bm:132 lo:0 pe:29878 ua:0 ap:0 ep:1 wo:b oos:777971256<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; [&gt;.]
sync'ed:&nbsp; 0.3% (759736/761856)M<o:p></o:p></p>
  <p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Stalled<o:p></o:p></p>
  <p class="MsoNormal"><span
 style="font-size: 12pt; font-family: &quot;Times New Roman&quot;,&quot;serif&quot;;"><br>
what kind of network are you using between the two servers? this is
almost the
exact same behavior i had when i was trying to get drbd to work over
10gig
ethernet. turned out to be something in drbd didn't like something
about the 10gig
cards i had. i eventually had to change my network cards. what cards
are you
using? 1gig? 10gig? have you tried other cards? that is where i would
look.<br>
  <br>
mike</span><o:p></o:p></p>
  <p class="MsoNormal"><span
 style="font-size: 12pt; font-family: &quot;Times New Roman&quot;,&quot;serif&quot;;"><o:p>&nbsp;</o:p></span></p>
  </div>
</blockquote>
<br>
</body>
</html>