<br><font size=2><tt>I've been using HP NC510C PCIe 10 gigabit nic(netxen)
since early 2009 in</tt></font>
<br><font size=2><tt>a drbd setup between two DL380G5. We did experience
hanging issues with </tt></font>
<br><font size=2><tt>the card but this was related to driver versions(HP
psp support packs).</tt></font>
<br><font size=2><tt>We ended up opening a case with HP and are currently
running on an &quot;older&quot; </tt></font>
<br><font size=2><tt>version of the nx_nic driver. If you want I will send
you the specifics offline.</tt></font>
<br>
<br><font size=2><tt>BTW I just purchased some DL380G6 with NC522SFP(with
BLc copper)and will be setting them</tt></font>
<br><font size=2><tt>&nbsp; &nbsp; up in the New Year.</tt></font>
<br>
<br><font size=2><tt>&gt; Message: 4<br>
&gt; Date: Wed, 25 Nov 2009 11:45:23 -0700<br>
&gt; From: Mike Lovell &lt;mike@dev-zero.net&gt;<br>
&gt; Subject: Re: [DRBD-user] 8.3.5 Stalling on sync<br>
&gt; To: James Larcombe &lt;jim@roadtech.co.uk&gt;<br>
&gt; Cc: drbd-user@lists.linbit.com<br>
&gt; Message-ID: &lt;4B0D7B43.3060302@dev-zero.net&gt;<br>
&gt; Content-Type: text/plain; charset=&quot;iso-8859-1&quot;; Format=&quot;flowed&quot;<br>
</tt></font>
<br><font size=2><tt>&gt; hrm. i thought i had heard of someone using drbd
over 10 gig with netxen<br>
&gt; cards. i went looking for a few minutes and didn't find anything though.<br>
&gt; my recommendation would be try newer drivers either through compiling<br>
&gt; the drivers for you existing kernel or using a newer kernel. i don't<br>
&gt; have details on how to do that for your cards cause i have never used<br>
&gt; any 10 gig from hp or netxen. other than that, my only recommendation
is<br>
&gt; new nics.<br>
</tt></font>
<br><font size=2><tt>&gt; good luck<br>
</tt></font>
<br><font size=2><tt>&gt; mike<br>
</tt></font>
<br><font size=2><tt>&gt; James Larcombe wrote:<br>
&gt; &gt;<br>
&gt; &gt; Hi Mike,<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; The cards I'm using are HP NC522SFP Dual Port 10GbE Server Adapters<br>
&gt; &gt; with HP BLc 10Gb SR SFP+ Fiber Transceivers. I could try running
these<br>
&gt; &gt; with 1GB Fiber cables instead of 10GB.<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; James<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; *From:* Mike Lovell [mailto:mike@dev-zero.net]<br>
&gt; &gt; *Sent:* 25 November 2009 16:01<br>
&gt; &gt; *To:* James Larcombe<br>
&gt; &gt; *Cc:* drbd-user@lists.linbit.com<br>
&gt; &gt; *Subject:* Re: [DRBD-user] 8.3.5 Stalling on sync<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; nothing i tried tweaking in drbd.conf worked. the only thing
that did<br>
&gt; &gt; was changing the 10gig interfaces. what cards are you using?
i was<br>
&gt; &gt; using ones with an intel chip. the cards that i did get it to
work<br>
&gt; &gt; with were from chelsio. in my previous thread on the list, someone<br>
&gt; &gt; mentioned that they had neterion cards working.<br>
&gt; &gt;<br>
&gt; &gt; mike<br>
&gt; &gt;<br>
&gt; &gt; James Larcombe wrote:<br>
&gt; &gt;<br>
&gt; &gt; Hi Mike,<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; Thanks for the quick response. Yes you are correct we are using
10gig<br>
&gt; &gt; fibre cards. I'm not sure we could change them though as the
fibre<br>
&gt; &gt; modules used in them cost over ?400 each.<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; Is there anything I can tweak in the drbd.conf file to get these
to work.<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; James<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; *From:* Mike Lovell [mailto:mike@dev-zero.net]<br>
&gt; &gt; *Sent:* 24 November 2009 17:49<br>
&gt; &gt; *To:* James Larcombe<br>
&gt; &gt; *Cc:* drbd-user@lists.linbit.com &lt;mailto:drbd-user@lists.linbit.com&gt;<br>
&gt; &gt; *Subject:* Re: [DRBD-user] 8.3.5 Stalling on sync<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; James Larcombe wrote:<br>
&gt; &gt;<br>
&gt; &gt; Hi List,<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; Please help. I have installed drbd 8.3.5 on Open Suse 11.1 (Kernel<br>
&gt; &gt; 2.6.27.29-0.1).<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; I have run drbdadm create-md dbms-test on one node and create-md<br>
&gt; &gt; dbms-test2 on the other node. I then ran drbdadm up all on both
nodes.<br>
&gt; &gt; I then ran drbdadm -- --overwrite-data-of-my-peer primary dbms-test
on<br>
&gt; &gt; the first node and the same with dbms-test2 on the other node.
They<br>
&gt; &gt; then run for a short while before stalling. I have tried older
version<br>
&gt; &gt; without success and turning the sync rate down does not make
any<br>
&gt; &gt; difference. Downing the resources and bringing back up starts
the sync<br>
&gt; &gt; again but this then stalls quickly.<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; I have attached /proc/drbd, /etc/drbd.conf and a section from<br>
&gt; &gt; /var/log/messages. Any pointers would be greatly appreciated.<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; version: 8.3.5 (api:88/proto:86-91)<br>
&gt; &gt;<br>
&gt; &gt; GIT-hash: ded8cdf09b0efa1460e8ce7a72327c60ff2210fb build by<br>
&gt; &gt; root@hp-tm-40, 2009-11-24 12:21:46<br>
&gt; &gt;<br>
&gt; &gt; &nbsp;0: cs:SyncSource ro:Secondary/Secondary ds:UpToDate/Inconsistent
C r----<br>
&gt; &gt;<br>
&gt; &gt; &nbsp; &nbsp; ns:160896 nr:0 dw:0 dr:160896 al:0 bm:9 lo:1 pe:0
ua:0 ap:0 ep:1<br>
&gt; &gt; wo:b oos:926694296<br>
&gt; &gt;<br>
&gt; &gt; &nbsp; &nbsp; &nbsp; &nbsp; [&gt;.] sync'ed: &nbsp;0.1% (905040/905132)M
&nbsp; &nbsp; &nbsp;4972<br>
&gt; &gt;<br>
&gt; &gt; &nbsp; &nbsp; &nbsp; &nbsp; stalled<br>
&gt; &gt;<br>
&gt; &gt; &nbsp;1: cs:SyncTarget ro:Secondary/Secondary ds:Inconsistent/UpToDate
C r----<br>
&gt; &gt;<br>
&gt; &gt; &nbsp; &nbsp; ns:0 nr:2173248 dw:2173248 dr:0 al:0 bm:132 lo:0
pe:29878 ua:0<br>
&gt; &gt; ap:0 ep:1 wo:b oos:777971256<br>
&gt; &gt;<br>
&gt; &gt; &nbsp; &nbsp; &nbsp; &nbsp; [&gt;.] sync'ed: &nbsp;0.3% (759736/761856)M<br>
&gt; &gt;<br>
&gt; &gt; &nbsp; &nbsp; &nbsp; &nbsp; Stalled<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; what kind of network are you using between the two servers? this
is<br>
&gt; &gt; almost the exact same behavior i had when i was trying to get
drbd to<br>
&gt; &gt; work over 10gig ethernet. turned out to be something in drbd
didn't<br>
&gt; &gt; like something about the 10gig cards i had. i eventually had
to change<br>
&gt; &gt; my network cards. what cards are you using? 1gig? 10gig? have
you<br>
&gt; &gt; tried other cards? that is where i would look.<br>
&gt; &gt;<br>
&gt; &gt; mike<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
</tt></font>
<br>