On Tue, Jun 24, 2008 at 12:06 PM,  &lt;<a href="mailto:justin.kinney@academy.com">justin.kinney@academy.com</a>&gt; wrote:<br><div class="gmail_quote"><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">
<div class="Ih2E3d">&gt; I&#39;ve deployed DRBD on HP DL360&#39;s and DL380&#39;s. I&#39;ve used internal<br>
&gt; meta w/o any noticeable loss of performance. The typical setup is<br>
&gt; usually (4) 72GB 15K SFF SAS drives in a RAID-10 or RAID-5 for DRBD.<br>
&gt; Array -&gt; LVM -&gt; DRBD -&gt; file system. In all cases, there is at least<br>
<br>
</div>I&#39;m setting up a very similar system here, using DL360s. &nbsp;But, I&#39;m using<br>
MSA-30&#39;s instead of local disks.<br>
<div class="Ih2E3d"><br>
&gt; 256MB of cache on the controller and the BBWC is installed and<br>
&gt; write-cache enabled. Drive-level cache is disabled of course.<br>
<br>
</div>By write-cache enabled, do you mean enabled through the controller<br>
configuration? &nbsp;or in DRBD?</blockquote><div><br>Through the controller.<br><br></div><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">
Same question for drive-level cache. &nbsp;Is that at the controller or kernel?</blockquote><div><br>Controller.<br><br> </div><div class="Ih2E3d">
&gt; Sequential write throughput is better than 150MBps native so the<br>
&gt; bottleneck becomes the 1Gbps xover link between the boxes -- which<br>
&gt; is fine for these environments.<br>
<br>
</div><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">I&#39;m seeing 100MB/s during complete syncs over bonded gig-e links, so I&#39;m<br>
hoping for a little better performance.</blockquote><div><br>I have not deployed DRBD w/bonded interfaces yet so I&#39;m not sure what to expect there. You should verify what your storage is capable of outside of DRBD. Depending on how many spindles you have in your array and what RAID level you&#39;ve chosen, you will get well above 100MB/s for sequential writes. Check to make sure you have BBWC&#39;s on your controllers and that write-cache is enabled. That&#39;s where the big performance comes from. You can check right through the OS if you&#39;ve installed the CLI (hpacucli -- pretty sure that will work for the MSA 30).<br>
</div></div><br>- Chris<br>