<div>After placing the metadata on a different spindle (HD) , i was able to reach almost close to native speed (1-2MB/s less) </div>
<div>&nbsp;</div>
<div>with metadata internal i was reaching tops&nbsp;around half&nbsp;of the native speed ,&nbsp; 37MB/s~&nbsp;:</div>
<div>&nbsp;physical partition -&gt; drbd -&gt; ext3&nbsp;</div>
<div>&nbsp; and </div>
<div>63MB/s~ with physical partition -&gt; ext3&nbsp;</div>
<div>61MB/s with&nbsp; metadata&nbsp;&nbsp;external,&nbsp;now this is true&nbsp;for another strong machine&nbsp;.</div>
<div>&nbsp;</div>
<div>This&nbsp;other machine&nbsp;has hardware RAID1&nbsp;with two : </div>
<div>Cheetah T10 series,</div>
<div>146GB ,Serial Attached SCSI</div>
<div>Interface Speed: 3Gb/s </div>
<div>Spindle Rotation Speed: 15,000 RPM</div>
<div>Performance: 10K</div>
<div>on an IBM 2G Xeon server with 2 dual cpu packages , each cpu with 4 cores . <a class="l" onmousedown="return clk(this.href,&#39;&#39;,&#39;&#39;,&#39;res&#39;,&#39;4&#39;,&#39;&#39;)" href="http://publib.boulder.ibm.com/infocenter/eserver/v1r2/topic/diricinfo/fqy0_cibmraid.html"><font color="#551a8b"><b>IBM ServeRAID</b> SCSI controllers</font></a></div>

<div>
<div>4GB of ram</div></div>
<div>native speed&nbsp; -hardware raid1 -&gt; &nbsp;physical partition -&gt; ext3 is around 110MB/s ( still isn&#39;t this a bit slow for this HD ? )</div>
<div>hardware raid1 -&gt; physical partition -&gt; drbd -&gt; ext3 - 101MB/s with </div>
<div>external metadata on a USB2 connected SATA HD 7,200 rpm</div>
<div>&nbsp;</div>
<div>now this is the crazy part&nbsp; - 8.3MB/s~ write speed ! with internal metadata , and 150MB/s read speed..</div>
<div>this test was repeated with bonnie , iozone and dd , all showed around same numbers , </div>
<div>i mean why the huge jump from 8MB/s to 100MB/s when using external metadata , and should this be STRESSED on the Docs or when starting the program that putting the metadata on external media improves performance significantly?&nbsp; , still i don&#39;t understand why i was able to reach only 8MB/s write speed on this strong server , maybe because of the hardware raid1 underneath?</div>

<div>&nbsp;</div>
<div>&nbsp;</div>
<div>kernel reports for the raid controller :</div>
<div>Adaptec aacraid driver 1.1-5[2437]-mh4<br>ACPI: PCI Interrupt 0000:04:00.0[A] -&gt; GSI 17 (level, low) -&gt; IRQ 16<br>PCI: Setting latency timer of device 0000:04:00.0 to 64<br>AAC0: kernel 5.2-0[15411] Oct 11 2007<br>
AAC0: monitor 5.2-0[15411]<br>AAC0: bios 5.2-0[15411]<br>AAC0: serial 402A183<br>AAC0: 64bit support enabled.<br>AAC0: 64 Bit DAC enabled<br>scsi0 : ServeRAID<br>&nbsp; Vendor: ServeRA&nbsp;&nbsp; Model: system&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Rev: V1.0<br>&nbsp; Type:&nbsp;&nbsp; Direct-Access&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; ANSI SCSI revision: 02<br>
</div>
<div>drbd ver 8.2.6 (api:86/proto:86-88)</div>
<div>&nbsp;</div>
<div>at first i thought it was network performance issue , i benchmarked with ipref and reached 990Mbit gigabit speed, then i monitored the line with iptraf and saw&nbsp; 14MB/s tops writing speed on the drbd drive , and 50MB/s tops when doing synchronization</div>

<div>&nbsp;</div>
<div>so i tried on standalone mode , and saw it would go beyond 8MB/s with the benchmark tools , so it clearly wasn&#39;t a network issue</div>
<div>&nbsp;</div>
<div>Marcelo.</div>