The 12MB/sec is the speed of 10Mbit with overhead.<br><br>I&#39;d say that the data was going out the wrong interface or the speed configuration isn&#39;t in the right place in the config file.<br><br><br><br><div><span class="gmail_quote">
On 6/20/07, <b class="gmail_sendername">Marcello Lupo</b> &lt;<a href="mailto:mlist@itspecialist.it">mlist@itspecialist.it</a>&gt; wrote:</span><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">
Hi,<br>thanks for answers.<br>Comments inline<br><br>Siim Vahtre wrote:<br>&gt; On Wed, 20 Jun 2007, Marcello Lupo wrote:<br>&gt;<br>&gt;&gt; If i force the sync of the partitions to drbd with invalidate_remote<br>&gt;&gt; it do not go over 12 Mb/sec.
<br>&gt;<br>&gt; This doesn&#39;t seem normal.<br>&gt;<br>&gt;<br>&gt; Some obligatory questions:<br>&gt;<br>&gt; * Are you sure you actually have working fullduplex Gbit link? (check<br>&gt; with ethtool)<br>&gt;<br>Yes.
<br>Settings for eth1:<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Supported ports: [ MII ]<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Supported link modes:&nbsp;&nbsp; 10baseT/Half 10baseT/Full<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;100baseT/Half 100baseT/Full<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;1000baseT/Half 1000baseT/Full
<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Supports auto-negotiation: Yes<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Advertised link modes:&nbsp;&nbsp;10baseT/Half 10baseT/Full<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;100baseT/Half 100baseT/Full<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;1000baseT/Half 1000baseT/Full
<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Advertised auto-negotiation: Yes<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Speed: 1000Mb/s<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Duplex: Full<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Port: Twisted Pair<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;PHYAD: 1<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Transceiver: internal<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Auto-negotiation: on<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Supports Wake-on: g
<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Wake-on: d<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Current message level: 0x000000ff (255)<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Link detected: yes<br><br>&gt; * Are you sure you actually can write to your disks faster than<br>&gt; 12Mbytes/sec? (try with benchmarking tool that comes with drbd &#39;
dm.c&#39;)<br>&gt;<br>I tried to copy with scp from one machine to the other a 4GB file and it<br>went at ~40Mb/s.<br><br>Tool you said dm.c the documentation says that is untouched from version<br>0.6 and not working currently with 
0.7 version.<br>SOme times in cat /proc/drbd i see some peak of speed around 18/20<br>Mb/sec but it is very rare. the average is everytime around 14/15 Mb/sec.<br><br>Now i tried with bonnie++ and this is the result<br><br>
Version&nbsp;&nbsp;@version@&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;------Sequential Output------ --Sequential<br>Input- --Random-<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;-Per Chr- --Block-- -Rewrite- -Per Chr- --Block--<br>--Seeks--<br>Machine&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP
<br>/sec %CP<br>host0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;4G 40987&nbsp;&nbsp;99 85422&nbsp;&nbsp;33 45074&nbsp;&nbsp;11 53951&nbsp;&nbsp;99 120726&nbsp;&nbsp;15<br>1152.6&nbsp;&nbsp; 2<br>host0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;4G 41007&nbsp;&nbsp;99 88090&nbsp;&nbsp;34 44630&nbsp;&nbsp;11 53664&nbsp;&nbsp;99 122682&nbsp;&nbsp;16<br>1169.1&nbsp;&nbsp; 1<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;------Sequential Create------ --------Random
<br>Create--------<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;-Create-- --Read--- -Delete-- -Create-- --Read---<br>-Delete--<br>files:max:min&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;/sec %CP&nbsp;&nbsp;/sec %CP&nbsp;&nbsp;/sec %CP&nbsp;&nbsp;/sec %CP&nbsp;&nbsp;/sec %CP<br>/sec %CP<br>host0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;16 17641&nbsp;&nbsp;99 +++++ +++ 16958&nbsp;&nbsp;99 19706 100 +++++ +++
<br>16110&nbsp;&nbsp;99<br>host0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;16 15767&nbsp;&nbsp;76 +++++ +++ 17099&nbsp;&nbsp;99 19778&nbsp;&nbsp;99 +++++ +++<br>16256&nbsp;&nbsp;10<br><br>&gt; * Are you sure nothing else is writing to disks at the same time?<br>&gt;<br>Yes the servers are not used at the moment. I&#39;m just making all
<br>preinstall tests of speed and so on before install.<br><br>&gt;&gt; i tried with rate option to 50M,40M,30M and it is the same.<br>&gt;<br>&gt; * Did you drbdadm adjust after changing config?<br>&gt;<br>I made drbd completely stop and start to be sure all the times i changed
<br>the config.<br><br>&gt;<br>&gt; * Have you searched the mailing-list archives? I think I have seen<br>&gt; several questions like yours, maybe someone has already solved problem<br>&gt; like this.<br>&gt;<br>&gt;<br><br>
I searched for something but found nothing that was usefull to me.. May<br>be i didn&#39;t searched so well.<br><br>Thanks,<br>Bye,<br>Marcello<br><br>_______________________________________________<br>drbd-user mailing list
<br><a href="mailto:drbd-user@lists.linbit.com">drbd-user@lists.linbit.com</a><br><a href="http://lists.linbit.com/mailman/listinfo/drbd-user">http://lists.linbit.com/mailman/listinfo/drbd-user</a><br></blockquote></div><br>