<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html>
  <head>
    <meta content="text/html; charset=ISO-8859-1"
      http-equiv="Content-Type">
  </head>
  <body bgcolor="#ffffff" text="#000000">
    <tt>On 1/4/2011 2:46 AM, Sean McCreadie wrote:</tt>
    <blockquote
      cite="mid:A0708D3560509B49BF9A0FAA27D3D021DFFAEA89@sr-es-email05"
      type="cite">
      <meta http-equiv="Content-Type" content="text/html;
        charset=ISO-8859-1">
      <meta name="Generator" content="Microsoft Word 12 (filtered
        medium)">
      <style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
      <div class="WordSection1">
        <p class="MsoNormal"><tt><o:p></o:p></tt><tt>I have tested write
            performance using fio and right now the best I can get is
            write throughput and IOPS that are about 50-75% as good as
            with drbd replication disabled. <o:p></o:p></tt><tt><br>
          </tt></p>
      </div>
    </blockquote>
    <tt><br>
      Were you able to get closer to the throughput in non-replicated
      configuration when using protocol A instead of C? Using very much
      the same params as in your configuration, I see that protocol A
      buys me better latency but not any further bandwidth. <br>
      <br>
      I'm on 500 MB/s for replicating one drbd lun, 1GB/s for two and
      the same for three. My underline interconnect is Infiniband/DDR
      whose bandwidth is 1900MB/s. These disks can yield 1600 MBs for
      drbd read test or write test when the connection is off. So I'm
      also hitting some unknown (yet, to me) bottleneck...<br>
      <br>
      Or.<br>
    </tt>
  </body>
</html>