<html>
  <head>
    <meta content="text/html; charset=ISO-8859-1"
      http-equiv="Content-Type">
  </head>
  <body bgcolor="#FFFFFF" text="#000000">
    Am 04.01.2012 16:24, schrieb Donald Pearson:
    <blockquote
cite="mid:CAC=t97D=TdUgOs-T9m3cdYHT2ohgbOK-K0N41SjUTp21dc92Bg@mail.gmail.com"
      type="cite">Perhaps it's time to look at a pcap of the rsync
      transfer.  Throughput is in the aggregate over time, I've seen
      instances where there are excessively long delays between packets
      causing a low overall throughput.<br>
    </blockquote>
    <br>
    Ok, verry good idea!<br>
    I try this and post the results.<br>
    <blockquote
cite="mid:CAC=t97D=TdUgOs-T9m3cdYHT2ohgbOK-K0N41SjUTp21dc92Bg@mail.gmail.com"
      type="cite">
      <br>
      <div class="gmail_quote">On Wed, Jan 4, 2012 at 5:06 AM, Rainer
        Pietsch <span dir="ltr"><<a moz-do-not-send="true"
            href="mailto:rp.rsync@pcs-at.com">rp.rsync@pcs-at.com</a>></span>
        wrote:<br>
        <blockquote class="gmail_quote" style="margin:0 0 0
          .8ex;border-left:1px #ccc solid;padding-left:1ex">
          <br>
          <br>
          Am 04.01.2012 10:46, schrieb Hendrik Visage:<br>
          <div>
            <div class="h5">> On Tue, Jan 3, 2012 at 3:42 PM, R.
              Pietsch <<a moz-do-not-send="true"
                href="mailto:rp.rsync@pcs-at.com">rp.rsync@pcs-at.com</a>>
              wrote:<br>
              >> Hi!<br>
              >><br>
              >> I do a rsync between 2 machines. The throughput
              is only 2 MByte/Sec.<br>
              >><br>
              >> Each machine is a Supermicro server with<br>
              >>    2 x 8 Core Opteron 6128<br>
              >>    64 GByte of ECC RAM<br>
              >>    1 LSI MegaRAID SAS 9280-24i4e<br>
              >>    24 x 2TByte SATA Disks as a RAID6<br>
              >>    2 Intel Corporation 82599EB 10-Gigabit
              SFI/SFP+ Network-cards<br>
              >><br>
              >> Both run Ubuntu 11.04 64Bit.<br>
              >> Both use rsync version 3.0.7  protocol version 30<br>
              >><br>
              >> There are no errors reported.<br>
              >> The local read and write rate to the disks is 1,1
              GB/s.<br>
              >> A network test shows 800MByte/s over the direct
              coupled network-cards.<br>
              >> The CPU-usage is  5 to 7% of one core.<br>
              >> Memory-usage is 1703 out of 64557MB.<br>
              >> There are no other jobs running on the two
              machines.<br>
              >> The LSI controllers both say: State: Optimal<br>
              >><br>
              >><br>
              >> machine A has a rsync-daemon with the following
              configuration:<br>
              >> ----------<br>
              >> read only = false<br>
              >> use chroot = false<br>
              >> hosts allow = <a moz-do-not-send="true"
                href="http://10.99.11.0/24" target="_blank">10.99.11.0/24</a><br>
              >> [Daten1]<br>
              >>        path = /var/daten1<br>
              >>        use chroot = yes<br>
              >>        read only = yes<br>
              >>        list = yes<br>
              >>        uid = root<br>
              >>        gid = root<br>
              >>        strict modes = yes<br>
              >>        ignore errors = no<br>
              >>        ignore nonreadable = yes<br>
              >>        transfer logging = no<br>
              >>        timeout = 600<br>
              >>        refuse options = checksum dry-run<br>
              >>        dont compress = *<br>
              >> ----------<br>
              >><br>
              >> machine B runs:<br>
              >><br>
              >> /usr/bin/rsync -ax --numeric-ids --delete
              --delete-excluded \<br>
              >>    --exclude-from=/Backup/RB_None.excl \<br>
              >>    --link-dest=/Backup/Base/xxxxx \<br>
              >>    rsync://<a moz-do-not-send="true"
                href="http://root@10.99.11.11/Daten1/" target="_blank">root@10.99.11.11/Daten1/</a>
              \<br>
              >>    /Backup/Base/yyyyyyy \<br>
              >>    --no-c --no-z<br>
              >><br>
              >> The files are all about 8 MB in size.<br>
              >><br>
              >>    8302592 100%    1.98MB/s    0:00:04 (xfer#861,
              to-check=51173/94679)<br>
              >><br>
              >> The same - slow - transfer happens at 1GB and 5GB
              files.<br>
              >><br>
              >><br>
              >> Any ideas what can cause this slow transmission?<br>
              ><br>
              > You do have jumbo frames enabled on both servers and
              the network<br>
              > equipment in between?<br>
              ><br>
              > Do check the TCP/IP stack parameters, as most
              bandwidth testing is<br>
              > done with UDP.<br>
            </div>
          </div>
          Jumbo frames are NOT enabled - (they cause trouble with samba)
          and the<br>
          test is done with netperf and tcp.<br>
          The result is<br>
          -----------------------<br>
          TCP STREAM TEST from 0.0.0.0 (0.0.0.0) port 0 AF_INET to
          10.99.11.11<br>
          (10.99.11.11) port 0 AF_INET : demo<br>
          Recv   Send    Send<br>
          Socket Socket  Message  Elapsed<br>
          Size   Size    Size     Time     Throughput<br>
          bytes  bytes   bytes    secs.    10^6bits/sec<br>
          <br>
           87380  16384  16384    10.00    7300.70<br>
          <br>
          -----------------------<br>
          So we get 7.3 GBit with a tcp-stream - rawly 800MByte/sec<br>
          <div class="im"><br>
            <br>
            --<br>
            Mit freundlichen Grüßen / best regards<br>
            <br>
            Ing. Rainer Pietsch<br>
            ----------------------------------------------------------<br>
            PCS - Pichler Computer Systeme<br>
            Inh. Claudia Pichler-Pietsch<br>
            Hauptplatz 10<br>
            A-2751 Steinabrückl<br>
            Österreich / Austria<br>
            ----------------------------------------------------------<br>
            mail:  <a moz-do-not-send="true"
              href="mailto:r.pietsch@pcs-at.com">r.pietsch@pcs-at.com</a><br>
            web:   <a moz-do-not-send="true"
              href="http://www.pcs-at.com" target="_blank">http://www.pcs-at.com</a><br>
            tel.:  <a moz-do-not-send="true"
              href="tel:%2B43%20%282622%29%20420%2019%20%2F%2015"
              value="+4326224201915">+43 (2622) 420 19 / 15</a><br>
            mobil: <a moz-do-not-send="true"
              href="tel:%2B43%20%28676%29%2031%20242%2069"
              value="+436763124269">+43 (676) 31 242 69</a><br>
            fax:   <a moz-do-not-send="true"
              href="tel:%2B43%20%282622%29%20420%2019%20%2F%2020"
              value="+4326224201920">+43 (2622) 420 19 / 20</a><br>
            ----------------------------------------------------------<br>
            <br>
          </div>
          <div>
            <div class="h5">--<br>
              Please use reply-all for most replies to avoid omitting
              the mailing list.<br>
              To unsubscribe or change options: <a
                moz-do-not-send="true"
                href="https://lists.samba.org/mailman/listinfo/rsync"
                target="_blank">https://lists.samba.org/mailman/listinfo/rsync</a><br>
              Before posting, read: <a moz-do-not-send="true"
                href="http://www.catb.org/%7Eesr/faqs/smart-questions.html"
                target="_blank">http://www.catb.org/~esr/faqs/smart-questions.html</a><br>
            </div>
          </div>
        </blockquote>
      </div>
      <br>
    </blockquote>
    <br>
  </body>
</html>