<html>
  <head>
    <meta content="text/html; charset=UTF-8" http-equiv="Content-Type">
  </head>
  <body bgcolor="#FFFFFF" text="#000000">
    <font size="-1"><font face="Helvetica, Arial, sans-serif">Hi All,<br>
        <br>
        Right now I tried everything, but PUT speed remains very slow.
        In order to speedup I tried various combination of workers,
        disabled disk mount check, enabled DEBUG log level, checked
        source code to understand logic, finally added another node. No
        errors, and I was able only to squeeze out 5 PUTs/sec.<br>
        <br>
        I described full setup here:
        <a class="moz-txt-link-freetext" href="http://paste.openstack.org/show/3885/">http://paste.openstack.org/show/3885/</a><br>
        <br>
        The only thing which looks suspicious to me are these errors:<br>
      </font></font>
    <meta http-equiv="content-type" content="text/html; charset=UTF-8">
    <pre>Dec 18 04:01:28 ec01 object-server ERROR container update failed with 10.0.1.3:6001/d01 (saving for async update later): Timeout (3s) (txn: txdf95ad5a10844ee0b74d70d8a7638082)
Dec 18 04:01:28 ec01 object-server ERROR container update failed with 10.0.1.2:6001/d01 (saving for async update later): Timeout (3s) (txn: txee2545ba4610430fa3a6a166ca50c574)
Dec 18 04:01:28 ec01 object-server ERROR container update failed with 10.0.1.8:6001/d01 (saving for async update later): Timeout (3s) (txn: tx2546b29b15c643ec90a122a753dfddd3)
</pre>
    I don't really know where else to dig. Any help appreciated.<br>
    <br>
    <br>
    Many thanks,<br>
    Rustam.<br>
    <br>
    <font size="-1"><font face="Helvetica, Arial, sans-serif"><br>
      </font></font><br>
    On 17/12/2011 06:14, Ywang225 wrote:
    <blockquote cite="mid:450B97E1-4B5B-4F9A-8173-80AD157DE1C0@126.com"
      type="cite">
      <pre wrap="">increasing concurrency (with -c)should boost write performance.

发自我的 iPhone

在 2011-12-16,11:20,Rustam Aliyev <a class="moz-txt-link-rfc2396E" href="mailto:rustam@code.az"><rustam@code.az></a> 写道:

</pre>
      <blockquote type="cite">
        <pre wrap="">Hi,

I'm testing swift 1.4.4 setup with 4 nodes/zones on RHEL 5.7. I ran into the problem of slow writes. Using swift-bench we generated load, writing hundreds of 4K files. Results:
- Writes - ~3 PUTs/sec (very slow)
- Reads - ~25 GETs/sec (ok)

It's clear that writes are not limited by I/O. To prove that, I increased file size to 8K, 32K and 64K. In all cases, even with 64K, I had same result - 3 PUTs/sec.

In the logs of the object servers I can see that each PUT operation actually took around 0.3 sec which is inline with 3 PUTs/ sec reported by swift-bench.

Is that expected performance for such small cluster? Can I break down those 0.3 seconds spent for PUT operation to see where's bottleneck?

Any advice for troubleshooting this is welcome.

Regards,
Rustam.

_______________________________________________
Mailing list: <a class="moz-txt-link-freetext" href="https://launchpad.net/~openstack">https://launchpad.net/~openstack</a>
Post to     : <a class="moz-txt-link-abbreviated" href="mailto:openstack@lists.launchpad.net">openstack@lists.launchpad.net</a>
Unsubscribe : <a class="moz-txt-link-freetext" href="https://launchpad.net/~openstack">https://launchpad.net/~openstack</a>
More help   : <a class="moz-txt-link-freetext" href="https://help.launchpad.net/ListHelp">https://help.launchpad.net/ListHelp</a>
</pre>
      </blockquote>
      <pre wrap="">

</pre>
    </blockquote>
  </body>
</html>