<div dir="ltr">Can you use the transaction ID in the object server log that is in error to correlate with the proxy server logs to see how the proxy server responded for that REST API request?</div><div class="gmail_extra">
<br><br><div class="gmail_quote">On Fri, Jul 12, 2013 at 12:46 PM, Samuel Merritt <span dir="ltr"><<a href="mailto:sam@swiftstack.com" target="_blank">sam@swiftstack.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<div class="im">On 7/12/13 12:34 AM, Jonathan Lu wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Hi, all stackers,<br>
     I test the cluster and get such error msg:<br>
         Jul 12 11:23:57 ubuntu-12 proxy-server ERROR with Object server<br>
<a href="http://192.168.1.161:60" target="_blank">192.168.1.161:60</a><br>
<br>
         00/xvdb1 re: Trying to get final status of PUT to<br>
/v1/AUTH_test/test_8/e9a243cb0<br>
<br>
         462406a9ca10b590ed42a5f: Timeout (10s) (txn:<br>
txe58fdd4aaaf8402a86814b67272a<u></u>1d1a)<br>
<br>
          (client_ip: 192.168.1.151)<br>
<br>
<br>
     It seems that the proxy is waiting for the request of getting the<br>
final status of object and failed. Can anyone give me some hint that why<br>
this happened?<br>
</blockquote>
<br></div>
That error indicates that the proxy server sent an entire HTTP PUT request, including the whole body, to one of the object servers, but that object server failed to respond with headers in time (where "in time" here looks like "10 seconds").<br>

<br>
That can happen for many reasons, including heavy IO load on the object server, and since you're benchmarking the cluster, you may well have driven the load up high.<br>
<br>
Do note that the proxy will still return a successful response to the client if a quorum (2 out of 3) of the writes succeeded, so seeing this error in the logs does not necessarily indicate that clients are seeing errors.<br>

<br>
______________________________<u></u>_________________<br>
Mailing list: <a href="https://launchpad.net/~openstack" target="_blank">https://launchpad.net/~<u></u>openstack</a><br>
Post to     : <a href="mailto:openstack@lists.launchpad.net" target="_blank">openstack@lists.launchpad.net</a><br>
Unsubscribe : <a href="https://launchpad.net/~openstack" target="_blank">https://launchpad.net/~<u></u>openstack</a><br>
More help   : <a href="https://help.launchpad.net/ListHelp" target="_blank">https://help.launchpad.net/<u></u>ListHelp</a><br>
</blockquote></div><br></div>