<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 14 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
{font-family:Tahoma;
panose-1:2 11 6 4 3 5 4 4 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0in;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:blue;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:purple;
text-decoration:underline;}
p.MsoAcetate, li.MsoAcetate, div.MsoAcetate
{mso-style-priority:99;
mso-style-link:"Balloon Text Char";
margin:0in;
margin-bottom:.0001pt;
font-size:8.0pt;
font-family:"Tahoma","sans-serif";}
span.EmailStyle17
{mso-style-type:personal-compose;
font-family:"Calibri","sans-serif";
color:windowtext;}
span.BalloonTextChar
{mso-style-name:"Balloon Text Char";
mso-style-priority:99;
mso-style-link:"Balloon Text";
font-family:"Tahoma","sans-serif";}
.MsoChpDefault
{mso-style-type:export-only;
font-family:"Calibri","sans-serif";}
@page WordSection1
{size:8.5in 11.0in;
margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal">When I’m doing large transfers Swift often returns 503 errors with “proxy-server Object PUT exceptions during send, 1/2 required connections” in the log file.<o:p></o:p></p>
<p class="MsoNormal">Is this an indication of network issues or can someone explain the cause and possible solution?<o:p></o:p></p>
<p class="MsoNormal">Thanks<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">* Trying 192.168.10.90... % Total % Received % Xferd Average Speed Time Time Time Current<o:p></o:p></p>
<p class="MsoNormal"> Dload Upload Total Spent Left Speed<o:p></o:p></p>
<p class="MsoNormal"> 0 0 0 0 0 0 0 0 --:--:-- --:--:-- --:--:-- 0connected<o:p></o:p></p>
<p class="MsoNormal">> PUT /v1/AUTH_test/load/1gbfile51_0 HTTP/1.1<o:p></o:p></p>
<p class="MsoNormal">> User-Agent: curl/7.22.0 (x86_64-pc-linux-gnu) libcurl/7.22.0 OpenSSL/1.0.1 zlib/1.2.3.4 libidn/1.23 librtmp/2.3<o:p></o:p></p>
<p class="MsoNormal">> Host: 192.168.10.90:8080<o:p></o:p></p>
<p class="MsoNormal">> Accept: */*<o:p></o:p></p>
<p class="MsoNormal">> X-Auth-Token: AUTH_tk422c579f97bb4da69528820add184204<o:p></o:p></p>
<p class="MsoNormal">> Content-Length: 1073741824<o:p></o:p></p>
<p class="MsoNormal">><o:p> </o:p></p>
<p class="MsoNormal">} [data not shown]<o:p></o:p></p>
<p class="MsoNormal"> 0 1024M 0 0 0 3040k 0 3304k 0:05:17 --:--:-- 0:05:17 3307k<o:p></o:p></p>
<p class="MsoNormal"> 0 1024M 0 0 0 4512k 0 2058k 0:08:29 0:00:02 0:08:27 2060k<o:p></o:p></p>
<p class="MsoNormal"> 0 1024M 0 0 0 5200k 0 1772k 0:09:51 0:00:02 0:09:49 1772k<o:p></o:p></p>
<p class="MsoNormal"> 0 1024M 0 0 0 6544k 0 1668k 0:10:28 0:00:03 0:10:25 1669k<o:p></o:p></p>
<p class="MsoNormal"> 0 1024M 0 0 0 8960k 0 1835k 0:09:31 0:00:04 0:09:27 1835k<o:p></o:p></p>
<p class="MsoNormal"> 1 1024M 0 0 1 12.7M 0 2215k 0:07:53 0:00:05 0:07:48 2012k<o:p></o:p></p>
<p class="MsoNormal"> 1 1024M 0 0 1 19.2M 0 2859k 0:06:06 0:00:06 0:06:00 3233k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 22.0M 0 2768k 0:06:18 0:00:08 0:06:10 3327k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 26.4M 0 3058k 0:05:42 0:00:08 0:05:34 4159k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 2905k 0:06:00 0:00:10 0:05:50 3851k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 2650k 0:06:35 0:00:11 0:06:24 3113k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 2436k 0:07:10 0:00:12 0:06:58 1907k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 2254k 0:07:45 0:00:13 0:07:32 1455k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 2097k 0:08:19 0:00:14 0:08:05 560k<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 1961k 0:08:54 0:00:15 0:08:39 0<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 1841k 0:09:29 0:00:16 0:09:13 0<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 1736k 0:10:04 0:00:17 0:09:47 0<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 0 0 2 29.5M 0 1641k 0:10:38 0:00:18 0:10:20 0< HTTP/1.1 503 Service Unavailable<o:p></o:p></p>
<p class="MsoNormal">< Content-Length: 212<o:p></o:p></p>
<p class="MsoNormal">< Content-Type: text/html; charset=UTF-8<o:p></o:p></p>
<p class="MsoNormal">< X-Trans-Id: tx3c2f6133fc2e4b43bebc939aea2ae17f<o:p></o:p></p>
<p class="MsoNormal">< Date: Mon, 16 Sep 2013 02:02:37 GMT<o:p></o:p></p>
<p class="MsoNormal">* HTTP error before end of send, stop sending<o:p></o:p></p>
<p class="MsoNormal"><<o:p> </o:p></p>
<p class="MsoNormal">{ [data not shown]<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 100 212 2 29.5M 11 1586k 0:11:00 0:00:19 0:10:41 0<o:p></o:p></p>
<p class="MsoNormal"> 2 1024M 100 212 2 29.5M 11 1586k 0:11:00 0:00:19 0:10:41 0<o:p></o:p></p>
<p class="MsoNormal">* Closing connection #0<o:p></o:p></p>
<p class="MsoNormal"><html><o:p></o:p></p>
<p class="MsoNormal"><head><o:p></o:p></p>
<p class="MsoNormal"> <title>503 Service Unavailable</title><o:p></o:p></p>
<p class="MsoNormal"></head><o:p></o:p></p>
<p class="MsoNormal"><body><o:p></o:p></p>
<p class="MsoNormal"> <h1>503 Service Unavailable</h1><o:p></o:p></p>
<p class="MsoNormal"> The server is currently unavailable. Please try again at a later time.<br /><br /><o:p></o:p></p>
<p class="MsoNormal"></body><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">ssh -i /root/.ssh/id_rsa root@10.113.193.90 grep tx3c2f6133fc2e4b43bebc939aea2ae17f /var/log/swift/*<o:p></o:p></p>
<p class="MsoNormal">/var/log/swift/proxy.error:Sep 15 19:02:37 swift14 proxy-server Object PUT exceptions during send, 1/2 required connections (txn: tx3c2f6133fc2e4b43bebc939aea2ae17f) (client_ip: 192.168.10.69)<o:p></o:p></p>
<p class="MsoNormal">/var/log/swift/proxy.log:Sep 15 19:02:37 swift14 proxy-server 192.168.10.69 192.168.10.69 16/Sep/2013/02/02/37 PUT /v1/AUTH_test/load/1gbfile51_0 HTTP/1.0 503 - curl/7.22.0%20%28x86_64-pc-linux-gnu%29%20libcurl/7.22.0%20OpenSSL/1.0.1%20zlib/1.2.3.4%20libidn/1.23%20librtmp/2.3
test%2CAUTH_tk422c579f97bb4da69528820add184204 29556736 212 - tx3c2f6133fc2e4b43bebc939aea2ae17f - 19.0232 -<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Arial","sans-serif"">Thanks,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Arial","sans-serif"">Tim<o:p></o:p></span></p>
</div>
</body>
</html>