<div dir="ltr">Bogdan,<div><br></div><div>thank you.</div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Thu, May 8, 2014 at 6:22 AM, Bogdan Dobrelya <span dir="ltr"><<a href="mailto:bdobrelia@mirantis.com" target="_blank">bdobrelia@mirantis.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div class="">On 05/06/2014 10:42 PM, Roman Sokolkov wrote:<br>
</div><div class="">> Hello, fuelers.<br>
><br>
> I'm using Fuel 4.1A + Havana in HA mode.<br>
><br>
> I permanently observe (on other deployments also) issue with stuck<br>
> "nova-compute" service. But i think problem is more fundamental and<br>
> relates to HA RabbitMQ and OpenStack AMQP driver implementation.<br>
><br>
> Symptoms:<br>
><br>
</div>>   * Random nova-compute from time to time marked as "XXX" for a while.<br>
>   * I see that service itself works properly. In logs i see that it<br>
<div class="">>     sends status updates to conductor. But actually nothing is sent.<br>
</div>>   * "netstat" shows that all connections to/from rabbit "ESTABLISHED"<br>
>   * rabbitmqctl shows that "compute.node-x" queue synced to all slaves.<br>
>   * nothing has been broken before, i mean rabbitmq cluster, etc.<br>
><br>
> Axe style solution:<br>
><br>
>   * /etc/init.d/openstack-nova-compute restart<br>
<div class="">><br>
> So here i've found a lot of interesting stuff (and solutions):<br>
><br>
>     <a href="https://bugs.launchpad.net/oslo.messaging/+bug/856764" target="_blank">https://bugs.launchpad.net/oslo.messaging/+bug/856764</a><br>
><br>
><br>
> My questions are:<br>
><br>
</div>>   * Are there any thoughts particular for Fuel to solve/workaround this<br>
>     issue?<br>
>   * Any fast solution for this in 4.1? Like adjust TCP keep-alive  timeouts?<br>
><br>
><br>
<br>
I submitted an issue for Fuel<br>
<a href="https://bugs.launchpad.net/fuel/+bug/1317488" target="_blank">https://bugs.launchpad.net/fuel/+bug/1317488</a> and assigned it to Fuel<br>
hardening team. Feel free to update it as appropriate.<br>
<div class="im HOEnZb"><br>
> --<br>
> Roman Sokolkov,<br>
> Deployment Engineer,<br>
> Mirantis, Inc.<br>
> Skype rsokolkov,<br>
</div><div class="HOEnZb"><div class="h5">> <a href="mailto:rsokolkov@mirantis.com">rsokolkov@mirantis.com</a> <mailto:<a href="mailto:rsokolkov@mirantis.com">rsokolkov@mirantis.com</a>><br>
><br>
><br>
<br>
<br>
--<br>
Best regards,<br>
Bogdan Dobrelya,<br>
Skype #<a href="http://bogdando_at_yahoo.com" target="_blank">bogdando_at_yahoo.com</a><br>
Irc #bogdando<br>
</div></div></blockquote></div><br><br clear="all"><div><br></div>-- <br><div dir="ltr">Roman Sokolkov,<div>Deployment Engineer,</div><div>Mirantis, Inc.<br>Skype rsokolkov,<br><a href="mailto:rsokolkov@mirantis.com" target="_blank">rsokolkov@mirantis.com</a><br>
</div></div>
</div>