
<html>

<head>

<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">

</head>

<body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; color: rgb(0, 0, 0); font-size: 14px; font-family: Calibri, sans-serif; ">

<div>We recently found the following issue for our RabbitMQ Cluster in our QA environment. Please let me know if anyone came across the same and have a fix for this.</div>

<div><br>

</div>

<div>

<div>Steps to reproduce:</div>

<div>1. On a running and consistent cluster, boot 8 VMs. VMs should boot and become ACTIVE.</div>

<div>2. Delete newly created VMs. VMs should delete successfully.</div>

<div>3. Reboot 1st controller.</div>

<div>4. On the 2nd controller, try to retrieve list of images usign "glance index" command. glance will hang.</div>

<div>5. In a minute, try again - command should run successfully.</div>

<div>6. Ensure 1st controller is still rebooting.</div>

<div>7. Launch 5-8 VMs on the 2nd controller. Some of VMs will fail with RPC Timeout error. This means the RabbitMQ is not functioning correctly.</div>

<div>8. Wait for 1st controller to boot. In a minute, ensure (using "nova-manage service list") that all nova services are available.</div>

<div>9. Launch 5-8 VMs on the 2nd controller. Some of VMs will fail with RPC Timeout error. This means the RabbitMQ cluster is still inconsistent.</div>

<div><br>

</div>

<div>Additional tests were performed:</div>

<div>- Stop rabbitmq-server using "service rabbitmq-server stop" on 1st controller. 2nd controller remains functional.</div>

<div>- Restart rabbitmq-server using "service rabbitmq-server restart" on both controllers after executing steps 1-8. Cluster becomes consistent after this action.</div>

</div>

<div><br>

</div>

<div>Thanks</div>

<div>Anand</div>

</body>

</html>