<div dir="ltr">Hi everyone,<div><br></div><div>We have the Kolla Openstack site, which is 3 HCI (Controller+Compute) + 3 Storage (Ceph OSD)</div><div>site without internet. We did the shutdown few days ago since CNY holidays. </div><div><br></div><div>Today we re-launch whole cluster back. First we met the issue that MariaDB containers keep</div><div>restarting, and we fixed by using mariadb_recovery command.</div><div>After that we check the status of each services, and found that all services shown at</div><div>Admin > System > System Information are DOWN. Strange is no MariaDB, AMQP connection,</div><div>or other error found when check the downed service log.</div><div><br></div><div>We tried reboot each servers but the situation still a same. Then we found the RabbitMQ log not</div><div>updating, the last log still stayed at the date we shutdown. Logged in to RabbitMQ container and</div><div>type "rabbitmqctl status" shows connection refused, and tried access its web manager from </div><div><VIP>:15672 on browser just gave us "503 Service unavailable" message. Also no port 5672</div><div>listening.</div><div><br></div><div>I searched this issue on the internet but only few information about this. One of solution is delete</div><div>some files in mnesia folder, another is remove rabbitmq container and its volume then re-deploy.</div><div>But both are not sure. Does anyone know how to solve it?</div><div><br></div><div><br></div><div>Many thanks,</div><div>Eddie.</div></div>