<div dir="ltr">Hi Raja,<div><br></div><div>From one of your controllers can you run the following?</div><div><br></div><div><div>crm resource status clone_p_mysqld</div><div><br></div><div>This should tell you if mysql is up and running on all nodes - some sample output of a healthy cluster:</div><div><br></div><div><div>resource clone_p_mysqld is running on: node-3.coredial.local </div><div>resource clone_p_mysqld is running on: node-5.coredial.local </div><div>resource clone_p_mysqld is running on: node-8.coredial.local </div></div><div><br></div><div class="gmail_extra">If it is running everywhere but you're still getting the failed health checks you may want to dig a bit deeper and check the health of the galera cluster. Here's some documentation on how to do so: <a href="http://galeracluster.com/documentation-webpages/monitoringthecluster.html">http://galeracluster.com/documentation-webpages/monitoringthecluster.html</a></div><div class="gmail_extra"><br></div><div class="gmail_extra">If it's not running on all nodes you can attempt to start it by running crm resource start clone_p_mysqld</div><div class="gmail_extra"><br></div><div class="gmail_extra"><div><div class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><p style="margin-top:8px;margin-bottom:8px;font-family:Helvetica,Verdana,Arial,sans-serif;font-size:0.85em;color:rgb(51,51,51);line-height:1.4"><span style="font-size:0.85em;line-height:1.4">___</span><br></p><p style="margin-top:8px;margin-bottom:8px;font-family:Helvetica,Verdana,Arial,sans-serif;font-size:1.1em;color:rgb(51,51,51);line-height:1.4">John Petrini</p></div></div></div></div></div></div></div></div></div></div></div></div></div></div><div class="gmail_quote">On Thu, Jul 13, 2017 at 4:12 AM, Raja T Nair <span dir="ltr"><<a href="mailto:rtnair@gmail.com" target="_blank">rtnair@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><div><div><div><div><div>Hello All,<br><br></div>My Fuel version is 7.0, with 3 controllers and 11 computes.<br><br></div>This cluster has been running for a while now and recently, due to an Internet connectivity issue, a time sync issue was noted.<br></div>Even after fixing this and time being in sync now(after a rolling reboot of all controller nodes,) the health check is reporting mysql, galera related issues as shown in the screenshots below.<br><br></div>Can somebody please guide me on how to start debugging and fixing these issues? Still a beginner with Openstack :)<br><br></div>ps: We saw all compute nodes' nova-compute and one controller's nova-conductor service going down after the NTP change.<br></div>Except for these services being restarted, no other action has been done on the cluster.<br><div><div><div><div><div><div><div><div><br><img src="cid:ii_j525cjru0_15d3af86ea9aed05" height="240" width="476"><br><img src="cid:ii_j525cjsq1_15d3af86ea9aed05" height="249" width="476"><br>​<br clear="all"><br></div><div>Thanks in Advance,<br></div><div>Raja.<span class="gmail-HOEnZb"><font color="#888888"><br><br>-- <br><div class="gmail-m_4276674777164701253gmail_signature">:^)</div>
</font></span></div></div></div></div></div></div></div></div></div>
<br>______________________________<wbr>_________________<br>
Mailing list: <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" rel="noreferrer" target="_blank">http://lists.openstack.org/<wbr>cgi-bin/mailman/listinfo/<wbr>openstack</a><br>
Post to     : <a href="mailto:openstack@lists.openstack.org">openstack@lists.openstack.org</a><br>
Unsubscribe : <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" rel="noreferrer" target="_blank">http://lists.openstack.org/<wbr>cgi-bin/mailman/listinfo/<wbr>openstack</a><br>
<br></blockquote></div><br></div></div></div>