<div dir="ltr"><div><div><div><div><div><div><div><div><div><div><div>Hi Yuling<br><br></div>Are you running keystone on two systems ?<br><br></div>Observation :1<br><br>Your keystone end-points are defined <br><br>endpoints": [{"adminURL": "<a href="http://172.16.59.223:35357/v2.0" target="_blank">http://172.16.59.223:35357/v2.0</a>", "region": "RegionOne", "internalURL": "<a href="http://172.16.59.223:5000/v2.0" target="_blank">http://172.16.59.223:5000/v2.0</a>", "id": "412e38b88af940798edc53bbf87da17a", "publicURL": "<a href="http://172.16.59.223:5000/v2.0" target="_blank">http://172.16.59.223:5000/v2.0</a>"}], "endpoints_links": [], "type": "identity", "name": "keystone"}]<br>

<br></div><div>Observation : 2<br></div>At the same time communication is happening with <a href="http://127.0.0.1:5000" target="_blank">http://127.0.0.1:5000</a> and <a href="http://127.0.0.1:35357" target="_blank">http://127.0.0.1:35357</a>.<br>
<br></div><div>Looks like Opestack(nova etc )components are accessing the keystone at local address.<br><br></div>
Observation : 3<br><br>2013-11-03 21:16:45    DEBUG [keystone.common.wsgi] REMOTE_ADDR = 127.0.0.1<br></div><br></div>It means that remote IP address is also with local address.<br><br></div>Few questions.<br><br></div>1. Can you check keystone.conf. What is the IP address used ?<br>
</div>2. Can you check nova.conf or other *.conf files to see what keystone IP address specified. Looks like it is taking local ip address ?<br></div>3. Do you have all the components on single box ? OR Is it multi node setup ? <br>
</div><div>4. Can you check keystone installation with following the below link ? What is the outcome of this ?<br>    <a href="http://docs.openstack.org/havana/install-guide/install/apt/content/keystone-verify.html">http://docs.openstack.org/havana/install-guide/install/apt/content/keystone-verify.html</a><br>
</div><div><br></div><div>-Dheerendra<br></div><div><div><div><div><br><div><div><br> <br><div><div><div><br>
</div></div></div></div></div></div></div></div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Mon, Nov 4, 2013 at 10:53 AM,  <span dir="ltr"><<a href="mailto:Yuling_C@dell.com" target="_blank">Yuling_C@dell.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0pt 0pt 0pt 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div link="blue" vlink="purple" lang="EN-US"><div><div class="im"><p><b><span style="font-size:9pt;font-family:"Trebuchet MS","sans-serif";color:rgb(170,170,170)">Dell - Internal Use - Confidential </span></b><u></u><u></u></p>
</div><p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)">Thanks very much Dheerendra. Here I attach the keystone.log. <u></u><u></u></span></p><p class="MsoNormal">
<span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)"><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)">I did two steps:<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)">1. Log on from horizon GUI, where I got ‘Something went wrong’ message; <u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)">2. Issued ‘keystone role-list’ command from controller, and got ‘connection time out’ message.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)"><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)">Thanks,<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)"><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)">YuLing<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt;font-family:"Calibri","sans-serif";color:rgb(31,73,125)"><u></u> <u></u></span></p><p class="MsoNormal"><a name="1422190c2259af1f______replyseparator"></a><b><span style="font-size:10pt;font-family:"Tahoma","sans-serif"">From:</span></b><span style="font-size:10pt;font-family:"Tahoma","sans-serif""> Dheerendra [mailto:<a href="mailto:dheerendra.madhusudhana@gmail.com" target="_blank">dheerendra.madhusudhana@gmail.com</a>] <br>
<b>Sent:</b> Sunday, November 03, 2013 6:52 AM<br><b>To:</b> C, Yuling<br><b>Subject:</b> Re: [Openstack] Keystone commands time out. Cannot log onto openstack horizon GUI<u></u><u></u></span></p><div><div class="h5"><p class="MsoNormal">
<u></u> <u></u></p><div><div><p class="MsoNormal" style="margin-bottom:12pt">HI<u></u><u></u></p></div><p class="MsoNormal">Can you fwd me the /var/log/keystone/keystone.log ? I can look at them.<br><br>-Dheerendra<u></u><u></u></p>
</div><div><p class="MsoNormal" style="margin-bottom:12pt"><u></u> <u></u></p><div><p class="MsoNormal">On Sun, Nov 3, 2013 at 12:57 PM, <<a href="mailto:Yuling_C@dell.com" target="_blank">Yuling_C@dell.com</a>> wrote:<u></u><u></u></p>
<div><div><p><b><span style="font-size:9pt;font-family:"Trebuchet MS","sans-serif";color:rgb(170,170,170)">Dell - Internal Use - Confidential </span></b><u></u><u></u></p><p class="MsoNormal">Hi All,<u></u><u></u></p>
<p class="MsoNormal"> <u></u><u></u></p><p class="MsoNormal">We have been using openstack pretty well for quite a few months. Suddenly, after a controller server reboot, we were not able to log onto horizon GUI. The login page was prompted. However, after we typed the correct user name and password, we got error message saying “Something went wrong”. <u></u><u></u></p>
<p class="MsoNormal"> <u></u><u></u></p><p class="MsoNormal">I guess it is the keystone issue. When I tried the commands ‘keystone user-list’ and ‘keystone role-list’, I got ‘[Error 110]Connection time out’ after some time. I tried to sync db by executing ‘keystone-manage db_sync’. The command went through fine, but the issue still stayed the same.<u></u><u></u></p>
<p class="MsoNormal"> <u></u><u></u></p><p class="MsoNormal">I turned on debug in keystone.conf. However, I was not able to find any useful info in the keystone.log.<u></u><u></u></p><p class="MsoNormal"> <u></u><u></u></p>
<p class="MsoNormal">Any ideas? We are using Grizzly version of openstack.<u></u><u></u></p><p class="MsoNormal"> <u></u><u></u></p><p class="MsoNormal">Thanks very much,<u></u><u></u></p><p class="MsoNormal"> <u></u><u></u></p>
<p class="MsoNormal">YuLing<u></u><u></u></p></div></div><p class="MsoNormal" style="margin-bottom:12pt"><br>_______________________________________________<br>Mailing list: <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack</a><br>
Post to     : <a href="mailto:openstack@lists.openstack.org" target="_blank">openstack@lists.openstack.org</a><br>Unsubscribe : <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack</a><u></u><u></u></p>
</div><p class="MsoNormal"><u></u> <u></u></p></div></div></div></div></div></blockquote></div><br></div></div>