<html><head><meta http-equiv="Content-Type" content="text/html charset=us-ascii"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">has this been a new installation or an upgrade?<div class="">Not sure what you mean with option 2  since the install guide does not say anything about options. </div><div class="">did you check  if rabbit is up?</div><div class="">did you check and see if the services are all good</div><div class="">did you check and see if the agents are happy?</div><div class=""><br class=""></div><div class="">just a few things to check let us know!</div><div class=""><br class=""></div><div class="">Remo <br class=""><div><blockquote type="cite" class=""><div class="">On Apr 20, 2016, at 19:05, The O.G. <<a href="mailto:theoriginalguru@gmail.com" class="">theoriginalguru@gmail.com</a>> wrote:</div><br class="Apple-interchange-newline"><div class=""><div dir="ltr" class=""><div class=""><div class=""><div class=""><div class=""><div class=""><div class=""><div class="">We are following:<br class=""><br class=""><a href="http://docs.openstack.org/liberty/install-guide-rdo/index.html" class="">http://docs.openstack.org/liberty/install-guide-rdo/index.html</a><br class=""><br class=""></div>Using CentOS7. We've chosen the option 2 for networking, where we have both a private and public network. We've pretty much following the guide step by step up to and finishing "Add the dashboard" step. All the verification steps passed.<br class=""><br class=""></div>Now, we are trying to launch an instance on the public and private networks as outlined here:<br class=""><br class=""><a href="http://docs.openstack.org/liberty/install-guide-rdo/launch-instance-public.html" class="">http://docs.openstack.org/liberty/install-guide-rdo/launch-instance-public.html</a><br class=""><br class=""><a href="http://docs.openstack.org/liberty/install-guide-rdo/launch-instance-private.html" class="">http://docs.openstack.org/liberty/install-guide-rdo/launch-instance-private.html</a><br class=""><br class=""></div>In both attempts to launch an instance, the instance gets aborted and shows status = Error. With this message:<br class=""><br class="">Build of instance 93bf7968-09b2-4890-9c3a-0d909ce57017 aborted: Failed to allocate the network(s), not rescheduling.<br class=""><br class=""></div>On the compute node, in /var/log/nova/nova-compute.log, we get these messages (I'm filtering on ERROR|WARNING only):<br class=""><br class="">2016-04-20 18:35:31.484 860 WARNING nova.virt.libvirt.driver [req-b5ec5b9d-2299-411f-b259-7a48b2b47d26 e11c48fa3827406c9e6304f88332e059 a8f41d79dc7a490c91013616f66c0134 - - -] [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] Timeout waiting for vif plugging callback for instance 93bf7968-09b2-4890-9c3a-0d909ce57017<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [req-b5ec5b9d-2299-411f-b259-7a48b2b47d26 e11c48fa3827406c9e6304f88332e059 a8f41d79dc7a490c91013616f66c0134 - - -] [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] Instance failed to spawn<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] Traceback (most recent call last):<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/compute/manager.py", line 2155, in _build_resources<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     yield resources<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/compute/manager.py", line 2009, in _build_and_run_instance<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     block_device_info=block_device_info)<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 2515, in spawn<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     block_device_info=block_device_info)<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 4612, in _create_domain_and_network<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     raise exception.VirtualInterfaceCreateException()<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] VirtualInterfaceCreateException: Virtual Interface creation failed<br class="">2016-04-20 18:35:32.007 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] <br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [req-b5ec5b9d-2299-411f-b259-7a48b2b47d26 e11c48fa3827406c9e6304f88332e059 a8f41d79dc7a490c91013616f66c0134 - - -] [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] Failed to allocate network(s)<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] Traceback (most recent call last):<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/compute/manager.py", line 2009, in _build_and_run_instance<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     block_device_info=block_device_info)<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 2515, in spawn<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     block_device_info=block_device_info)<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 4612, in _create_domain_and_network<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     raise exception.VirtualInterfaceCreateException()<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] VirtualInterfaceCreateException: Virtual Interface creation failed<br class="">2016-04-20 18:35:32.587 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] <br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [req-b5ec5b9d-2299-411f-b259-7a48b2b47d26 e11c48fa3827406c9e6304f88332e059 a8f41d79dc7a490c91013616f66c0134 - - -] [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] Build of instance 93bf7968-09b2-4890-9c3a-0d909ce57017 aborted: Failed to allocate the network(s), not rescheduling.<br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] Traceback (most recent call last):<br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/compute/manager.py", line 1905, in _do_build_and_run_instance<br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     filter_properties)<br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]   File "/usr/lib/python2.7/site-packages/nova/compute/manager.py", line 2044, in _build_and_run_instance<br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017]     reason=msg)<br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] BuildAbortException: Build of instance 93bf7968-09b2-4890-9c3a-0d909ce57017 aborted: Failed to allocate the network(s), not rescheduling.<br class="">2016-04-20 18:35:32.590 860 ERROR nova.compute.manager [instance: 93bf7968-09b2-4890-9c3a-0d909ce57017] <br class="">2016-04-20 18:42:55.909 860 WARNING nova.virt.libvirt.driver [req-9a205dde-ed7f-43aa-96d4-f6776347359e e11c48fa3827406c9e6304f88332e059 a8f41d79dc7a490c91013616f66c0134 - - -] [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c] Timeout waiting for vif plugging callback for instance ae94da8c-3fe6-44d6-93e5-b84a606c725c<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [req-9a205dde-ed7f-43aa-96d4-f6776347359e e11c48fa3827406c9e6304f88332e059 a8f41d79dc7a490c91013616f66c0134 - - -] [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c] Instance failed to spawn<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c] Traceback (most recent call last):<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]   File "/usr/lib/python2.7/site-packages/nova/compute/manager.py", line 2155, in _build_resources<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]     yield resources<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]   File "/usr/lib/python2.7/site-packages/nova/compute/manager.py", line 2009, in _build_and_run_instance<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]     block_device_info=block_device_info)<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]   File "/usr/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 2515, in spawn<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]     block_device_info=block_device_info)<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]   File "/usr/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 4612, in _create_domain_and_network<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]     raise exception.VirtualInterfaceCreateException()<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c] VirtualInterfaceCreateException: Virtual Interface creation failed<br class="">2016-04-20 18:42:56.358 860 ERROR nova.compute.manager [instance: ae94da8c-3fe6-44d6-93e5-b84a606c725c]<br class=""><br class=""><br class=""></div><div class="">On the controller node, in /var/log/neutron/server.log:<br class=""><br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova [-] Failed to notify nova on events: [{'tag': u'4c0a7262-ac40-4556-bb11-5b20afceec73', 'name': 'network-vif-deleted', 'server_uuid': u'93bf7968-09b2-4890-9c3a-0d909ce57017'}]<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova Traceback (most recent call last):<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/neutron/notifiers/nova.py", line 247, in send_events<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     batched_events)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/v2/contrib/server_external_events.py", line 39, in create<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return_raw=True)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/base.py", line 169, in _create<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     _resp, body = self.api.client.post(url, body=body)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 176, in post<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return self.request(url, 'POST', **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/client.py", line 91, in request<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 206, in request<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     resp = super(LegacyJsonAdapter, self).request(*args, **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 95, in request<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return self.session.request(url, method, **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/utils.py", line 337, in inner<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return func(*args, **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 304, in request<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     auth_headers = self.get_auth_headers(auth)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 617, in get_auth_headers<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return auth.get_headers(self, **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/base.py", line 142, in get_headers<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     token = self.get_token(session)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/base.py", line 200, in get_token<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return self.get_access(session).auth_token<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/base.py", line 240, in get_access<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     self.auth_ref = self.get_auth_ref(session)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/generic/base.py", line 186, in get_auth_ref<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return self._plugin.get_auth_ref(session, **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/v3/base.py", line 190, in get_auth_ref<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     authenticated=False, log=False, **rkwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 501, in post<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return self.request(url, 'POST', **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/utils.py", line 337, in inner<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     return func(*args, **kwargs)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 401, in request<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova     raise exceptions.from_response(resp, method, url)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova BadRequest: Expecting to find id or name in user - the server could not comply with the request since it is either malformed or otherwise incorrect. The client is assumed to be in error. (HTTP 400) (Request-ID: req-0a9e36df-420c-46f2-a523-c168f0c295c6)<br class="">2016-04-20 18:35:35.023 2699 ERROR neutron.notifiers.nova <br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova [-] Failed to notify nova on events: [{'status': 'completed', 'tag': u'67291fab-d2d6-42ec-ae4e-6e5ed60fa424', 'name': 'network-vif-plugged', 'server_uuid': u'ae94da8c-3fe6-44d6-93e5-b84a606c725c'}]<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova Traceback (most recent call last):<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/neutron/notifiers/nova.py", line 247, in send_events<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     batched_events)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/v2/contrib/server_external_events.py", line 39, in create<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return_raw=True)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/base.py", line 169, in _create<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     _resp, body = self.api.client.post(url, body=body)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 176, in post<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return self.request(url, 'POST', **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/client.py", line 91, in request<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 206, in request<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     resp = super(LegacyJsonAdapter, self).request(*args, **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 95, in request<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return self.session.request(url, method, **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/utils.py", line 337, in inner<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return func(*args, **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 304, in request<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     auth_headers = self.get_auth_headers(auth)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 617, in get_auth_headers<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return auth.get_headers(self, **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/base.py", line 142, in get_headers<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     token = self.get_token(session)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/base.py", line 200, in get_token<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return self.get_access(session).auth_token<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/base.py", line 240, in get_access<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     self.auth_ref = self.get_auth_ref(session)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/generic/base.py", line 186, in get_auth_ref<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return self._plugin.get_auth_ref(session, **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/v3/base.py", line 190, in get_auth_ref<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     authenticated=False, log=False, **rkwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 501, in post<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return self.request(url, 'POST', **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/utils.py", line 337, in inner<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     return func(*args, **kwargs)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 401, in request<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova     raise exceptions.from_response(resp, method, url)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova BadRequest: Expecting to find id or name in user - the server could not comply with the request since it is either malformed or otherwise incorrect. The client is assumed to be in error. (HTTP 400) (Request-ID: req-7e1674f8-70f3-4c45-b5e1-3c6739bc745f)<br class="">2016-04-20 18:38:00.063 2701 ERROR neutron.notifiers.nova <br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova [-] Failed to notify nova on events: [{'tag': u'67291fab-d2d6-42ec-ae4e-6e5ed60fa424', 'name': 'network-vif-deleted', 'server_uuid': u'ae94da8c-3fe6-44d6-93e5-b84a606c725c'}]<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova Traceback (most recent call last):<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/neutron/notifiers/nova.py", line 247, in send_events<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     batched_events)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/v2/contrib/server_external_events.py", line 39, in create<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return_raw=True)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/base.py", line 169, in _create<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     _resp, body = self.api.client.post(url, body=body)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 176, in post<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return self.request(url, 'POST', **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/novaclient/client.py", line 91, in request<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 206, in request<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     resp = super(LegacyJsonAdapter, self).request(*args, **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/adapter.py", line 95, in request<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return self.session.request(url, method, **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/utils.py", line 337, in inner<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return func(*args, **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 304, in request<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     auth_headers = self.get_auth_headers(auth)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 617, in get_auth_headers<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return auth.get_headers(self, **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/base.py", line 142, in get_headers<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     token = self.get_token(session)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/base.py", line 200, in get_token<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return self.get_access(session).auth_token<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/base.py", line 240, in get_access<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     self.auth_ref = self.get_auth_ref(session)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/generic/base.py", line 186, in get_auth_ref<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return self._plugin.get_auth_ref(session, **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/auth/identity/v3/base.py", line 190, in get_auth_ref<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     authenticated=False, log=False, **rkwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 501, in post<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return self.request(url, 'POST', **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/utils.py", line 337, in inner<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     return func(*args, **kwargs)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova   File "/usr/lib/python2.7/site-packages/keystoneclient/session.py", line 401, in request<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova     raise exceptions.from_response(resp, method, url)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova BadRequest: Expecting to find id or name in user - the server could not comply with the request since it is either malformed or otherwise incorrect. The client is assumed to be in error. (HTTP 400) (Request-ID: req-022851be-63e5-4f22-851d-60536516b686)<br class="">2016-04-20 18:42:59.448 2699 ERROR neutron.notifiers.nova<br class=""><br class=""><br class=""></div>It's not obvious to me how to fix this problem. Can someone please provide some guidance? What else should I look at? What service is nova calling when it times out? What is the "BadRequest" about? (where can I find the actual request? and what should it look like?)<br class=""><br class=""></div>Any help would be appreciated...<br class=""></div>Bond<br class=""></div>


!DSPAM:1,571839d9243111631916134!
_______________________________________________<br class="">Mailing list: <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" class="">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack</a><br class="">Post to     : <a href="mailto:openstack@lists.openstack.org" class="">openstack@lists.openstack.org</a><br class="">Unsubscribe : <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" class="">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack</a><br class=""><br class=""><br class="">!DSPAM:1,571839d9243111631916134!<br class=""></div></blockquote></div><br class=""></div></body></html>