<div dir="ltr"><div><div>hi,<br></div>frequently i am getting the error  on my compute node and network node  when i run commands for ovs .<br></div>but if is restarted the openvswitch services it is working fine and after some time giving same error  .<br><div><br>2014-09-17T01:38:54Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)<br>ovs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)<br><br></div><div>pls fine logs in /var/log/neutron/<br></div><div><br><br><br>=================================================================<br><p>openvswitch-agent.log : </p>
<p>================================================================<br>
</p>
<p><br>
</p>
<p>stdout: ''<br>
Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:19Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol
 error)\n'<br>
2014-09-17 06:59:19.942 1860 ERROR neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Error while processing VIF ports<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Traceback (most recent call last):<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 1322, in rpc_loop<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_info = self.scan_ports(reg_ports, updated_ports_copy)<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 873, in scan_ports<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     cur_ports = self.int_br.get_vif_port_set()<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 330, in get_vif_port_set<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_names = self.get_port_name_list()<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 286, in get_port_name_list<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     res = self.run_vsctl(["list-ports", self.br_name], check_error=True)<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 75, in run_vsctl<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     ctxt.reraise = False<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/excutils.py", line 82, in __exit__<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     six.reraise(self.type_, self.value, self.tb)<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 68, in run_vsctl<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     return utils.execute(full_args, root_helper=self.root_helper)<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/utils.py", line 76, in execute<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     raise RuntimeError(m)<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent RuntimeError:
<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
 Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Exit code: 1<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stdout: ''<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:19Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol
 error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)\n'<br>
2014-09-17 06:59:19.942 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
<br>
2014-09-17 06:59:21.855 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 06:59:21.943 1860 ERROR neutron.agent.linux.ovs_lib [-] 
Unable to execute ['ovs-vsctl', '--timeout=10', 'list-ports', 'br-int'].
 Exception:
<br>
Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
Exit code: 1<br>
Stdout: ''<br>
Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:21Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol
 error)\n'<br>
2014-09-17 06:59:21.943 1860 ERROR neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Error while processing VIF ports<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Traceback (most recent call last):<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 1322, in rpc_loop<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_info = self.scan_ports(reg_ports, updated_ports_copy)<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 873, in scan_ports<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     cur_ports = self.int_br.get_vif_port_set()<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 330, in get_vif_port_set<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_names = self.get_port_name_list()<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 286, in get_port_name_list<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     res = self.run_vsctl(["list-ports", self.br_name], check_error=True)<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 75, in run_vsctl<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     ctxt.reraise = False<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/excutils.py", line 82, in __exit__<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     six.reraise(self.type_, self.value, self.tb)<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 68, in run_vsctl<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     return utils.execute(full_args, root_helper=self.root_helper)<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/utils.py", line 76, in execute<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     raise RuntimeError(m)<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent RuntimeError:
<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
 Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Exit code: 1<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stdout: ''<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:21Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol
 error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)\n'<br>
2014-09-17 06:59:21.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
<br>
2014-09-17 06:59:23.857 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 06:59:23.939 1860 ERROR neutron.agent.linux.ovs_lib [-] 
Unable to execute ['ovs-vsctl', '--timeout=10', 'list-ports', 'br-int'].
 Exception:
<br>
Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
Exit code: 1<br>
Stdout: ''<br>
Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:23Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol
 error)\n'<br>
2014-09-17 06:59:23.940 1860 ERROR neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Error while processing VIF ports<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Traceback (most recent call last):<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 1322, in rpc_loop<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_info = self.scan_ports(reg_ports, updated_ports_copy)<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 873, in scan_ports<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     cur_ports = self.int_br.get_vif_port_set()<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 330, in get_vif_port_set<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_names = self.get_port_name_list()<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 286, in get_port_name_list<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     res = self.run_vsctl(["list-ports", self.br_name], check_error=True)<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 75, in run_vsctl<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     ctxt.reraise = False<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/excutils.py", line 82, in __exit__<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     six.reraise(self.type_, self.value, self.tb)<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 68, in run_vsctl<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     return utils.execute(full_args, root_helper=self.root_helper)<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/utils.py", line 76, in execute<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     raise RuntimeError(m)<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent RuntimeError:
<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
 Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Exit code: 1<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stdout: ''<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:23Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol
 error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)\n'<br>
2014-09-17 06:59:23.940 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
<br>
2014-09-17 06:59:25.858 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 06:59:25.921 1860 ERROR neutron.agent.linux.ovs_lib [-] 
Unable to execute ['ovs-vsctl', '--timeout=10', 'list-ports', 'br-int'].
 Exception:
<br>
Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
Exit code: 1<br>
Stdout: ''<br>
Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:25Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol
 error)\n'<br>
2014-09-17 06:59:25.921 1860 ERROR neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Error while processing VIF ports<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Traceback (most recent call last):<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 1322, in rpc_loop<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_info = self.scan_ports(reg_ports, updated_ports_copy)<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 873, in scan_ports<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     cur_ports = self.int_br.get_vif_port_set()<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 330, in get_vif_port_set<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_names = self.get_port_name_list()<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 286, in get_port_name_list<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     res = self.run_vsctl(["list-ports", self.br_name], check_error=True)<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 75, in run_vsctl<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     ctxt.reraise = False<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/excutils.py", line 82, in __exit__<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     six.reraise(self.type_, self.value, self.tb)<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 68, in run_vsctl<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     return utils.execute(full_args, root_helper=self.root_helper)<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/utils.py", line 76, in execute<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     raise RuntimeError(m)<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent RuntimeError:
<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
 Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Exit code: 1<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stdout: ''<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:25Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol
 error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)\n'<br>
2014-09-17 06:59:25.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
<br>
2014-09-17 06:59:27.860 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 06:59:27.921 1860 ERROR neutron.agent.linux.ovs_lib [-] 
Unable to execute ['ovs-vsctl', '--timeout=10', 'list-ports', 'br-int'].
 Exception:
<br>
Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
Exit code: 1<br>
Stdout: ''<br>
Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:27Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol
 error)\n'<br>
2014-09-17 06:59:27.921 1860 ERROR neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Error while processing VIF ports<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Traceback (most recent call last):<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 1322, in rpc_loop<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_info = self.scan_ports(reg_ports, updated_ports_copy)<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 873, in scan_ports<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     cur_ports = self.int_br.get_vif_port_set()<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 330, in get_vif_port_set<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_names = self.get_port_name_list()<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 286, in get_port_name_list<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     res = self.run_vsctl(["list-ports", self.br_name], check_error=True)<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 75, in run_vsctl<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     ctxt.reraise = False<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/excutils.py", line 82, in __exit__<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     six.reraise(self.type_, self.value, self.tb)<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 68, in run_vsctl<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     return utils.execute(full_args, root_helper=self.root_helper)<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/utils.py", line 76, in execute<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     raise RuntimeError(m)<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent RuntimeError:
<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
 Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Exit code: 1<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stdout: ''<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:27Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol
 error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)\n'<br>
2014-09-17 06:59:27.921 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
<br>
2014-09-17 06:59:29.862 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 06:59:29.943 1860 ERROR neutron.agent.linux.ovs_lib [-] 
Unable to execute ['ovs-vsctl', '--timeout=10', 'list-ports', 'br-int'].
 Exception:
<br>
Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
Exit code: 1<br>
Stdout: ''<br>
Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:29Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol
 error)\n'<br>
2014-09-17 06:59:29.943 1860 ERROR neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Error while processing VIF ports<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Traceback (most recent call last):<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 1322, in rpc_loop<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_info = self.scan_ports(reg_ports, updated_ports_copy)<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 873, in scan_ports<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     cur_ports = self.int_br.get_vif_port_set()<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 330, in get_vif_port_set<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_names = self.get_port_name_list()<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 286, in get_port_name_list<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     res = self.run_vsctl(["list-ports", self.br_name], check_error=True)<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 75, in run_vsctl<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     ctxt.reraise = False<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/excutils.py", line 82, in __exit__<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     six.reraise(self.type_, self.value, self.tb)<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 68, in run_vsctl<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     return utils.execute(full_args, root_helper=self.root_helper)<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/utils.py", line 76, in execute<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     raise RuntimeError(m)<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent RuntimeError:
<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
 Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Exit code: 1<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stdout: ''<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:29Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol
 error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)\n'<br>
2014-09-17 06:59:29.943 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
<br>
2014-09-17 06:59:31.861 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 06:59:31.931 1860 ERROR neutron.agent.linux.ovs_lib [-] 
Unable to execute ['ovs-vsctl', '--timeout=10', 'list-ports', 'br-int'].
 Exception:
<br>
Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
Exit code: 1<br>
Stdout: ''<br>
Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:31Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol
 error)\n'<br>
2014-09-17 06:59:31.931 1860 ERROR neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Error while processing VIF ports<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Traceback (most recent call last):<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 1322, in rpc_loop<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_info = self.scan_ports(reg_ports, updated_ports_copy)<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/plugins/openvswitch/agent/ovs_neutron_agent.py", line 873, in scan_ports<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     cur_ports = self.int_br.get_vif_port_set()<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 330, in get_vif_port_set<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     port_names = self.get_port_name_list()<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 286, in get_port_name_list<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     res = self.run_vsctl(["list-ports", self.br_name], check_error=True)<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 75, in run_vsctl<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     ctxt.reraise = False<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/excutils.py", line 82, in __exit__<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     six.reraise(self.type_, self.value, self.tb)<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/ovs_lib.py", line 68, in run_vsctl<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     return utils.execute(full_args, root_helper=self.root_helper)<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/linux/utils.py", line 76, in execute<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent     raise RuntimeError(m)<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent RuntimeError:
<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
 Command: ['sudo', '/usr/bin/neutron-rootwrap', 
'/etc/neutron/rootwrap.conf', 'ovs-vsctl', '--timeout=10', 'list-ports',
 'br-int']<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Exit code: 1<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stdout: ''<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent Stderr: 'sudo: unable to resolve host user-ThinkCentre-M73\n2014-09-17T01:29:31Z|00001|reconnect|WARN|unix:/var/run/openvswitch/db.sock: connection attempt failed (Protocol
 error)\novs-vsctl: unix:/var/run/openvswitch/db.sock: database connection failed (Protocol error)\n'<br>
2014-09-17 06:59:31.931 1860 TRACE neutron.plugins.openvswitch.agent.ovs_neutron_agent
<br>
2014-09-17 06:59:33.861 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 06:59:35.058 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent tunnel out of sync with plugin!<br>
2014-09-17 06:59:35.465 1860 INFO neutron.agent.securitygroups_rpc [-] Preparing filters for devices set([u'ca97287a-ea49-4f8e-907e-e1b1e579c07f', u'72d38d5b-5c5d-4e93-a5bd-76b4f2520fef', u'f2369cf5-a41f-4dca-ab86-fd9be2f65aff'])<br>
2014-09-17 06:59:36.435 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Port ca97287a-ea49-4f8e-907e-e1b1e579c07f updated. Details: {u'admin_state_up': True, u'network_id': u'8bf0432f-494e-4320-8bbf-86b47a2754af', u'segmentation_id': 1, u'physical_network':
 None, u'device': u'ca97287a-ea49-4f8e-907e-e1b1e579c07f', u'port_id': u'ca97287a-ea49-4f8e-907e-e1b1e579c07f', u'network_type': u'gre'}<br>
2014-09-17 06:59:36.436 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Assigning 1 as local vlan for net-id=8bf0432f-494e-4320-8bbf-86b47a2754af<br>
2014-09-17 06:59:36.705 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Configuration for device ca97287a-ea49-4f8e-907e-e1b1e579c07f completed.<br>
2014-09-17 06:59:36.796 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Port 72d38d5b-5c5d-4e93-a5bd-76b4f2520fef updated. Details: {u'admin_state_up': True, u'network_id': u'8873c70c-7723-4078-b972-1086af0367da', u'segmentation_id': 2, u'physical_network':
 None, u'device': u'72d38d5b-5c5d-4e93-a5bd-76b4f2520fef', u'port_id': u'72d38d5b-5c5d-4e93-a5bd-76b4f2520fef', u'network_type': u'gre'}<br>
2014-09-17 06:59:36.796 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Assigning 2 as local vlan for net-id=8873c70c-7723-4078-b972-1086af0367da<br>
2014-09-17 06:59:37.051 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Configuration for device 72d38d5b-5c5d-4e93-a5bd-76b4f2520fef completed.<br>
2014-09-17 06:59:37.151 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Port f2369cf5-a41f-4dca-ab86-fd9be2f65aff updated. Details: {u'admin_state_up': True, u'network_id': u'8873c70c-7723-4078-b972-1086af0367da', u'segmentation_id': 2, u'physical_network':
 None, u'device': u'f2369cf5-a41f-4dca-ab86-fd9be2f65aff', u'port_id': u'f2369cf5-a41f-4dca-ab86-fd9be2f65aff', u'network_type': u'gre'}<br>
2014-09-17 06:59:37.151 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Assigning 2 as local vlan for net-id=8873c70c-7723-4078-b972-1086af0367da<br>
2014-09-17 06:59:37.378 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Configuration for device f2369cf5-a41f-4dca-ab86-fd9be2f65aff completed.<br>
2014-09-17 06:59:40.045 1860 ERROR neutron.agent.linux.ovsdb_monitor [-] Error received from ovsdb monitor: sudo: unable to resolve host user-ThinkCentre-M73<br>
2014-09-17 07:00:10.116 1860 ERROR neutron.agent.linux.ovsdb_monitor [-] Error received from ovsdb monitor: sudo: unable to resolve host user-ThinkCentre-M73<br>
</p>
<p><br>
</p>
<p>===========================================================================<br>
</p>
<p><br>
</p>
<p><br>
</p>
<p>============</p>
<p><br>
</p>
<p>l3-agent.log</p>
<p><br>
</p>
<p>===========================================================================<br>
</p>
<p>014-09-17 06:05:22.628 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:05:22.628 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:05:22.628 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:05:22.628 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:05:22.628 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:05:22.628 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:05:22.628 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:06:02.606 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:06:02.606 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:06:42.602 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:06:42.602 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:07:22.599 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:07:22.599 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:08:02.621 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:08:02.621 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:08:42.603 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:08:42.603 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:09:22.605 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:09:22.605 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:10:02.606 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:10:02.606 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:10:42.629 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:10:42.629 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:11:22.597 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:11:22.597 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:12:02.623 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:12:02.623 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:12:42.624 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:12:42.624 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:13:22.604 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:13:22.604 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:14:02.657 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:14:02.657 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:14:37.831 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 830, in _rpc_loop<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers)<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:14:37.831 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:14:42.621 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 06:14:42.621 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 06:14:58.814 1863 WARNING neutron.agent.l3_agent [-] Info for router b68b98e4-ca9c-40ff-8d3a-57c7914a97b6 were not found. Skipping router removal<br>
</p>
<p><br>
</p>
<p><br>
</p>
<p><br>
</p>
<p><br>
</p>
<p>========================================================================</p>
<p><br>
</p>
<p>l3-agent.log.1 </p>
<p>=========================================================================</p><p><br></p><p><br>
</p>
<p>14-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/transport/pyamqp.py", line 90, in drain_events<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     return connection.drain_events(**kwargs)<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 303, in drain_events<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     return amqp_method(channel, args)<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 506, in _close<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     self._x_close_ok()<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 534, in _x_close_ok<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     self._send_method((10, 51))<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/abstract_channel.py", line 62, in _send_method<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     self.channel_id, method_sig, args, content,<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/method_framing.py", line 227, in write_method<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     write_frame(1, channel, payload)<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/transport.py", line 183, in write_frame<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     frame_type, channel, size, payload, 0xce,<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/eventlet/greenio.py", line 307, in sendall<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     tail = self.send(data, flags)<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/eventlet/greenio.py", line 293, in send<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common     total_sent += fd.send(data[total_sent:], flags)<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common error: [Errno 104] Connection reset by peer<br>
2014-09-17 04:46:43.193 1863 TRACE neutron.openstack.common.rpc.common <br>
2014-09-17 04:46:43.194 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:43.198 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 1 seconds.<br>
2014-09-17 04:46:43.199 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 1 seconds.<br>
2014-09-17 04:46:44.199 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:44.203 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:44.206 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 3 seconds.<br>
2014-09-17 04:46:44.206 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 3 seconds.<br>
2014-09-17 04:46:47.206 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:47.213 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:47.219 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 5 seconds.<br>
2014-09-17 04:46:47.219 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 5 seconds.<br>
2014-09-17 04:46:49.451 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Failed to publish message to topic 'q-plugin': [Errno 104] Connection reset by peer<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common Traceback (most recent call last):<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 579, in ensure<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     return method(*args, **kwargs)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 690, in _publish<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     publisher = cls(self.conf, self.channel, topic, **kwargs)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 368, in __init__<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     **options)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 315, in __init__<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     self.reconnect(channel)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 323, in reconnect<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     routing_key=self.routing_key)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/messaging.py", line 82, in __init__<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     self.revive(self._channel)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/messaging.py", line 216, in revive<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     self.declare()<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/messaging.py", line 102, in declare<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     self.exchange.declare()<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/entity.py", line 166, in declare<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     nowait=nowait, passive=passive,<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/channel.py", line 604, in exchange_declare<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     self._send_method((40, 10), args)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/abstract_channel.py", line 62, in _send_method<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     self.channel_id, method_sig, args, content,<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/method_framing.py", line 227, in write_method<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     write_frame(1, channel, payload)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/transport.py", line 183, in write_frame<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     frame_type, channel, size, payload, 0xce,<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/eventlet/greenio.py", line 307, in sendall<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     tail = self.send(data, flags)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/eventlet/greenio.py", line 293, in send<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common     total_sent += fd.send(data[total_sent:], flags)<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common error: [Errno 104] Connection reset by peer<br>
2014-09-17 04:46:49.451 1863 TRACE neutron.openstack.common.rpc.common <br>
2014-09-17 04:46:49.452 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:52.219 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:52.235 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:54.456 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: timed out. Trying again in 1 seconds.<br>
2014-09-17 04:46:55.457 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:57.235 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: timed out. Trying again in 7 seconds.<br>
2014-09-17 04:46:57.244 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: timed out. Trying again in 7 seconds.<br>
2014-09-17 04:46:58.238 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 3 seconds.<br>
2014-09-17 04:47:01.239 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:04.236 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:04.244 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:04.253 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 5 seconds.<br>
2014-09-17 04:47:04.253 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 9 seconds.<br>
2014-09-17 04:47:07.246 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 9 seconds.<br>
2014-09-17 04:47:09.253 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:10.246 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 7 seconds.<br>
2014-09-17 04:47:13.254 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:16.247 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:16.262 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 11 seconds.<br>
2014-09-17 04:47:16.262 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 11 seconds.<br>
2014-09-17 04:47:17.247 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:19.261 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 113] EHOSTUNREACH. Trying again in 9 seconds.<br>
2014-09-17 04:47:27.262 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:27.282 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:27.289 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 13 seconds.<br>
2014-09-17 04:47:27.290 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 13 seconds.<br>
2014-09-17 04:47:28.262 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:28.281 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 11 seconds.<br>
2014-09-17 04:47:39.282 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:39.286 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 13 seconds.<br>
2014-09-17 04:47:40.290 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:40.293 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:40.297 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 15 seconds.<br>
2014-09-17 04:47:40.297 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 15 seconds.<br>
2014-09-17 04:47:52.286 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:52.291 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 15 seconds.<br>
2014-09-17 04:47:55.297 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:55.313 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:47:55.317 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 17 seconds.<br>
2014-09-17 04:47:55.317 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 17 seconds.<br>
2014-09-17 04:48:07.291 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:07.298 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 17 seconds.<br>
2014-09-17 04:48:12.317 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:12.322 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:12.349 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 19 seconds.<br>
2014-09-17 04:48:12.349 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 19 seconds.<br>
2014-09-17 04:48:24.299 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:24.312 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 19 seconds.<br>
2014-09-17 04:48:31.349 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:31.359 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:31.371 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 21 seconds.<br>
2014-09-17 04:48:31.372 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 21 seconds.<br>
2014-09-17 04:48:43.313 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:43.326 1863 ERROR neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] AMQP server on controller:5672 is unreachable: [Errno 111] ECONNREFUSED. Trying again in 21 seconds.<br>
2014-09-17 04:48:52.372 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:52.376 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:48:52.382 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Connected to AMQP server on controller:5672<br>
2014-09-17 04:48:52.385 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Connected to AMQP server on controller:5672<br>
2014-09-17 04:49:04.327 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:49:04.334 1863 INFO neutron.openstack.common.rpc.common [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] Connected to AMQP server on controller:5672<br>
2014-09-17 04:49:04.338 1863 WARNING neutron.openstack.common.loopingcall [req-2bfc2d95-c53b-446f-8d7b-6db4dd414d1b None] task run outlasted interval by 104.887212 sec<br>
2014-09-17 05:02:24.924 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 830, in _rpc_loop<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers)<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 05:02:24.924 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 05:02:42.584 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 05:02:42.584 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 05:02:46.926 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 830, in _rpc_loop<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers)<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 05:02:46.926 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 05:03:22.587 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 05:03:22.587 1863 TRACE neutron.agent.l3_agent <br>
2014-09-17 05:04:02.574 1863 ERROR neutron.agent.l3_agent [-] Failed synchronizing routers<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent Traceback (most recent call last):<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 864, in _sync_routers_task<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent     self._process_routers(routers, all_routers=True)<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 793, in _process_routers<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent     if (ex_net_id != self._fetch_external_net_id(force=True)):<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent   File "/usr/lib/python2.7/dist-packages/neutron/agent/l3_agent.py", line 337, in _fetch_external_net_id<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent     raise Exception(msg)<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent Exception: The
 'gateway_external_network_id' option must be configured for this agent 
as Neutron has more than one external network.<br>
2014-09-17 05:04:02.574 1863 TRACE neutron.agent.l3_agent <br>
</p>
<p><br>
</p>
<p><br>
</p>
<p><br>
</p>
<p>===================================================================</p>
<p><br>
</p>
<p>openvswitch-agent.log.1</p>
<p>===================================================================<br>
</p>
<p><br>
</p>
<p>2014-09-17 04:44:20.454 2598 TRACE neutron <br>
2014-09-17 04:45:19.273 1860 INFO neutron.common.config [-] Logging enabled!<br>
2014-09-17 04:45:19.534 1860 INFO neutron.openstack.common.rpc.common [req-f8b300a4-b73d-4e15-bd0d-0fc7475b143a None] Connected to AMQP server on controller:5672<br>
2014-09-17 04:45:19.549 1860 INFO neutron.openstack.common.rpc.common [req-f8b300a4-b73d-4e15-bd0d-0fc7475b143a None] Connected to AMQP server on controller:5672<br>
2014-09-17 04:45:19.990 1860 WARNING neutron.agent.securitygroups_rpc [req-8520e19e-c8f8-423a-9d07-501c1fe69c72 None] Security group agent binding currently not set. This should be set by the end of the init process.<br>
2014-09-17 04:45:20.335 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent initialized successfully, now running...
<br>
2014-09-17 04:45:20.338 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent out of sync with plugin!<br>
2014-09-17 04:45:20.341 1860 ERROR neutron.agent.linux.ovsdb_monitor [-] Error received from ovsdb monitor: sudo: unable to resolve host user-ThinkCentre-M73<br>
2014-09-17 04:45:20.477 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Agent tunnel out of sync with plugin!<br>
2014-09-17 04:45:20.483 1860 INFO neutron.openstack.common.rpc.common [-] Connected to AMQP server on controller:5672<br>
2014-09-17 04:45:20.696 1860 INFO neutron.agent.securitygroups_rpc [-] Preparing filters for devices set([u'ca97287a-ea49-4f8e-907e-e1b1e579c07f', u'f2369cf5-a41f-4dca-ab86-fd9be2f65aff'])<br>
2014-09-17 04:45:22.747 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Port ca97287a-ea49-4f8e-907e-e1b1e579c07f updated. Details: {u'admin_state_up': True, u'network_id': u'8bf0432f-494e-4320-8bbf-86b47a2754af', u'segmentation_id': 1, u'physical_network':
 None, u'device': u'ca97287a-ea49-4f8e-907e-e1b1e579c07f', u'port_id': u'ca97287a-ea49-4f8e-907e-e1b1e579c07f', u'network_type': u'gre'}<br>
2014-09-17 04:45:22.748 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Assigning 1 as local vlan for net-id=8bf0432f-494e-4320-8bbf-86b47a2754af<br>
2014-09-17 04:45:23.010 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Configuration for device ca97287a-ea49-4f8e-907e-e1b1e579c07f completed.<br>
2014-09-17 04:45:23.071 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Port f2369cf5-a41f-4dca-ab86-fd9be2f65aff updated. Details: {u'admin_state_up': True, u'network_id': u'8873c70c-7723-4078-b972-1086af0367da', u'segmentation_id': 2, u'physical_network':
 None, u'device': u'f2369cf5-a41f-4dca-ab86-fd9be2f65aff', u'port_id': u'f2369cf5-a41f-4dca-ab86-fd9be2f65aff', u'network_type': u'gre'}<br>
2014-09-17 04:45:23.071 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Assigning 2 as local vlan for net-id=8873c70c-7723-4078-b972-1086af0367da<br>
2014-09-17 04:45:23.338 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Configuration for device f2369cf5-a41f-4dca-ab86-fd9be2f65aff completed.<br>
2014-09-17 04:45:25.493 1860 INFO neutron.agent.securitygroups_rpc [-] Preparing filters for devices set([u'72d38d5b-5c5d-4e93-a5bd-76b4f2520fef'])<br>
2014-09-17 04:45:25.936 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Port 72d38d5b-5c5d-4e93-a5bd-76b4f2520fef updated. Details: {u'admin_state_up': True, u'network_id': u'8873c70c-7723-4078-b972-1086af0367da', u'segmentation_id': 2, u'physical_network':
 None, u'device': u'72d38d5b-5c5d-4e93-a5bd-76b4f2520fef', u'port_id': u'72d38d5b-5c5d-4e93-a5bd-76b4f2520fef', u'network_type': u'gre'}<br>
2014-09-17 04:45:26.148 1860 INFO neutron.plugins.openvswitch.agent.ovs_neutron_agent [-] Configuration for device 72d38d5b-5c5d-4e93-a5bd-76b4f2520fef completed.<br>
2014-09-17 04:45:50.574 1860 ERROR neutron.agent.linux.ovsdb_monitor [-] Error received from ovsdb monitor: sudo: unable to resolve host user-ThinkCentre-M73<br>
2014-09-17 04:46:20.631 1860 ERROR neutron.agent.linux.ovsdb_monitor [-] Error received from ovsdb monitor: sudo: unable to resolve host user-ThinkCentre-M73<br>
2014-09-17 04:46:43.114 1860 ERROR neutron.openstack.common.rpc.common [-] Failed to consume message from queue: [Errno 104] Connection reset by peer<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common Traceback (most recent call last):<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 579, in ensure<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     return method(*args, **kwargs)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 659, in _consume<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     return self.connection.drain_events(timeout=timeout)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/connection.py", line 279, in drain_events<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     return self.transport.drain_events(self.connection, **kwargs)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/transport/pyamqp.py", line 90, in drain_events<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     return connection.drain_events(**kwargs)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 303, in drain_events<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     return amqp_method(channel, args)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 506, in _close<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     self._x_close_ok()<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 534, in _x_close_ok<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     self._send_method((10, 51))<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/abstract_channel.py", line 62, in _send_method<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     self.channel_id, method_sig, args, content,<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/method_framing.py", line 227, in write_method<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     write_frame(1, channel, payload)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/transport.py", line 183, in write_frame<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     frame_type, channel, size, payload, 0xce,<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/eventlet/greenio.py", line 307, in sendall<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     tail = self.send(data, flags)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/eventlet/greenio.py", line 293, in send<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common     total_sent += fd.send(data[total_sent:], flags)<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common error: [Errno 104] Connection reset by peer<br>
2014-09-17 04:46:43.114 1860 TRACE neutron.openstack.common.rpc.common <br>
2014-09-17 04:46:43.189 1860 INFO neutron.openstack.common.rpc.common [-] Reconnecting to AMQP server on controller:5672<br>
2014-09-17 04:46:43.193 1860 ERROR neutron.openstack.common.rpc.common [-] Failed to consume message from queue: [Errno 104] Connection reset by peer<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common Traceback (most recent call last):<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 579, in ensure<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common     return method(*args, **kwargs)<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/neutron/openstack/common/rpc/impl_kombu.py", line 659, in _consume<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common     return self.connection.drain_events(timeout=timeout)<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/connection.py", line 279, in drain_events<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common     return self.transport.drain_events(self.connection, **kwargs)<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/kombu/transport/pyamqp.py", line 90, in drain_events<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common     return connection.drain_events(**kwargs)<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 303, in drain_events<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common     return amqp_method(channel, args)<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 506, in _close<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common     self._x_close_ok()<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/connection.py", line 534, in _x_close_ok<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common     self._send_method((10, 51))<br>
2014-09-17 04:46:43.193 1860 TRACE neutron.openstack.common.rpc.common   File "/usr/lib/python2.7/dist-packages/amqp/abstract_channel.py", line 62, in _send_method<br>
2014-09-17 04:46:43.193 1860 TRACE <a href="http://neutron.openstack.com" target="_blank">neutron.openstack.com</a></p><br><br><br></div><div>thanks,<br>srinivas.<br><br><br><br></div><div><br><br></div><div class="gmail_extra"><br><div class="gmail_quote">On Tue, Sep 16, 2014 at 10:56 PM, Raghu Vadapalli <span dir="ltr"><<a href="mailto:rvatspacket@gmail.com" target="_blank">rvatspacket@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><div>Hi Srinivas, <br><br></div>Any error messages from the /var/log neutron logs ?<br><br>Regards,<br>Raghu<br></div></div><div class="gmail_extra"><br><div class="gmail_quote"><div><div class="h5">On Tue, Sep 16, 2014 at 12:59 PM, Srinivasreddy R <span dir="ltr"><<a href="mailto:srinivasreddy4390@gmail.com" target="_blank">srinivasreddy4390@gmail.com</a>></span> wrote:<br></div></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5"><div dir="ltr"><div><div><div><div><div><div>hi,<br></div>Able to launch  instances in 3 node setup with icehouse installation guide for ubuntu .<br><br></div>instances are getting ip and the are able to communicate with each other . <br><br></div>but the state of the external gateway of the router is down state .<br></div>i am not able to communicate from instance to the external network and vice-versa . <br></div><div>i have pasted my instance overview in the below link.<br><br><a href="http://paste.openstack.org/show/112237/" target="_blank">http://paste.openstack.org/show/112237/</a><br></div><div>i have attached network topology and router configuration .<br></div><div><br></div>pls help me . how can i proceed further .<br><br></div><div>:<br></div><div><br>thanks,<br></div>srinivas.<br><br><br></div>
<br></div></div>_______________________________________________<br>
Mailing list: <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack</a><br>
Post to     : <a href="mailto:openstack@lists.openstack.org" target="_blank">openstack@lists.openstack.org</a><br>
Unsubscribe : <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack</a><br>
<br></blockquote></div><br></div>
</blockquote></div><br></div></div>