<div dir="ltr">Hello there,<div><br></div><div>I am having a lot of problems with nova compute,  after 30 minutes all my computes report XXX when I execute nova-manage service list</div><div><br></div><div><br></div><div><br></div><div>So I restart rabbitmq and conductor in the controller node, libvrit-bin and nova-compute in all the compute hosts and everithing return OK but 30 minutes after all the computes goes XXX again.</div><div><br></div><div>I noticed that nova-compute, libvirt-bin are ok in thoose hosts and the rabbitmq server is alive but I still have XXX witth nova-manage servce list.</div><div><br></div><div>I am using ubuntu 14.04 and Icehouse release. I noticed too this in the rabbitmq log:</div><div><br></div><div><br></div><div><div>=WARNING REPORT==== 3-Dec-2014::21:58:51 ===</div><div>closing AMQP connection <0.17955.6> (<a href="http://172.18.0.13:40959">172.18.0.13:40959</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>):</div><div>connection_closed_abruptly</div><div><br></div><div>=WARNING REPORT==== 3-Dec-2014::21:58:51 ===</div><div>closing AMQP connection <0.19007.6> (<a href="http://172.18.0.13:40961">172.18.0.13:40961</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>):</div><div>connection_closed_abruptly</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:04:02 ===</div><div>accepting AMQP connection <0.19867.7> (<a href="http://172.18.0.15:53656">172.18.0.15:53656</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:06:31 ===</div><div>accepting AMQP connection <0.23039.7> (<a href="http://172.18.0.13:41162">172.18.0.13:41162</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:06:31 ===</div><div>accepting AMQP connection <0.23049.7> (<a href="http://172.18.0.13:41163">172.18.0.13:41163</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:06:32 ===</div><div>closing AMQP connection <0.23049.7> (<a href="http://172.18.0.13:41163">172.18.0.13:41163</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=WARNING REPORT==== 3-Dec-2014::22:06:32 ===</div><div>closing AMQP connection <0.23039.7> (<a href="http://172.18.0.13:41162">172.18.0.13:41162</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>):</div><div>connection_closed_abruptly</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:11:14 ===</div><div>accepting AMQP connection <0.30069.7> (<a href="http://172.18.0.13:41177">172.18.0.13:41177</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:11:14 ===</div><div>accepting AMQP connection <0.30079.7> (<a href="http://172.18.0.13:41178">172.18.0.13:41178</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:11:20 ===</div><div>accepting AMQP connection <0.30236.7> (<a href="http://172.18.0.13:41179">172.18.0.13:41179</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:19:19 ===</div><div>accepting AMQP connection <0.7975.8> (<a href="http://172.18.0.10:39881">172.18.0.10:39881</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:19:20 ===</div><div>accepting AMQP connection <0.8132.8> (<a href="http://172.18.0.10:39893">172.18.0.10:39893</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:19:22 ===</div><div>accepting AMQP connection <0.8342.8> (<a href="http://172.18.0.13:41275">172.18.0.13:41275</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:19:48 ===</div><div>accepting AMQP connection <0.9155.8> (<a href="http://172.18.0.10:39976">172.18.0.10:39976</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:19:48 ===</div><div>accepting AMQP connection <0.9165.8> (<a href="http://172.18.0.10:39977">172.18.0.10:39977</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=WARNING REPORT==== 3-Dec-2014::22:19:56 ===</div><div>closing AMQP connection <0.9155.8> (<a href="http://172.18.0.10:39976">172.18.0.10:39976</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>):</div><div>connection_closed_abruptly</div><div><br></div><div>=WARNING REPORT==== 3-Dec-2014::22:19:56 ===</div><div>closing AMQP connection <0.9165.8> (<a href="http://172.18.0.10:39977">172.18.0.10:39977</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>):</div><div>connection_closed_abruptly</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:21:18 ===</div><div>accepting AMQP connection <0.10063.8> (<a href="http://172.18.0.10:40151">172.18.0.10:40151</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=INFO REPORT==== 3-Dec-2014::22:21:18 ===</div><div>accepting AMQP connection <0.10073.8> (<a href="http://172.18.0.10:40152">172.18.0.10:40152</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>)</div><div><br></div><div>=WARNING REPORT==== 3-Dec-2014::22:24:20 ===</div><div>closing AMQP connection <0.10073.8> (<a href="http://172.18.0.10:40152">172.18.0.10:40152</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>):</div><div>connection_closed_abruptly</div><div><br></div><div>=WARNING REPORT==== 3-Dec-2014::22:24:20 ===</div><div>closing AMQP connection <0.10063.8> (<a href="http://172.18.0.10:40151">172.18.0.10:40151</a> -> <a href="http://172.18.0.10:5672">172.18.0.10:5672</a>):</div><div>connection_closed_abruptly</div><div><br></div></div><div><b>172.18.0.10 is the IP of my controller node</b></div><div><br></div><div>and this in the libvirt log:</div><div><br></div><div><div>2014-12-03 16:33:48.121+0000: 53769: error : virNetSocketReadWire:1454 : End of file while reading data: Input/output error</div><div>2014-12-03 17:27:14.557+0000: 53769: error : virNetSocketReadWire:1454 : End of file while reading data: Input/output error</div><div>2014-12-03 20:16:46.270+0000: 53769: error : virNetSocketReadWire:1454 : End of file while reading data: Input/output error</div><div>2014-12-03 21:22:18.255+0000: 53769: error : virNetSocketReadWire:1454 : End of file while reading data: Input/output error</div><div>2014-12-03 21:53:07.884+0000: 53769: error : virNetSocketReadWire:1454 : End of file while reading data: Input/output error</div><div>2014-12-03 23:10:49.062+0000: 53769: error : virNetSocketReadWire:1454 : End of file while reading data: Input/output error</div><div>2014-12-04 00:22:13.703+0000: 53769: error : virNetSocketReadWire:1454 : End of file while reading data: Input/output error</div><div>2014-12-04 00:39:57.967+0000: 53769: error : virNetSocketReadWire:1454 : End of file</div></div><div><br></div><div>This is my nova-conf:</div><div><br></div><div><div>[DEFAULT]</div><div>dhcpbridge_flagfile=/etc/nova/nova.conf</div><div>dhcpbridge=/usr/bin/nova-dhcpbridge</div><div>logdir=/var/log/nova</div><div>state_path=/var/lib/nova</div><div>lock_path=/var/lock/nova</div><div>force_dhcp_release=True</div><div>iscsi_helper=tgtadm</div><div>libvirt_use_virtio_for_bridges=True</div><div>connection_type=libvirt</div><div>root_helper=sudo nova-rootwrap /etc/nova/rootwrap.conf</div><div>verbose=True</div><div>ec2_private_dns_show_ip=True</div><div>api_paste_config=/etc/nova/api-paste.ini</div><div>volumes_path=/var/lib/nova/volumes</div><div>enabled_apis=ec2,osapi_compute,metadata</div><div><br></div><div>auth_strategy = keystone</div><div>rpc_backend = rabbit</div><div>rabbit_host = 172.18.0.10</div><div>my_ip = 172.18.0.23</div><div>vnc_enabled = True</div><div>vncserver_listen = 0.0.0.0</div><div>vncserver_proxyclient_address = 172.18.0.16</div><div>novncproxy_base_url = <a href="http://PUBLIC_IP:6080/vnc_auto.html">http://PUBLIC_IP:6080/vnc_auto.html</a></div><div>glance_host = 172.18.0.10</div><div>vif_plugging_is_fatal=false</div><div>vif_plugging_timeout=0</div><div><br></div><div>network_api_class = nova.network.neutronv2.api.API</div><div>neutron_url = <a href="http://172.18.0.10:9696">http://172.18.0.10:9696</a></div><div>neutron_auth_strategy = keystone</div><div>neutron_admin_tenant_name = service</div><div>neutron_admin_username = neutron</div><div>neutron_admin_password = XXX</div><div>neutron_admin_auth_url = <a href="http://172.18.0.10:35357/v2.0">http://172.18.0.10:35357/v2.0</a></div><div>linuxnet_interface_driver = nova.network.linux_net.LinuxOVSInterfaceDriver</div><div>firewall_driver = nova.virt.firewall.NoopFirewallDriver</div><div>security_group_api = neutron</div><div><br></div><div><br></div><div>[database]</div><div>connection = mysql://<a href="http://nova:XXX@172.18.0.10/nova">nova:XXX@172.18.0.10/nova</a></div><div><br></div><div><br></div><div>[keystone_authtoken]</div><div>auth_uri = <a href="http://172.18.0.10:5000">http://172.18.0.10:5000</a></div><div>auth_host = 172.18.0.10</div><div>auth_port = 35357</div><div>auth_protocol = http</div><div>admin_tenant_name = service</div><div>admin_user = nova</div><div>admin_password = XXX</div></div><div><br></div><div><br></div><div><b>Any help would be appreciated.</b></div><div><b>Thanks in advance!</b></div><div><b>~GA</b></div></div>