<div>Thanks for your guys help!</div><div>I guess this problem may be caused by nova packages auto upgrade. </div><div><br></div><div>I just found these two lines in the file /var/log/kern.log:</div><div><font color="#ff0000">Aug 23 06:34:33 cnode-01 kernel: [4955691.256036] init: nova-network main process (9191) terminated with status 143</font></div>
<div><font color="#ff0000">Aug 23 06:34:35 cnode-01 kernel: [4955693.402082] init: nova-compute main process (9275) terminated with status 143</font></div><div><br></div><div>Here is the link for detail of /var/log/kern.log</div>
<div><a href="http://pastebin.com/GqH1ju1R">http://pastebin.com/GqH1ju1R</a>
</div><div><br></div><div>Also found these info in /var/log/dpkg.log:</div><div><div><font color="#ff0000">2012-08-23 06:34:33 upgrade nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.2 2012.1+stable~20120612-3ee026e-0ubuntu1.3</font></div>
<div><font color="#ff0000">2012-08-23 06:34:33 status half-configured nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div><div><font color="#ff0000">2012-08-23 06:34:33 status unpacked nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div>
<div><font color="#ff0000">2012-08-23 06:34:33 status half-installed nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div><div><font color="#ff0000">2012-08-23 06:34:34 status triggers-pending ureadahead 0.100.0-12</font></div>
<div><font color="#ff0000">2012-08-23 06:34:34 status half-installed nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div><div><font color="#ff0000">2012-08-23 06:34:34 status triggers-pending ureadahead 0.100.0-12</font></div>
<div><font color="#ff0000">2012-08-23 06:34:34 status triggers-pending man-db 2.6.1-2</font></div><div><font color="#ff0000">2012-08-23 06:34:34 status half-installed nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div>
<div><font color="#ff0000">2012-08-23 06:34:34 status half-installed nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div><div><font color="#ff0000">2012-08-23 06:34:34 status unpacked nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.3</font></div>
<div><font color="#ff0000">2012-08-23 06:34:34 status unpacked nova-network 2012.1+stable~20120612-3ee026e-0ubuntu1.3</font></div><div><font color="#ff0000">2012-08-23 06:34:34 upgrade nova-compute-kvm 2012.1+stable~20120612-3ee026e-0ubuntu1.2 2012.1+stable~20120612-3ee026e-0ubuntu1.3</font></div>
<div><font color="#ff0000">2012-08-23 06:34:34 status half-configured nova-compute-kvm 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div><div><font color="#ff0000">2012-08-23 06:34:35 status unpacked nova-compute-kvm 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div>
<div><font color="#ff0000">2012-08-23 06:34:35 status half-installed nova-compute-kvm 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div><div><font color="#ff0000">2012-08-23 06:34:35 status half-installed nova-compute-kvm 2012.1+stable~20120612-3ee026e-0ubuntu1.2</font></div>
<div><font color="#ff0000">2012-08-23 06:34:35 status unpacked nova-compute-kvm 2012.1+stable~20120612-3ee026e-0ubuntu1.3</font></div><div><font color="#ff0000">2012-08-23 06:34:35 status unpacked nova-compute-kvm 2012.1+stable~20120612-3ee026e-0ubuntu1.3</font></div>
<div><font color="#ff0000">2012-08-23 06:34:35 upgrade nova-compute 2012.1+stable~20120612-3ee026e-0ubuntu1.2 2012.1+stable~20120612-3ee026e-0ubuntu1.3</font></div></div><div><br></div><div>Here is detail:</div><div><a href="http://pastebin.com/juiSxCue">http://pastebin.com/juiSxCue</a>
</div><div><br></div><div>But I am not 100% sure of this. Does anyone knows what it means that a process was <span style="color:rgb(255,0,0)">terminated with </span><span style="color:rgb(255,0,0)">status 143 in Ubuntu 12.04</span>? </div>
<div><br></div><div>Thanks ahead,</div><div>Sam</div><div><br></div><br><div class="gmail_quote">On Mon, Aug 27, 2012 at 5:56 PM, Alejandro Comisario <span dir="ltr"><<a href="mailto:alejandro.comisario@mercadolibre.com" target="_blank">alejandro.comisario@mercadolibre.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><font color="#000000"><font><font face="courier new,monospace">One of the things i dont like in essex.</font></font></font><div>
<font color="#000000"><font><font face="courier new,monospace">That the "autostart" flag in nova.conf with KVM doesnt work with the autostart feature of libvirt/kvm, so if, for some reason you need to restart nova-compute to apply some kind of modification, the instances get soft/hard rebooted because now nova-compute handles the "autostart" flag from nova.conf</font></font></font></div>

<div><font color="#000000"><font><font face="courier new,monospace"><br></font></font></font></div><div><font color="#000000"><font><font face="courier new,monospace">Why is that if some one can explain ?<br></font></font></font><br>

<div class="gmail_quote"><div><div class="h5">On Mon, Aug 27, 2012 at 9:21 PM, Gabe Westmaas <span dir="ltr"><<a href="mailto:gabe.westmaas@rackspace.com" target="_blank">gabe.westmaas@rackspace.com</a>></span> wrote:<br>
</div></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5">






<div lang="EN-US" link="blue" vlink="purple">
<div>
<p class="MsoNormal"><span style="background:white;font-size:9.0pt;font-family:Consolas">Hey Sam,<u></u><u></u></span></p>
<p class="MsoNormal"><span style="background:white;font-size:9.0pt;font-family:Consolas"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="background:white;font-size:9.0pt;font-family:Consolas">Is it possible your hypervisors restarted?  I see this entry in the logs:<u></u><u></u></span></p>
<p class="MsoNormal"><span style="background:white;font-size:9.0pt;font-family:Consolas"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="background:white;font-size:9.0pt;font-family:Consolas">2012-08-23 06:35:02 INFO nova.compute.manager [req-f1598257-3f35-40e6-b5aa-d47a0e93bfba None None] [instance: ce00ff1d-cf46-44de-9557-c5a0f91c8d67] Rebooting
 instance after nova-compute restart.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="background:white;font-size:9.0pt;font-family:Consolas"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="background:white;font-size:9.0pt;font-family:Consolas">Gabe</span><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u><u></u></span></p>


<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p>
<div style="border:none;border-left:solid blue 1.5pt;padding:0in 0in 0in 4.0pt">
<div>
<div style="border:none;border-top:solid #b5c4df 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:10.0pt;font-family:"Tahoma","sans-serif"">From:</span></b><span style="font-size:10.0pt;font-family:"Tahoma","sans-serif""> openstack-bounces+gabe.westmaas=<a href="mailto:rackspace.com@lists.launchpad.net" target="_blank">rackspace.com@lists.launchpad.net</a> [mailto:<a href="mailto:openstack-bounces%2Bgabe.westmaas" target="_blank">openstack-bounces+gabe.westmaas</a>=<a href="mailto:rackspace.com@lists.launchpad.net" target="_blank">rackspace.com@lists.launchpad.net</a>]
<b>On Behalf Of </b>Sam Su<br>
<b>Sent:</b> Monday, August 27, 2012 8:10 PM<br>
<b>To:</b> openstack<br>
<b>Subject:</b> [Openstack] HELP: All instances automatically rebooted.<u></u><u></u></span></p>
</div>
</div><div><div>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Hi, <u></u><u></u></p>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">I have an Essex cluster with 6 compute nodes and one control nodes. All compute nodes are working not any interrupted, for some reason all instances in my cluster automatically rebooted. I am trying to but not figured out why this happened
 in these couple of days. <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">It's much appreciated if someone can give me some hints about how to deal with this situation.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Logs in my /var/log/upstart/nova-compute.log:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><a href="http://pastebin.com/WYJtS5a5" target="_blank">http://pastebin.com/WYJtS5a5</a>
<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Let me know if need more info.<u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal"><br>
TIA,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Sam<u></u><u></u></p>
</div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
</div></div></div>
</div>
</div>

<br></div></div>_______________________________________________<br>
Mailing list: <a href="https://launchpad.net/~openstack" target="_blank">https://launchpad.net/~openstack</a><br>
Post to     : <a href="mailto:openstack@lists.launchpad.net" target="_blank">openstack@lists.launchpad.net</a><br>
Unsubscribe : <a href="https://launchpad.net/~openstack" target="_blank">https://launchpad.net/~openstack</a><br>
More help   : <a href="https://help.launchpad.net/ListHelp" target="_blank">https://help.launchpad.net/ListHelp</a><br>
<br></blockquote></div><span class="HOEnZb"><font color="#888888"><br><br clear="all"><div><br></div>-- <br><div><b>Alejandro</b></div>
</font></span></div>
</blockquote></div><br>