<div dir="ltr">Hi Sean,<div><br></div><div>I think the following 2 commits in neutron are essential for bringing neutron jobs back to acceptable level of failure rate:</div><div><a href="https://review.openstack.org/#/c/67537/">https://review.openstack.org/#/c/67537/</a><br>
</div><div><a href="https://review.openstack.org/#/c/66670/">https://review.openstack.org/#/c/66670/</a><br></div><div><br></div><div>Thanks,</div><div>Eugene.</div></div><div class="gmail_extra"><br><br><div class="gmail_quote">
On Mon, Jan 20, 2014 at 6:33 PM, Sean Dague <span dir="ltr"><<a href="mailto:sean@dague.net" target="_blank">sean@dague.net</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Anyone that's looked at the gate this morning... knows things aren't<br>
good. It turns out that a few new races got into OpenStack last week,<br>
which are causing a ton of pain, and have put us dramatically over the edge.<br>
<br>
We've not tracked down all of them, but 2 that are quite important to<br>
address are:<br>
<br>
 - Bug 1270680 - v3 extensions api inherently racey wrt instances<br>
 - Bug 1270608 - n-cpu 'iSCSI device not found' log causes<br>
gate-tempest-dsvm-*-full to fail<br>
<br>
Both can be seen as very new issues here -<br>
<a href="http://status.openstack.org/elastic-recheck/" target="_blank">http://status.openstack.org/elastic-recheck/</a><br>
<br>
We've got a short term work around on 1270680 which we're going to take<br>
into the gate now (and fix it better later).<br>
<br>
1270608 is still in desperate need of fixing.<br>
<br>
<br>
Neutron is in a whole other level of pain. Over the weekend I found the<br>
isolated jobs are in a 70% fail state, which means the overall chance<br>
for success for Neutron / Neutron client patches are < 5%. As such I'd<br>
suggest a moritorium for them going into the gate at this point, as they<br>
are basically guarunteed to fail.<br>
<span class="HOEnZb"><font color="#888888"><br>
        -Sean<br>
<br>
--<br>
Sean Dague<br>
Samsung Research America<br>
<a href="mailto:sean@dague.net">sean@dague.net</a> / <a href="mailto:sean.dague@samsung.com">sean.dague@samsung.com</a><br>
<a href="http://dague.net" target="_blank">http://dague.net</a><br>
<br>
</font></span><br>_______________________________________________<br>
OpenStack-dev mailing list<br>
<a href="mailto:OpenStack-dev@lists.openstack.org">OpenStack-dev@lists.openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
<br></blockquote></div><br></div>