<div dir="ltr"><div class="gmail_extra"><br><div class="gmail_quote">On 26 March 2014 19:19, James E. Blair <span dir="ltr"><<a href="mailto:jeblair@openstack.org" target="_blank">jeblair@openstack.org</a>></span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div>Salvatore Orlando <<a href="mailto:sorlando@nicira.com" target="_blank">sorlando@nicira.com</a>> writes:<br>


<br>
> On another note, we noticed that the duplicated jobs currently executed for<br>
> redundancy in neutron actually seem to point all to the same build id.<br>
> I'm not sure then if we're actually executing each job twice or just<br>
> duplicating lines in the jenkins report.<br>
<br>
</div>Thanks for catching that, and I'm sorry that didn't work right.  Zuul is<br>
in fact running the jobs twice, but it is only looking at one of them<br>
when sending reports and (more importantly) decided whether the change<br>
has succeeded or failed.  Fixing this is possible, of course, but turns<br>
out to be a rather complicated change.  Since we don't make heavy use of<br>
this feature, I lean toward simply instantiating multiple instances of<br>
identically configured jobs and invoking them (eg "neutron-pg-1",<br>
"neutron-pg-2").<br>
<br>
Matthew Treinish has already worked up a patch to do that, and I've<br>
written a patch to revert the incomplete feature from Zuul.<br></blockquote><div><br></div><div>That makes sense to me. I think it is just a matter about the results are reported to gerrit since from what I gather in logstash the jobs are executed twice for each new patchset or recheck.</div>

<div><br></div><div><br></div><div>For the status of the full job, I gave a look at the numbers reported by Rossella.</div><div>All the bugs are already known; some of them are not even bug; others have been recently fixed (given the time span of Rossella analysis and the fact it covers also non-rebased patches it might be possible to have this kind of false positive).</div>

<div><br></div><div>of all full job failures, 44% should be discarded.</div><div>Bug 1291611 (12%) is definitely not a neutron bug... hopefully.</div><div>Bug 1281969 (12%) is really too generic.</div><div>It bears the hallmark of bug1283522, and therefore the high number might be due to the fact that trunk was plagued by this bug up to a few days before the analysis.</div>

<div>However, it's worth noting that there is also another instance of "lock timeout" which has caused 11 failures in full job in the past week.</div><div>A new bug has been filed for this issue: <a href="https://bugs.launchpad.net/neutron/+bug/1298355" target="_blank">https://bugs.launchpad.net/neutron/+bug/1298355</a></div>

<div>Bug 1294603 was related to a test now skipped. It is still being debated whether the problem lies in test design, neutron LBaaS or neutron L3.</div><div><br></div><div>The following bugs seem not to be neutron bugs:</div>

<div>1290642, 1291920, 1252971, 1257885</div><div><br></div><div>Bug 1292242 appears to have been fixed while the analysis was going on</div><div>Bug 1277439 instead is already known to affects neutron jobs occasionally.</div>
<div><br></div><div>The actual state of the job is perhaps better than what the raw numbers say. I would keep monitoring it, and then make it voting after the Icehouse release is cut, so that we'll be able to deal with possible higher failure rate in the "quiet" period of the release cycle.</div>
<div><br></div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex">
<br>
-Jim<br>
<div><div><br>
_______________________________________________<br>
OpenStack-dev mailing list<br>
<a href="mailto:OpenStack-dev@lists.openstack.org" target="_blank">OpenStack-dev@lists.openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
</div></div></blockquote></div><br></div></div>