<div dir="ltr">You didn't wait long enough for the Big Switch CI to reach your negative test. :-)<div> Currently the CI system is backed by about 100 patches to push responses out ~22 hours. <div><div><br></div><div>This does bring up an old discussion that was never resolved. </div>

<div>What is the minimum expected response time for CI systems?</div></div></div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Fri, Aug 15, 2014 at 3:35 PM, Edgar Magana <span dir="ltr"><<a href="mailto:edgar.magana@workday.com" target="_blank">edgar.magana@workday.com</a>></span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Team,<br>
<br>
I did a quick audit on the Neutron CI. Very sad results. Only few plugins<br>
and drivers are running properly and testing all Neutron commits.<br>
I created a report here:<br>
<a href="https://wiki.openstack.org/wiki/Neutron_Plugins_and_Drivers#Existing_Plugin" target="_blank">https://wiki.openstack.org/wiki/Neutron_Plugins_and_Drivers#Existing_Plugin</a><br>
_and_Drivers<br>
<br>
<br>
We will discuss the actions to take on the next Neutron IRC meeting. So<br>
please, reach me out to clarify what is the status of your CI.<br>
I had two commits to quickly verify the CI reliability:<br>
<br>
<a href="https://review.openstack.org/#/c/114393/" target="_blank">https://review.openstack.org/#/c/114393/</a><br>
<br>
<a href="https://review.openstack.org/#/c/40296/" target="_blank">https://review.openstack.org/#/c/40296/</a><br>
<br>
<br>
I would expect all plugins and drivers passing on the first one and<br>
failing for the second but I got so many surprises.<br>
<br>
Neutron code quality and reliability is a top priority, if you ignore this<br>
report that plugin/driver will be candidate to be remove from Neutron tree.<br>
<br>
Cheers,<br>
<br>
Edgar<br>
<br>
P.s. I hate to be the inquisitor hereŠ but someone has to do the dirty job!<br>
<div class="HOEnZb"><div class="h5"><br>
<br>
On 8/14/14, 8:30 AM, "Kyle Mestery" <<a href="mailto:mestery@mestery.com">mestery@mestery.com</a>> wrote:<br>
<br>
>Folks, I'm not sure if all CI accounts are running sufficient tests.<br>
>Per the requirements wiki page here [1], everyone needs to be running<br>
>more than just Tempest API tests, which I still see most neutron<br>
>third-party CI setups doing. I'd like to ask everyone who operates a<br>
>third-party CI account for Neutron to please look at the link below<br>
>and make sure you are running appropriate tests. If you have<br>
>questions, the weekly third-party meeting [2] is a great place to ask<br>
>questions.<br>
><br>
>Thanks,<br>
>Kyle<br>
><br>
>[1] <a href="https://wiki.openstack.org/wiki/NeutronThirdPartyTesting" target="_blank">https://wiki.openstack.org/wiki/NeutronThirdPartyTesting</a><br>
>[2] <a href="https://wiki.openstack.org/wiki/Meetings/ThirdParty" target="_blank">https://wiki.openstack.org/wiki/Meetings/ThirdParty</a><br>
><br>
>_______________________________________________<br>
>OpenStack-dev mailing list<br>
><a href="mailto:OpenStack-dev@lists.openstack.org">OpenStack-dev@lists.openstack.org</a><br>
><a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
<br>
<br>
_______________________________________________<br>
OpenStack-dev mailing list<br>
<a href="mailto:OpenStack-dev@lists.openstack.org">OpenStack-dev@lists.openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
</div></div></blockquote></div><br><br clear="all"><div><br></div>-- <br><div>Kevin Benton</div>
</div>