<html><body><p>Hmm, looking at: <a href="https://github.com/openstack/keystonemiddleware/compare/4.0.0...4.1.0">https://github.com/openstack/keystonemiddleware/compare/4.0.0...4.1.0</a> the only change that I can think of that might be the culprit is: <a href="https://github.com/openstack/keystonemiddleware/commit/f27d7f776e8556d976f75d07c99373455106de52">https://github.com/openstack/keystonemiddleware/commit/f27d7f776e8556d976f75d07c99373455106de52</a><br><br>I'll dig into this some more soon, but it might be worth trying things out with that commit reverted. <br><br>stevemar<br><br><img width="16" height="16" src="cid:1__=8FBBF5D3DFB48C1E8f9e8a93df938690918c8FB@" border="0" alt="Inactive hide details for "Armando M." ---2016/01/20 01:59:44 AM---On 19 January 2016 at 22:46, Kevin Benton <blak111@gmail.com"><font color="#424282">"Armando M." ---2016/01/20 01:59:44 AM---On 19 January 2016 at 22:46, Kevin Benton <blak111@gmail.com> wrote: > Hi all,</font><br><br><font size="2" color="#5F5F5F">From:        </font><font size="2">"Armando M." <armamig@gmail.com></font><br><font size="2" color="#5F5F5F">To:        </font><font size="2">"OpenStack Development Mailing List (not for usage questions)" <openstack-dev@lists.openstack.org></font><br><font size="2" color="#5F5F5F">Date:        </font><font size="2">2016/01/20 01:59 AM</font><br><font size="2" color="#5F5F5F">Subject:        </font><font size="2">Re: [openstack-dev] [keystone][neutron][requirements] - keystonemiddleware-4.1.0 performance regression</font><br><hr width="100%" size="2" align="left" noshade style="color:#8091A5; "><br><br><br><br><br><font size="4">On 19 January 2016 at 22:46, Kevin Benton <</font><a href="mailto:blak111@gmail.com" target="_blank"><u><font size="4" color="#0000FF">blak111@gmail.com</font></u></a><font size="4">> wrote:</font><ul><font size="4">Hi all,</font><br><br><font size="4">We noticed a major jump in the neutron tempest and API test run times recently in Neutron. After digging through logstash I found out that it first occurred on the requirements bump here: </font><a href="https://review.openstack.org/#/c/265697/" target="_blank"><u><font size="4" color="#0000FF">https://review.openstack.org/#/c/265697/</font></u></a><br><br><font size="4">After locally testing each requirements change individually, I found that the keystonemiddleware change seems to be the culprit. It almost doubles the time it takes to fulfill simple port-list requests in Neutron.</font><br><br><font size="4">Armando pushed up a patch here to confirm: </font><a href="https://review.openstack.org/#/c/270024/" target="_blank"><u><font size="4" color="#0000FF">https://review.openstack.org/#/c/270024/</font></u></a><br><font size="4">Once that's verified, we should probably put a cap on the middleware because it's causing the tests to run up close to their time limits.</font></ul><br><font size="4">Kevin,</font><br><br><font size="4">As usual your analytical skills are to be praised.</font><br><br><font size="4">I wonder if anyone else is aware of the issue/s, because during the usual hunting I could see other projects being affected and showing abnormally high run times of the dsvm jobs.</font><br><br><font size="4">I am not sure that [1] is the right approach, but it should give us some data points if executed successfully.</font><br><br><font size="4">Cheers,</font><br><font size="4">Armando</font><br><br><font size="4">[1]  </font><a href="https://review.openstack.org/#/c/270024/" target="_blank"><u><font size="4" color="#0000FF">https://review.openstack.org/#/c/270024/</font></u></a><br>
<ul><br><font size="4" color="#888888">-- </font><br><font size="4" color="#888888">Kevin Benton</font><br><font size="4"><br>__________________________________________________________________________<br>OpenStack Development Mailing List (not for usage questions)<br>Unsubscribe: </font><a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank"><u><font size="4" color="#0000FF">OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</font></u></a><u><font size="4" color="#0000FF"><br></font></u><a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank"><u><font size="4" color="#0000FF">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</font></u></a><font size="4"><br></font></ul><tt>__________________________________________________________________________<br>OpenStack Development Mailing List (not for usage questions)<br>Unsubscribe: OpenStack-dev-request@lists.openstack.org?subject:unsubscribe<br></tt><tt><a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a></tt><tt><br></tt><br><br><BR>
</body></html>