<div dir="ltr"><div>Hi All, </div><div><br></div><div>As you know the gate has been in particularly bad shape (gate queue over 100!) this week due to a number of factors. One factor is how many major outstanding bugs we have in the gate.  Below is a list of the top 4 open gate bugs.</div>

<div><br></div><div>Here are some fun facts about this list:</div><div>* All bugs have been open for over a month</div><div>* All are nova bugs</div><div>* These 4 bugs alone were hit 588 times which averages to 42 hits per day (data is over two weeks)!</div>

<div><br></div><div>If we want the gate queue to drop and not have to continuously run 'recheck bug x' we need to fix these bugs.  So I'm looking for volunteers to help debug and fix these bugs.</div><div><br>

</div><div><br></div><div>best,</div><div>Joe</div><div><br></div><div>Bug: <a href="https://bugs.launchpad.net/bugs/1253896">https://bugs.launchpad.net/bugs/1253896</a> => message:"SSHTimeout: Connection to the" AND message:"via SSH timed out." AND filename:"console.html"</div>

<div>Filed: 2013-11-21</div><div>Title: Attempts to verify guests are running via SSH fails. SSH connection to guest does not work.</div><div>Project: Status</div><div>  neutron: In Progress</div><div>  nova: Triaged</div>

<div>  tempest: Confirmed</div><div>Hits</div><div>  FAILURE: 243</div><div>Percentage of Gate Queue Job failures triggered by this bug</div><div>  gate-tempest-dsvm-postgres-full: 0.35%</div><div>  gate-grenade-dsvm: 0.68%</div>

<div>  gate-tempest-dsvm-neutron: 0.39%</div><div>  gate-tempest-dsvm-neutron-isolated: 4.76%</div><div>  gate-tempest-dsvm-full: 0.19%</div><div><br></div><div>Bug: <a href="https://bugs.launchpad.net/bugs/1254890">https://bugs.launchpad.net/bugs/1254890</a> </div>

<div>Fingerprint: message:"Details: Timed out waiting for thing" AND message:"to become" AND  (message:"ACTIVE" OR message:"in-use" OR message:"available")</div><div>Filed: 2013-11-25</div>

<div>Title: "Timed out waiting for thing" causes tempest-dsvm-neutron-* failures</div><div>Project: Status</div><div>  neutron: Invalid</div><div>  nova: Triaged</div><div>  tempest: Confirmed</div><div>Hits</div>

<div>  FAILURE: 173</div><div>Percentage of Gate Queue Job failures triggered by this bug</div><div>  gate-tempest-dsvm-neutron-isolated: 4.76%</div><div>  gate-tempest-dsvm-postgres-full: 0.35%</div><div>  gate-tempest-dsvm-large-ops: 0.68%</div>

<div>  gate-tempest-dsvm-neutron-large-ops: 0.70%</div><div>  gate-tempest-dsvm-full: 0.19%</div><div>  gate-tempest-dsvm-neutron-pg: 3.57%</div><div><br></div><div>Bug: <a href="https://bugs.launchpad.net/bugs/1257626">https://bugs.launchpad.net/bugs/1257626</a></div>

<div>Fingerprint: message:"nova.compute.manager Timeout: Timeout while waiting on RPC response - topic: \"network\", RPC method: \"allocate_for_instance\"" AND filename:"logs/screen-n-cpu.txt"</div>

<div>Filed: 2013-12-04</div><div>Title: Timeout while waiting on RPC response - topic: "network", RPC method: "allocate_for_instance" info: "<unknown>"</div><div>Project: Status</div><div>

  nova: Triaged</div><div>Hits</div><div>  FAILURE: 118</div><div>Percentage of Gate Queue Job failures triggered by this bug</div><div>  gate-tempest-dsvm-large-ops: 0.68%</div><div><br></div><div>Bug: <a href="https://bugs.launchpad.net/bugs/1254872">https://bugs.launchpad.net/bugs/1254872</a></div>

<div>Fingerprint: message:"libvirtError: Timed out during operation: cannot acquire state change lock" AND filename:"logs/screen-n-cpu.txt"</div><div>Filed: 2013-11-25</div><div>Title: libvirtError: Timed out during operation: cannot acquire state change lock</div>

<div>Project: Status</div><div>  nova: Triaged</div><div>Hits</div><div>  FAILURE: 54</div><div>  SUCCESS: 3</div><div>Percentage of Gate Queue Job failures triggered by this bug</div><div>  gate-tempest-dsvm-postgres-full: 0.35%</div>

<div>  gate-tempest-dsvm-full: 0.19%</div><div><br></div><div><br></div><div>Generated with: elastic-recheck-success</div></div>