<div dir="ltr"><div>Hi Slawek,</div><div><br></div><div>I just pushed a patch to revert the change we did to workaround the issue in Ironic [1]. Thanks!<br></div><div><br></div><div>[1] <a href="https://review.opendev.org/c/openstack/ironic/+/810973">https://review.opendev.org/c/openstack/ironic/+/810973</a></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">Em sáb., 25 de set. de 2021 às 09:04, Slawek Kaplonski <<a href="mailto:skaplons@redhat.com">skaplons@redhat.com</a>> escreveu:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Hi,<br>
<br>
On Wed, Sep 22, 2021 at 04:55:34PM +0200, Rodolfo Alonso Hernandez wrote:<br>
> Hello folks:<br>
> <br>
> I replied in [1]. I think we could have a potential problem when executing<br>
> a DB change the impies a OF controller re-initialization. Most of the time<br>
> we don't have problems but as we see in the CI, we could sometimes.<br>
> <br>
> I'll push a patch to add a retry decorator on the methods that trigger this<br>
> OF controller restart.<br>
<br>
I see that patch <a href="https://review.opendev.org/c/openstack/neutron/+/810592" rel="noreferrer" target="_blank">https://review.opendev.org/c/openstack/neutron/+/810592</a> is<br>
already merged. Thx Rodolfo for quick fix.<br>
@Julia: can You check if Ironic jobs are ok now?<br>
<br>
> <br>
> Regards.<br>
> <br>
> [1]<a href="https://bugs.launchpad.net/neutron/+bug/1944201/comments/4" rel="noreferrer" target="_blank">https://bugs.launchpad.net/neutron/+bug/1944201/comments/4</a><br>
> <br>
> <br>
> On Wed, Sep 22, 2021 at 4:36 PM Slawek Kaplonski <<a href="mailto:skaplons@redhat.com" target="_blank">skaplons@redhat.com</a>><br>
> wrote:<br>
> <br>
> > Hi<br>
> ><br>
> > On Wed, Sep 22, 2021 at 03:30:08PM +0200, Lajos Katona wrote:<br>
> > > Hi Slawek,<br>
> > > Thanks for the summary.<br>
> > > Regarding <a href="https://bugs.launchpad.net/neutron/+bug/1944201" rel="noreferrer" target="_blank">https://bugs.launchpad.net/neutron/+bug/1944201</a> not sure<br>
> > about if<br>
> > > it is related to the number of hosts, there's some failure in<br>
> > > singlenode jobs as well:<br>
> > ><br>
> > <a href="http://logstash.openstack.org/#dashboard/file/logstash.json?query=message%3A%5C%22error%20Datapath%20Invalid%5C%22" rel="noreferrer" target="_blank">http://logstash.openstack.org/#dashboard/file/logstash.json?query=message%3A%5C%22error%20Datapath%20Invalid%5C%22</a><br>
> > ><br>
> > > example:<br>
> > ><br>
> > <a href="https://9f672e0630f459ee81cb-e4093b1756a9a5a7c7d28e6575b4af7f.ssl.cf5.rackcdn.com/805849/10/check/neutron-ovs-rally-task/5981df8/controller/logs/screen-q-agt.txt" rel="noreferrer" target="_blank">https://9f672e0630f459ee81cb-e4093b1756a9a5a7c7d28e6575b4af7f.ssl.cf5.rackcdn.com/805849/10/check/neutron-ovs-rally-task/5981df8/controller/logs/screen-q-agt.txt</a><br>
> ><br>
> > Ok. So it happens on all types of jobs where neutron-ovs-agent is used :/<br>
> ><br>
> > ><br>
> > > Lajos (lajoskatona)<br>
> > ><br>
> > > Slawek Kaplonski <<a href="mailto:skaplons@redhat.com" target="_blank">skaplons@redhat.com</a>> ezt írta (időpont: 2021. szept.<br>
> > 22.,<br>
> > > Sze, 12:10):<br>
> > ><br>
> > > > Hi,<br>
> > > ><br>
> > > > Due to very urgent things which I had yesterday, I wasn't able to run<br>
> > > > Neutron<br>
> > > > CI meeting as usually. Fortunatelly we don't have many new issues in<br>
> > our<br>
> > > > CI.<br>
> > > > There is only one new issue in our scenario jobs which I wanted to<br>
> > discuss<br>
> > > > [1]. It's impacting Ironic gates but I noticed it also in the Neutron<br>
> > CI<br>
> > > > as<br>
> > > > well. See [2] or [3] for example. I'm not sure about Ironic jobs but in<br>
> > > > Neutron I saw it mostly (or only, I'm not sure) in the multinode jobs.<br>
> > > ><br>
> > > > [1] <a href="https://bugs.launchpad.net/neutron/+bug/1944201" rel="noreferrer" target="_blank">https://bugs.launchpad.net/neutron/+bug/1944201</a><br>
> > > > [2] https://<br>
> > > ><br>
> > <a href="http://e36beaa2ff297ebe7d5f-5944c3d62ed334b8cdf50b534c246731.ssl.cf5.rackcdn.com/" rel="noreferrer" target="_blank">e36beaa2ff297ebe7d5f-5944c3d62ed334b8cdf50b534c246731.ssl.cf5.rackcdn.com/</a><br>
> > > ><br>
> > 805849/9/check/neutron-ovs-tempest-dvr-ha-multinode-full/f83fa96/compute1/<br>
> > > > logs/screen-q-agt.txt<br>
> > > > <<br>
> > <a href="http://e36beaa2ff297ebe7d5f-5944c3d62ed334b8cdf50b534c246731.ssl.cf5.rackcdn.com/805849/9/check/neutron-ovs-tempest-dvr-ha-multinode-full/f83fa96/compute1/logs/screen-q-agt.txt" rel="noreferrer" target="_blank">http://e36beaa2ff297ebe7d5f-5944c3d62ed334b8cdf50b534c246731.ssl.cf5.rackcdn.com/805849/9/check/neutron-ovs-tempest-dvr-ha-multinode-full/f83fa96/compute1/logs/screen-q-agt.txt</a><br>
> > ><br>
> > > > [3] <a href="https://storage.bhs.cloud.ovh.net/v1/" rel="noreferrer" target="_blank">https://storage.bhs.cloud.ovh.net/v1/</a><br>
> > > ><br>
> > > ><br>
> > AUTH_dcaab5e32b234d56b626f72581e3644c/zuul_opendev_logs_88f/803045/12/check/<br>
> > > > neutron-ovs-tempest-slow/88f8bb7/job-output.txt<br>
> > > ><br>
> > > > --<br>
> > > > Slawek Kaplonski<br>
> > > > Principal Software Engineer<br>
> > > > Red Hat<br>
> ><br>
> > --<br>
> > Slawek Kaplonski<br>
> > Principal Software Engineer<br>
> > Red Hat<br>
> ><br>
<br>
-- <br>
Slawek Kaplonski<br>
Principal Software Engineer<br>
Red Hat<br>
</blockquote></div><br clear="all"><br>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><span style="background-color:rgb(255,255,255)"><font style="background-color:transparent"><div><div dir="ltr"><div><div style="color:rgb(136,136,136);font-family:arial,sans-serif;font-size:12.8px"><i style="font-size:13px"><font style="color:rgb(0,0,0)">Att[]'s</font><br><font color="#500050"><span style="color:rgb(0,0,0)">Iury Gregory Melo Ferreira</span> </font><br></i><i><font color="#000000">MSc in Computer Science at UFCG<br></font></i></div><div style="color:rgb(136,136,136);font-family:arial,sans-serif;font-size:12.8px"><i><font color="#000000">Part of the ironic-core and puppet-manager-core team in OpenStack</font></i><br><i><font color="#000000"><span style="background-color:rgb(255,255,255)"><font style="background-color:transparent"><i><font color="#000000">Software Engineer at Red Hat Czech</font></i></font></span></font></i></div><div><font style="font-family:arial,sans-serif;font-size:12.8px" color="#000000"><i>Social</i>:</font><font style="font-family:arial,sans-serif;font-size:12.8px"><font color="#888888"> </font><a href="https://www.linkedin.com/in/iurygregory" target="_blank"><font color="#0b5394">https://www.linkedin.com/in/iurygregory</font></a></font></div><div><i style="color:rgb(136,136,136);background-color:transparent;font-size:13px"><font color="#500050"><span style="color:rgb(0,0,0)">E-mail: </span> </font><a href="mailto:iurygregory@gmail.com" style="color:rgb(0,84,136)" target="_blank">iurygregory@gmail.com</a></i></div></div></div></div></font></span></div></div></div></div></div></div></div></div></div></div>