<div dir="ltr"><div dir="ltr"><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Tue, Sep 3, 2019 at 10:43 AM Gabriele Cerami <<a href="mailto:gcerami@redhat.com">gcerami@redhat.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Hi,<br>
<br>
this weekend, and outage caused <a href="http://trunk.rdoprojects.org" rel="noreferrer" target="_blank">trunk.rdoprojects.org</a> servers to become<br>
unreachable.<br>
As main effect, all tripleo ci jobs were unable to download and install<br>
dlrn repositories for the needed hashes and failed.<br>
<br>
The outage has been resolved yesterday but there's a problem with DNS<br>
propagation and we're still seeing DNS queries returning incorrect IPs,<br>
and as a result, jobs are not consistently passing.<br>
You may see problems dowloading repos, building changes, installing<br>
packages<br>
<br>
We would advise to limit the rechecks until we are sure the DNS results<br>
are stable.<br>
<br>
Thanks.</blockquote><div><br></div><div>Just adding a little more clarity.  You can see the pass rate of TripleO jobs start to drop on 8/31 and recover on 9/3 in the screenshot.   We have not yet fully recovered quite yet, we will update this thread when that is the case.</div><div><br></div><div>Thanks!</div><div><br></div><div><br></div><div> </div></div></div>