<div dir="ltr">Hi,<div>thank you for your advice.</div><div>Created a PS for logsender [1]. Hope it helps.</div><div><br></div><div>Dan</div><div><br></div><div>[1] <a href="https://review.opendev.org/c/openstack/ci-log-processing/+/843929">https://review.opendev.org/c/openstack/ci-log-processing/+/843929 </a></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Mon, May 30, 2022 at 2:39 PM Jeremy Stanley <<a href="mailto:fungi@yuggoth.org">fungi@yuggoth.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On 2022-05-30 14:02:15 +0200 (+0200), Daniel Pawlik wrote:<br>
> In the last few days there is increase amount of CI jobs that are<br>
> running on Zuul CI gates, where later logs are pushed into the<br>
> Opensearch cluster [1]. The current cluster storage is almost<br>
> full, which causes one of the actions to be performed: temporarily<br>
> changing log retention (currently it is set to 14 days) or<br>
> removing temporary non-essential logs [2]. I recommend removing<br>
> not important logs, so if projects leaders could check whether<br>
> entries related to the project are needed, it would be really<br>
> helpful.<br>
[...]<br>
<br>
For the old system, we filtered out all debug level log lines, only<br>
importing lines at info level or greater. If you're not doing that<br>
yet on the new system, it would probably help free up a lot of<br>
space.<br>
<br>
We tried to maintain around 7-10 days of retention, so lowering the<br>
retention from 14 days isn't really a regression over what we used<br>
to provide.<br>
-- <br>
Jeremy Stanley<br>
</blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr" style="color:rgb(136,136,136)"><div dir="ltr"><div dir="ltr">Regards,</div><div dir="ltr">Daniel Pawlik<br><table border="0"><tbody><tr></tr></tbody></table></div></div></div></div></div></div></div></div>