<div dir="ltr">George, <div><br></div><div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><span style="font-size:12.8px">(with reduction of load to normal levels),</span></blockquote><div>Probably it's not the best idea just to run samples, they are called samples for the reason  ;) </div><div><br></div><div>Basically you can run same Rally task two times before/after upgrade and compare results (Rally has sort of trends support) </div><div>Usually what I have heard from Ops guys is next: </div><div><ul><li>Run Rally on periodic basis </li><li>Convert data Rally DB -> ElasticSearch</li><li>Build Kibana/Grafana on top </li></ul><div><br></div></div><div>FYI I am working on making above scenario work out of the box. </div><div><br></div><div>-- </div><div><br></div><div><div>So can you provide some more details on what you are looking for? What's missing? </div></div><div><br></div><div><br></div><div>Best regards,</div><div>Boris Pavlovic</div></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Tue, Aug 29, 2017 at 2:24 AM, George Shuklin <span dir="ltr"><<a href="mailto:george.shuklin@gmail.com" target="_blank">george.shuklin@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Hello everyone.<br>
<br>
Does someone do regression testing before performing upgrade (within same major version)? How do you do this? Do you know any tools for such tests? I started to research this area, and I see three openstack-specific tools: rally (with reduction of load to normal levels), tempest (can it be used by operators?) and granade.<br>
<br>
If you use any of tools, how do you feel about them? Are they worth time spent?<br>
<br>
<br>
Thanks!<br>
<br>
<br>
______________________________<wbr>_________________<br>
OpenStack-operators mailing list<br>
<a href="mailto:OpenStack-operators@lists.openstack.org" target="_blank">OpenStack-operators@lists.open<wbr>stack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-operators" rel="noreferrer" target="_blank">http://lists.openstack.org/cgi<wbr>-bin/mailman/listinfo/openstac<wbr>k-operators</a><br>
</blockquote></div><br></div>