<html><body><p>Thanks Mark!  I have updated the RefStack test instruction  <a href="https://wiki.openstack.org/wiki/Interop_Challenge#RefStack_Testing_and_Results_Upload">https://wiki.openstack.org/wiki/Interop_Challenge#RefStack_Testing_and_Results_Upload</a>  .<br><br>Catherine Diep<br><font size="2" color="#800080">----- Forwarded by Catherine Cuong Diep/San Jose/IBM</font><font size="2" color="#800080"> on 09/07/2016 04:05 PM</font><font size="2" color="#800080"> -----</font><br><br><font size="2" color="#5F5F5F">From:        </font><font size="2">Mark Voelker <mvoelker@vmware.com></font><br><font size="2" color="#5F5F5F">To:        </font><font size="2">Catherine Cuong Diep/San Jose/IBM@IBMUS</font><br><font size="2" color="#5F5F5F">Cc:        </font><font size="2">"defcore-committee@lists.openstack.org" <defcore-committee@lists.openstack.org></font><br><font size="2" color="#5F5F5F">Date:        </font><font size="2">09/07/2016 01:19 PM</font><br><font size="2" color="#5F5F5F">Subject:        </font><font size="2">Re: [OpenStack-DefCore] [interop-challenge] VIO 2.5 Test Result Report</font><br><hr width="100%" size="2" align="left" noshade style="color:#8091A5; "><br><br><br><tt>FYI for those not watching IRC, Catherine and I just had a quick chat about this (thanks Catherine):<br><br></tt><tt><a href="http://eavesdrop.openstack.org/irclogs/%23openstack-defcore/%23openstack-defcore.2016-09-07.log.html#t2016-09-07T19:33:42">http://eavesdrop.openstack.org/irclogs/%23openstack-defcore/%23openstack-defcore.2016-09-07.log.html#t2016-09-07T19:33:42</a></tt><tt><br><br>I’ll defer to the interop challenge organizers on whether or not they’d prefer to have admin credentials removed before running refstack for purposes of the interop challenge--I don’t have much of a preference and will probably be running RefStack again in the near future anyway.  However I’d suggest that if the decision is that not putting admin credentials in the tempest config would make things easier to compare, it would be good to document that before a lot of other folks start running tests and submitting results.<br><br>At Your Service,<br><br>Mark T. Voelker<br><br><br><br>> On Sep 7, 2016, at 3:30 PM, Mark Voelker <mvoelker@vmware.com> wrote:<br>> <br>> Hmm, that particular tempest run might have had admin credentials in the config (that particular result is from earlier this summer).  I was planning to do a new run this week or next anyway to take care of a couple of extraneous failures for tests that just became required in 2016.08, so I’ll double check then.<br>> <br>> At Your Service,<br>> <br>> Mark T. Voelker<br>> OpenStack Architect<br>> <br>> <br>> <br>>> On Sep 7, 2016, at 3:12 PM, Catherine Cuong Diep <cdiep@us.ibm.com> wrote:<br>>> <br>>> Hi Mark,<br>>> <br>>> The RefStack result [1] in this result set shows 1187 pass tests. Just want to confirm whether this RefStack test result was run with admin credential. Thanks for sharing the data!<br>>> <br>>> [1] </tt><tt><a href="https://refstack.openstack.org/#/results/fc80592b-4503-481c-8aa6-49d414961f2d">https://refstack.openstack.org/#/results/fc80592b-4503-481c-8aa6-49d414961f2d</a></tt><tt><br>>> <br>>> Catherine Diep<br>>> ----- Forwarded by Catherine Cuong Diep/San Jose/IBM on 09/07/2016 12:02 PM -----<br>>> <br>>> From:  Mark Voelker <mvoelker@vmware.com><br>>> To:  "defcore-committee@lists.openstack.org" <defcore-committee@lists.openstack.org><br>>> Date:  09/07/2016 11:32 AM<br>>> Subject:  [OpenStack-DefCore] [interop-challenge] VIO 2.5 Test Result Report<br>>> <br>>> <br>>> <br>>> <br>>> Hi Tong et al,<br>>> <br>>> Attached are results for VIO 2.5.  Note that Tong and I discussed the issues that we found on IRC and he has a patch up here that could use your reviews to make the workload code more portable:<br>>> <br>>> </tt><tt><a href="https://review.openstack.org/#/c/366784">https://review.openstack.org/#/c/366784</a></tt><tt><br>>> <br>>> I’ve documented the problems in these results anyway since I think it’ll be useful learning coming out of the challenge.  To summarize: if you are concerned about workload portability, best practice for your workload code should be to either parameterize names for things like NICs and block devices or ideally to discover them.  FWIW, both of these issues are quite trivial to work around in the workloads we’re testing with.<br>>> <br>>> At Your Service,<br>>> <br>>> Mark T. Voelker<br>>> <br>>> [attachment "vio_2.5_results.txt" deleted by Catherine Cuong Diep/San Jose/IBM] [attachment "ATT00001.txt" deleted by Catherine Cuong Diep/San Jose/IBM] _______________________________________________<br>>> Defcore-committee mailing list<br>>> Defcore-committee@lists.openstack.org<br>>> </tt><tt><a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/defcore-committee">http://lists.openstack.org/cgi-bin/mailman/listinfo/defcore-committee</a></tt><tt><br>> <br>> _______________________________________________<br>> Defcore-committee mailing list<br>> Defcore-committee@lists.openstack.org<br>> </tt><tt><a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/defcore-committee">http://lists.openstack.org/cgi-bin/mailman/listinfo/defcore-committee</a></tt><tt><br><br></tt><br><BR>
</body></html>