<div dir="ltr">Hi,<div>Any update on this issue?</div><div>Zuul-server has been stuck for almost 4 days "Looking for lost builds".</div><div>Now even the restart job won't work... it keeps printing dots "...."</div><div><br><div>sudo service zuul restart</div><div> * Restarting Zuul zuul</div><div> ... waiting ....</div></div><div><br></div><div>Meanwhile we setup another job that installs devstack and our storage backend and runs our functionality tests (which is what it should actually do, not just run tempest), but i couldn't find how to get the changeset being tested into devstack so that we actually test the new code, not just existing merged code.</div><div><br></div><div>Thanks,</div><div><br></div><div>Eduard</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Jan 22, 2015 at 10:34 AM, Silvan Kaiser <span dir="ltr"><<a href="mailto:silvan@quobyte.com" target="_blank">silvan@quobyte.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Hi!<div><div>Same issue here. New zuul setup from about two weeks ago. Ever since zuul stops shortly before 0400h local time with the same behaviour that you describe, Eduard.</div><div>Best</div><div>Silvan</div><div><br></div></div></div><div class="gmail_extra"><br><div class="gmail_quote">2015-01-22 8:48 GMT+01:00 Eduard Matei <span dir="ltr"><<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Hi Ramy,<div>No such error in my logs.</div><div>Zuul log is frozen, debug log is full of "Looking for lost builds"...</div><div><br></div><div>Strace shows 1 zuul-server process waiting... ("pause") and 2nd zuul-server process waiting to read from a pipe ("read(3").</div><div>Also, it shows 1st process with two connections established to <a href="http://review.openstack.org:29418" target="_blank">review.openstack.org:29418</a> and second process with several connections established to localhost:4730.</div><div><br></div><div>So far the only solution is to periodically restart it.</div><div>Still looking into it.</div><div><br></div><div>Eduard</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Jan 21, 2015 at 8:52 PM, Asselin, Ramy <span dir="ltr"><<a href="mailto:ramy.asselin@hp.com" target="_blank">ramy.asselin@hp.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">





<div lang="EN-US" link="blue" vlink="purple">
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Interesting I seem to be hitting the same issue now.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">I have this in my zuul.log<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">2015-01-21 08:48:05,272 ERROR zuul.Gerrit: Cannot get references from <a href="https://review.openstack.org/p/openstack/cinder/info/refs?service=git-upload-pack" target="_blank">https://review.openstack.org/p/openstack/cinder/info/refs?service=git-upload-pack</a><u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">2015-01-21 08:48:05,273 ERROR zuul.Gerrit: Exception looking for ref refs/heads/master<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Traceback (most recent call last):<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/local/lib/python2.7/dist-packages/zuul/trigger/gerrit.py", line 189, in getRefSha<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    refs = self._getInfoRefs(project)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/local/lib/python2.7/dist-packages/zuul/trigger/gerrit.py", line 146, in _getInfoRefs<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    data = urllib2.urlopen(url).read()<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/lib/python2.7/urllib2.py", line 126, in urlopen<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    return _opener.open(url, data, timeout)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/lib/python2.7/urllib2.py", line 400, in open<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    response = self._open(req, data)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/lib/python2.7/urllib2.py", line 418, in _open<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    '_open', req)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/lib/python2.7/urllib2.py", line 378, in _call_chain<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    result = func(*args)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/lib/python2.7/urllib2.py", line 1215, in https_open<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    return self.do_open(httplib.HTTPSConnection, req)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">  File "/usr/lib/python2.7/urllib2.py", line 1177, in do_open<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">    raise URLError(err)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">URLError: <urlopen error [Errno 101] Network is unreachable><u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">I restarted zuul. Will let you know if that works.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<div>
<div style="border:none;border-top:solid #e1e1e1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Asselin, Ramy
<br>
<b>Sent:</b> Tuesday, January 20, 2015 4:22 PM<br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI<u></u><u></u></span></p>
</div>
</div>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">HI Eduard,<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Not sure. Perhaps you can paste the entire log file?<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><a href="http://paste.openstack.org/" target="_blank">http://paste.openstack.org/</a><u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">/var/log/zuul/debug.log<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">/var/log/zuul/zuul.log<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">You can also ask on IRC Freenode #openstack-infra.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Ramy<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Eduard Matei [<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">mailto:eduard.matei@cloudfounders.com</a>]
<br>
<b>Sent:</b> Monday, January 19, 2015 1:51 AM<br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI<u></u><u></u></span></p>
<p class="MsoNormal"><u></u> <u></u></p>
<div>
<p class="MsoNormal">Hi Ramy,<u></u><u></u></p>
<div>
<p class="MsoNormal">That didn't fix it, zuul-server still gets stuck Looking for lost builds, but zuul user can read gerrit event-stream.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Any other ideas?<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
<div>
<p class="MsoNormal">On Mon, Jan 19, 2015 at 9:09 AM, Eduard Matei <<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Hi Ramy, indeed user zuul could not read the event-stream (permission denied). <u></u><u></u></p>
<div>
<p class="MsoNormal">The question is then how it could start zuul-server and read some events?<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Anyway, i copied over .ssh from user jenkins, and now user zuul can run that command.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I restarted zuul-server and will keep an eye on it.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 16, 2015 at 8:32 PM, Asselin, Ramy <<a href="mailto:ramy.asselin@hp.com" target="_blank">ramy.asselin@hp.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Hi Eduard,</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Looking at the zuul code, it seems that is just a periodic task:
<a href="https://github.com/openstack-infra/zuul/blob/master/zuul/launcher/gearman.py#L50" target="_blank">
https://github.com/openstack-infra/zuul/blob/master/zuul/launcher/gearman.py#L50</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">So the issue is not likely those log messages, but rather the lack of other log messages.
</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">It seems somehow zuul lost its connection to gerrit even stream…those are the obvious log messages
 that are missing. </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">And without that, no jobs will trigger a run, so I’d look there.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Zuul Manual is here:
<a href="http://ci.openstack.org/zuul/" target="_blank">http://ci.openstack.org/zuul/</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Zuul conf files is documented here:
<a href="http://ci.openstack.org/zuul/zuul.html#zuul-conf" target="_blank">http://ci.openstack.org/zuul/zuul.html#zuul-conf</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">And the gerrit configurations are here:
<a href="http://ci.openstack.org/zuul/zuul.html#gerrit" target="_blank">http://ci.openstack.org/zuul/zuul.html#gerrit</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Double check you can manually read the event stream as the zuul user (sudo su - zuul) using those settings
 and this step:</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><a href="http://ci.openstack.org/third_party.html#reading-the-event-stream" target="_blank">http://ci.openstack.org/third_party.html#reading-the-event-stream</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Ramy</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Eduard Matei [mailto:<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>]
<br>
<b>Sent:</b> Friday, January 16, 2015 6:57 AM</span><u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI<u></u><u></u></p>
</div>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">Hi Punith,<u></u><u></u></p>
<div>
<p class="MsoNormal">That's the whole log :) Not a lot happening after restart, just default initialization.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Zuul-merger is not restarted. <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Layout.yaml is default.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Gearman plugin tested in Jenkins, reports success.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I disabled now the restart job to see how long it will "Look for lost builds".<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Have a nice weekend,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 16, 2015 at 1:15 PM, Punith S <<a href="mailto:punith.s@cloudbyte.com" target="_blank">punith.s@cloudbyte.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<p class="MsoNormal"> Hi eduard,<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">can you post the whole zuul.log or debug.log after the zuul and zuul-merger restart along with your layout.yaml<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">did you test the connection of gearman pulgin in jenkins ?<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">thanks<u></u><u></u></p>
</div>
</div>
<div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 16, 2015 at 4:20 PM, Eduard Matei <<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Hi Ramy,<u></u><u></u></p>
<div>
<p class="MsoNormal">Still couldn't get my custom code to execute between installing devstack and starting tests... i'll try with some custom scripts and skip devstack-* scripts.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Meanwhile i see another issue:<u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal">2015-01-16 11:02:26,283 DEBUG zuul.IndependentPipelineManager: Finished queue processor: patch (changed: False)<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:02:26,283 DEBUG zuul.Scheduler: Run handler sleeping<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:06:06,873 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:11:06,873 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:16:06,874 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:21:06,874 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:26:06,875 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:31:06,875 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:36:06,876 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:41:06,876 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-16 11:46:06,877 DEBUG zuul.Gearman: Looking for lost builds<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Zuul is stuck in "Looking for lost builds" and it misses comments so it doesn't trigger jobs on patches.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Any idea how to fix this? (other than restart it every 30 mins, in which case it misses the results of running jobs so it doesn't post the results).<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 16, 2015 at 1:43 AM, Asselin, Ramy <<a href="mailto:ramy.asselin@hp.com" target="_blank">ramy.asselin@hp.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Hi Eduard,</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Glad you’re making progress.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">$BASE/new/devstack/ is available at the time pre_test_hook is called, so you should be able to make
 all the changes you need there. </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">The sample shows how to configure the driver using local.conf devstack hooks.
</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">See here for more details: [1] [2]</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Regarding test, you can do both.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Cinder requires you run tempest.api.volume[3]</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">And you can setup a 2^nd job that runs your internal functional tests as well.
</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Ramy</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">[1]
<a href="http://docs.openstack.org/developer/devstack/configuration.html" target="_blank">
http://docs.openstack.org/developer/devstack/configuration.html</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">[2]
<a href="http://docs.openstack.org/developer/devstack/plugins.html" target="_blank">
http://docs.openstack.org/developer/devstack/plugins.html</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">[3]
<a href="https://wiki.openstack.org/wiki/Cinder/tested-3rdParty-drivers#Third_Party_CI_Requirements" target="_blank">
https://wiki.openstack.org/wiki/Cinder/tested-3rdParty-drivers#Third_Party_CI_Requirements</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Eduard Matei [mailto:<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>]
<br>
<b>Sent:</b> Thursday, January 15, 2015 4:57 AM</span><u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI<u></u><u></u></p>
</div>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">Hi Ramy,<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">The issue with disconnect/abort no longer happens, so i guess it was some issues with networking.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Regarding the ssh keys i finally used Jenkins Configuration Provider Plugin to inject ssh keys as a pre-build step, then i added a manual execution step to scp the logs to the server,
 so now everything appears to be working.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Now for the REAL tests:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">looking at <a href="https://github.com/rasselin/os-ext-testing-data/blob/master/etc/jenkins_jobs/config/dsvm-cinder-driver.yaml.sample#L7" target="_blank">https://github.com/rasselin/os-ext-testing-data/blob/master/etc/jenkins_jobs/config/dsvm-cinder-driver.yaml.sample#L7</a>
 it seems i need to put the code to install my "third party libs" in the pre_test_hook which appears in devstack-vm-gate-wrap.sh to be executing BEFORE installing devstack. The problem is we need our "third party libs" to be installed (actually configured)
 AFTER installing devstack, since they install on top of devstack and do some configuration on devstack.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">How could i integrate my code into devstack-vm-gate-wrap.sh so that my libs are installed after devstack but before running tempest.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Also, as a side question, do i need to run all the test (since they already run in dsvm-tempest-full) or can i run only our internal functionality tests? (in this case i don't need
 devstack-vm-gate-wrap.sh and i can run custom code directly from jenkins job).<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Wed, Jan 14, 2015 at 6:49 PM, Asselin, Ramy <<a href="mailto:ramy.asselin@hp.com" target="_blank">ramy.asselin@hp.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Double check your ssh public/private key, authorized keys configuration in the slave & log server.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">They should all match up. No passwords should be requested.
</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Try doing a manual scp as Jenkins user from the slave to the log server (as Jenkins user there too).</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Regarding manually setting up the publisher, I don’t know. Jenkins Job Builder configuration I referenced
 below should work correctly.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Ramy</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Eduard Matei [mailto:<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>]
<br>
<b>Sent:</b> Wednesday, January 14, 2015 6:56 AM</span><u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI<u></u><u></u></p>
</div>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">Hi Ramy,<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I think i managed to setup SCP plugin and updated zuul.conf but it only uploads the console.html not the logs<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I have an SCP site pointing to the apache server and the root location is /srv/static, and in the dsvm job manually added a post-build step, Publish Artifacts to SCP Repository,
 with source: logs/** and destination logs/${LOG_PATH} and also checked Copy Console Log.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">The destination path is created, but it only contains console.html.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I tried to manually scp the directory, but the jenkins user in the devstack_slave asks for a password when trying to ssh to apache server.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Wed, Jan 14, 2015 at 10:40 AM, Eduard Matei <<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Thanks Ramy, i'll try to set it up manually.<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Meanwhile i found another problem: jobs are failing because of error or are being aborted.<u></u><u></u></p>
</div>
<div>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="color:#333333">FATAL: java.io.IOException: Unexpected termination of the channel</span><u></u><u></u></pre>
<pre><span style="color:#333333"><a href="http://stacktrace.jenkins-ci.org/search?query=hudson.remoting.RequestAbortedException" target="_blank"><span style="text-decoration:none">hudson.remoting.RequestAbortedException</span></a>: java.io.IOException: Unexpected termination of the channel</span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="color:#333333"> </span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="color:#333333">Is this related to another warning i got:</span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="font-family:"Arial",sans-serif;color:#333333">WARNING: devstack run took > 15 minutes, this is a very slow node.</span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="color:#333333"> </span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="font-family:"Arial",sans-serif;color:#333333">Is there a timeout for how long a job is allowed to run? </span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="font-family:"Arial",sans-serif;color:#333333">Most jobs take between 40 and 60 minutes, some are able to run successfully, some are aborted or get this error.</span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="color:#333333"> </span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="font-family:"Arial",sans-serif;color:#333333">Hardware is Xeon E3-1220 Quad core 3.10 Ghz, 32 GB RAM and 3x 1TB sata HDD.</span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="font-family:"Arial",sans-serif;color:#333333">Devstack slaves are configured as m1.large (4 vCPUs, 8 GB vRAM and 80 GB vHDD).</span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="color:#333333"> </span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="font-family:"Arial",sans-serif;color:#333333">Thanks,</span><u></u><u></u></pre>
<pre style="white-space:pre-wrap;word-wrap:break-word"><span style="font-family:"Arial",sans-serif;color:#333333">Eduard</span><u></u><u></u></pre>
</div>
</div>
<div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Tue, Jan 13, 2015 at 5:34 PM, Asselin, Ramy <<a href="mailto:ramy.asselin@hp.com" target="_blank">ramy.asselin@hp.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Hi Eduard,</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Apache logs server address is set here (should probably add some comment/doc for that)</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><a href="https://github.com/rasselin/os-ext-testing-data/blob/master/vars.sh.sample#L10" target="_blank">https://github.com/rasselin/os-ext-testing-data/blob/master/vars.sh.sample#L10</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Jenkins will get configured here:
<a href="https://github.com/rasselin/os-ext-testing/blob/master/puppet/modules/os_ext_testing/templates/jenkins/be.certipost.hudson.plugin.SCPRepositoryPublisher.xml.erb" target="_blank">
https://github.com/rasselin/os-ext-testing/blob/master/puppet/modules/os_ext_testing/templates/jenkins/be.certipost.hudson.plugin.SCPRepositoryPublisher.xml.erb</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Note that you need to restart Jenkins for those changes to take effect. After it’s set, you can use
 the Jenkins UI to ‘test’ the connection. </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Jenkins Job Builder publishers are here:
<a href="https://github.com/rasselin/os-ext-testing/blob/master/puppet/modules/os_ext_testing/templates/jenkins_job_builder/config/macros.yaml.erb#L110" target="_blank">
https://github.com/rasselin/os-ext-testing/blob/master/puppet/modules/os_ext_testing/templates/jenkins_job_builder/config/macros.yaml.erb#L110</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Use the publishers as shown here:
</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"><a href="https://github.com/rasselin/os-ext-testing-data/blob/master/etc/jenkins_jobs/config/dsvm-cinder-driver.yaml.sample#L7" target="_blank">https://github.com/rasselin/os-ext-testing-data/blob/master/etc/jenkins_jobs/config/dsvm-cinder-driver.yaml.sample#L7</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Zuul will then use this url when commenting in gerrit:
<a href="https://github.com/rasselin/os-ext-testing/blob/master/puppet/modules/os_ext_testing/manifests/master.pp#L18" target="_blank">
https://github.com/rasselin/os-ext-testing/blob/master/puppet/modules/os_ext_testing/manifests/master.pp#L18</a></span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Ramy</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Eduard Matei [mailto:<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>]
<br>
<b>Sent:</b> Tuesday, January 13, 2015 2:31 AM</span><u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI<u></u><u></u></p>
</div>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">Thanks Ramy, i got it now working (the NODEPOOL_SSH_KEY was not set before starting first time nodepool, so template got incorrect key)<u></u><u></u></p>
<div>
<p class="MsoNormal">Next question: where do i configure the apache logs server address? I have a separate vm with jenkins account and running apache2 exposing /srv/static/logs, but where do i enter
 its ip address ? (in jenkins, nodepool or... )<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Mon, Jan 12, 2015 at 6:09 PM, Asselin, Ramy <<a href="mailto:ramy.asselin@hp.com" target="_blank">ramy.asselin@hp.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">You are correct to run nodepoold as nodepool user.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">I didn’t see any issues…</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Could you double check the public keys listed in .ssh/authorized_keys in the template for Ubuntu and
 Jenkins users match $NODEPOOL_SSH_KEY?</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Ramy</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Eduard Matei [mailto:<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>]
<br>
<b>Sent:</b> Monday, January 12, 2015 5:30 AM</span><u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI<u></u><u></u></p>
</div>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">Hi, <u></u><u></u></p>
<div>
<p class="MsoNormal">Regarding the last issue, i fixed it by logging in and manually "pip install docutils". Image was created successfully.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Now the problem is that nodepool is not able to login into instances created from that image.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I have NODEPOOL_SSH_KEY exported in the screen where nodepool is running, and also i am able to login to the instance from user nodepool, but nodepoold gives error:<u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,095 DEBUG paramiko.transport: Switch to new keys ...<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,109 DEBUG paramiko.transport: Trying key c03fbf64440cd0c2ecbc07ce4ed59804 from /home/nodepool/.ssh/id_rsa<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,135 DEBUG paramiko.transport: userauth is OK<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,162 INFO paramiko.transport: Authentication (publickey) failed.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,185 DEBUG paramiko.transport: Trying discovered key c03fbf64440cd0c2ecbc07ce4ed59804 in /home/nodepool/.ssh/id_rsa<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,187 DEBUG paramiko.transport: userauth is OK<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">^C2015-01-12 14:19:03,210 INFO paramiko.transport: Authentication (publickey) failed.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,253 DEBUG paramiko.transport: EOF in transport thread<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 14:19:03,254 INFO nodepool.utils: Password auth exception. Try number 4...<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal">echo $NODEPOOL_SSH_KEY<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">AAAAB3NzaC1yc2EAAAADAQABAAABAQC9gP6qui1fmHrj02p6OGvnz7kMTJ2rOC3SBYP/Ij/6yz+SU8rL5rqL6jqT30xzy9t1q0zsdJCNB2jExD4xb+NFbaoGlvjF85m12eFqP4CQenxUOdYAepf5sjV2l8WAO3ylspQ78ipLKec98NeKQwLrHB+xon6QfAHXr6ZJ9NRZbmWw/OdpOgAG9Cab+ELTmkfEYgQz01cZE22xEAMvPXz57KlWPvxtE7YwYWy180Yib97EftylsNkrchbSXCwiqgKUf04qWhTgNrVuRJ9mytil6S82VNDxHzTzeCCxY412CV6dDJNLzJItpf/CXQelj/6wJs1GgFl5GWJnqortMR2v<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal"> cat /home/nodepool/.ssh/id_rsa.pub <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC9gP6qui1fmHrj02p6OGvnz7kMTJ2rOC3SBYP/Ij/6yz+SU8rL5rqL6jqT30xzy9t1q0zsdJCNB2jExD4xb+NFbaoGlvjF85m12eFqP4CQenxUOdYAepf5sjV2l8WAO3ylspQ78ipLKec98NeKQwLrHB+xon6QfAHXr6ZJ9NRZbmWw/OdpOgAG9Cab+ELTmkfEYgQz01cZE22xEAMvPXz57KlWPvxtE7YwYWy180Yib97EftylsNkrchbSXCwiqgKUf04qWhTgNrVuRJ9mytil6S82VNDxHzTzeCCxY412CV6dDJNLzJItpf/CXQelj/6wJs1GgFl5GWJnqortMR2v
 jenkins@jenkins-cinderci<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal">ssh
<a href="mailto:ubuntu@10.100.128.136" target="_blank">ubuntu@10.100.128.136</a> -v<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">OpenSSH_6.6.1, OpenSSL 1.0.1f 6 Jan 2014<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: Reading configuration data /home/nodepool/.ssh/config<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: Reading configuration data /etc/ssh/ssh_config<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: /etc/ssh/ssh_config line 19: Applying options for *<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: Connecting to 10.100.128.136 [10.100.128.136] port 22.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: Connection established.<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal">....<u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal">debug1: Offering RSA public key: /home/nodepool/.ssh/id_rsa<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: Server accepts key: pkalg ssh-rsa blen 279<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: key_parse_private2: missing begin marker<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: read PEM private key done: type RSA<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">debug1: Authentication succeeded (publickey).<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Authenticated to 10.100.128.136 ([10.100.128.136]:22).<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal">...<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I was able to login into the "template" instance and also am able to login into the "slave" instances.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Also nodepoold was able to login into "template" instance but now it fails loging in into "slave".<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I tried running it as either nodepol or jenkins users, same result.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Mon, Jan 12, 2015 at 2:09 PM, Eduard Matei <<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Hi,<u></u><u></u></p>
<div>
<p class="MsoNormal">Back with another error during image creation with nodepool:<u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal">2015-01-12 13:05:17,775 INFO nodepool.image.build.local_01.d-p-c:   Downloading python-daemon-2.0.1.tar.gz (62kB)<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,022 INFO nodepool.image.build.local_01.d-p-c:     Traceback (most recent call last):<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,023 INFO nodepool.image.build.local_01.d-p-c:       File "<string>", line 20, in <module><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,023 INFO nodepool.image.build.local_01.d-p-c:       File "/tmp/pip-build-r6RJKq/python-daemon/setup.py", line 27, in <module><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,024 INFO nodepool.image.build.local_01.d-p-c:         import version<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,024 INFO nodepool.image.build.local_01.d-p-c:       File "version.py", line 51, in <module><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,024 INFO nodepool.image.build.local_01.d-p-c:         import docutils.core<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,024 INFO nodepool.image.build.local_01.d-p-c:     ImportError: No module named docutils.core<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:     Complete output from command python setup.py egg_info:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:     Traceback (most recent call last):<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:       File "<string>", line 20, in <module><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:       File "/tmp/pip-build-r6RJKq/python-daemon/setup.py", line 27, in <module><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,025 INFO nodepool.image.build.local_01.d-p-c:         import version<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:       File "version.py", line 51, in <module><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:         import docutils.core<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:     ImportError: No module named docutils.core<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,026 INFO nodepool.image.build.local_01.d-p-c:     ----------------------------------------<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2015-01-12 13:05:18,054 INFO nodepool.image.build.local_01.d-p-c:     Command "python setup.py egg_info" failed with error code 1 in /tmp/pip-build-r6RJKq/python-daemon<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Python-daemon pip package fails to install due to ImportError.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Any ideas how to fix this?<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
<div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 9, 2015 at 10:00 PM, Patrick East <<a href="mailto:patrick.east@purestorage.com" target="_blank">patrick.east@purestorage.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Thanks for the links!<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">After digging around in my configs I figured out the issue, I had a typo in my JENKINS_SSH_PUBLIC_KEY_NO_WHITESPACE (copy pasta cut off a character...). But I managed to put the
 right one in the key for nova to use so it was able to log in to set up the instance, but didn't end up with the right thing in the NODEPOOL_SSH_KEY variable.<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"><span style="color:#888888"><br clear="all">
</span><u></u><u></u></p>
<div>
<div>
<div>
<p class="MsoNormal"><span style="color:#888888">-Patrick</span><u></u><u></u></p>
</div>
</div>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 9, 2015 at 9:25 AM, Asselin, Ramy <<a href="mailto:ramy.asselin@hp.com" target="_blank">ramy.asselin@hp.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Regarding SSH Keys and logging into nodes, you need to set the NODEPOOL_SSH_KEY variable</span><u></u><u></u></p>
<p><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">1.</span><span style="font-size:7.0pt;color:#1f497d">      
</span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">I documented my notes here
<a href="https://github.com/rasselin/os-ext-testing-data/blob/master/etc/nodepool/nodepool.yaml.erb.sample#L48" target="_blank">
https://github.com/rasselin/os-ext-testing-data/blob/master/etc/nodepool/nodepool.yaml.erb.sample#L48</a></span><u></u><u></u></p>
<p><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">2.</span><span style="font-size:7.0pt;color:#1f497d">      
</span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">This is also documented ‘officially’ here:
<a href="https://github.com/openstack-infra/nodepool/blob/master/README.rst" target="_blank">
https://github.com/openstack-infra/nodepool/blob/master/README.rst</a></span><u></u><u></u></p>
<p><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">3.</span><span style="font-size:7.0pt;color:#1f497d">      
</span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Also, I had an issue getting puppet to do the right thing with keys, so it gets forced here:
<a href="https://github.com/rasselin/os-ext-testing/blob/master/puppet/install_master.sh#L197" target="_blank">
https://github.com/rasselin/os-ext-testing/blob/master/puppet/install_master.sh#L197</a></span><u></u><u></u></p>
<p style="margin-left:1.0in"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d">Ramy</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> Eduard Matei [mailto:<a href="mailto:eduard.matei@cloudfounders.com" target="_blank">eduard.matei@cloudfounders.com</a>]
<br>
<b>Sent:</b> Friday, January 09, 2015 8:58 AM<br>
<b>To:</b> OpenStack Development Mailing List (not for usage questions)<br>
<b>Subject:</b> Re: [openstack-dev] [OpenStack-Infra] [ThirdPartyCI] Need help setting up CI</span><u></u><u></u></p>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">Thanks Patrick,<u></u><u></u></p>
<div>
<div>
<div>
<p class="MsoNormal">Indeed it seems the cloud provider was setting up vms on a bridge whose eth was DOWN so the vms could not connect to the outside world so the prepare script was failing. <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Looking into that.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Eduard<u></u><u></u></p>
</div>
</div>
</div>
</div>
<div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 9, 2015 at 6:44 PM, Patrick East <<a href="mailto:patrick.east@purestorage.com" target="_blank">patrick.east@purestorage.com</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Ah yea, sorry, should have specified; I am having it run the prepare_node_devstack.sh from the infra repo. I see it adding the same public key to the user specified in my nodepool.yaml.
 The strange part (and I need to double check.. feel like it can't be right) is that on my master node the nodepool users id_rsa changed at some point in the process.<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"><span style="color:#888888"><br clear="all">
</span><u></u><u></u></p>
<div>
<div>
<div>
<p class="MsoNormal"><span style="color:#888888">-Patrick</span><u></u><u></u></p>
</div>
</div>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">On Fri, Jan 9, 2015 at 8:38 AM, Jeremy Stanley <<a href="mailto:fungi@yuggoth.org" target="_blank">fungi@yuggoth.org</a>> wrote:<u></u><u></u></p>
<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<p class="MsoNormal">On 2015-01-09 08:28:39 -0800 (-0800), Patrick East wrote:<br>
[...]<br>
> On a related note, I am having issues with the ssh keys. Nodepool<br>
> is able to log in to the node to set up the template and create an<br>
> image from it, but then fails to log in to a build node. Have you<br>
> run into any issues with that?<br>
<br>
Your image build needs to do _something_ to make SSH into the<br>
resulting nodes possible. We accomplish that by applying a puppet<br>
manifest which sets up an authorized_keys file for the account we<br>
want it to use, but there are countless ways you could go about it<br>
in your environment.<br>
<span style="color:#888888">--<br>
Jeremy Stanley</span><u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><br>
_______________________________________________<br>
OpenStack-dev mailing list<br>
<a href="mailto:OpenStack-dev@lists.openstack.org" target="_blank">OpenStack-dev@lists.openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</div>
</div>
</blockquote>
</div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
_______________________________________________<br>
OpenStack-dev mailing list<br>
<a href="mailto:OpenStack-dev@lists.openstack.org" target="_blank">OpenStack-dev@lists.openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
_______________________________________________<br>
OpenStack-dev mailing list<br>
<a href="mailto:OpenStack-dev@lists.openstack.org" target="_blank">OpenStack-dev@lists.openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
_______________________________________________<br>
OpenStack-dev mailing list<br>
<a href="mailto:OpenStack-dev@lists.openstack.org" target="_blank">OpenStack-dev@lists.openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">
OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">
OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">
OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">
OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">
OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
</div>
</div>
<div>
<div>
<p class="MsoNormal">regards,<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">punith s<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><a href="http://cloudbyte.com" target="_blank">cloudbyte.com</a><u></u><u></u></p>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">
OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a></span><u></u><u></u></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><u></u><u></u></pre>
</div>
<pre><span style="font-size:7.5pt"> </span><u></u><u></u></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><u></u><u></u></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><u></u><u></u></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><u></u><u></u></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">
OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><u></u><u></u></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<p class="MsoNormal">-- <u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a><u></u><u></u></span></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><span style="font-family:"Arial",sans-serif;color:black"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<pre><span style="font-size:7.5pt"><u></u> <u></u></span></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<p class="MsoNormal">-- <u></u><u></u></p>
<div>
<div>
<div>
<pre><b><span style="font-family:"Arial",sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif;color:black"><a href="http://www.cloudfounders.com/" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#0045a3">www.cloudfounders.com</span></a><u></u><u></u></span></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> | </span><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:black"><a href="mailto:eduard.matei@cloudfounders.com" target="_blank"><span style="color:#0045a3">eduard.matei@cloudfounders.com</span></a></span><span style="font-family:"Arial",sans-serif;color:black"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1f497d"> </span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<pre><span style="font-size:7.5pt"><u></u> <u></u></span></pre>
<div>
<pre><span style="font-size:13.5pt;font-family:"Arial",sans-serif;color:#500050"> </span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><b><span style="font-size:13.5pt;font-family:"Arial",sans-serif">CloudFounders, The Private Cloud Software Company</span></b><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:13.5pt;font-family:"Helvetica",sans-serif"> </span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Helvetica",sans-serif">Disclaimer:</span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
<div>
<pre><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span style="font-family:"Calibri",sans-serif;color:#1f497d"><br></span><span style="font-size:8.5pt;font-family:"Calibri",sans-serif;color:#1f497d">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span><span style="font-family:"Arial",sans-serif"><u></u><u></u></span></pre>
</div>
</div>
</div>
</div>
</div>
</div>

<br>__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
<br></blockquote></div><br><br clear="all"><div><br></div>-- <br><div><div dir="ltr"><pre style="white-space:pre-wrap;font-size:10px;word-wrap:break-word;margin-top:0px;margin-bottom:0px"><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><b><span lang="EN-US" style="font-size:10pt;font-family:Arial,sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b></div><div style="color:rgb(0,0,0);font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span style="font-size:13.5pt;font-family:Helvetica,sans-serif"><a href="http://www.cloudfounders.com/" style="color:rgb(17,85,204)" target="_blank"><span lang="EN-US" style="font-size:11pt;font-family:Calibri,sans-serif"><font color="#0045a3">www.cloudfounders.com</font></span></a><div style="display:inline-block;width:16px;min-height:16px"></div><div style="display:inline-block;width:16px;min-height:16px"></div></span><span lang="EN-US" style="font-size:11pt;font-family:Calibri,sans-serif"><font color="#1f497d"> | </font><a href="mailto:eduard.matei@cloudfounders.com" style="color:rgb(17,85,204)" target="_blank"><font color="#0045a3">eduard.matei@cloudfounders.com</font></a></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:11pt;font-family:Calibri,sans-serif;color:rgb(31,73,125)"><u></u> <u></u></span></div><br><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:13.5pt;font-family:Arial,sans-serif;color:rgb(80,0,80)"><u></u> <u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><b><span lang="EN-US" style="font-size:13.5pt;font-family:Arial,sans-serif">CloudFounders, The Private Cloud Software Company</span></b><span lang="EN-US" style="font-size:13.5pt;font-family:Arial,sans-serif"><u></u><u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:13.5pt;font-family:Helvetica,sans-serif"><u></u> <u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-family:Helvetica,sans-serif;font-size:11px">Disclaimer:<u></u><u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:8.5pt;font-family:Calibri,sans-serif;color:rgb(31,73,125)">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span lang="EN-US" style="font-family:Calibri,sans-serif;color:rgb(31,73,125)"><br><span style="font-size:11px">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span></span></div></pre></div></div>
</div>
<br>__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
<br></blockquote></div><br></div>

<br>
<font face="Arial" style="font-family:Arial,Helvetica,sans-serif"><div><font face="Arial"><br><font>--</font></font></div><font><font color="#808080"><b>Quobyte</b> </font><font color="#808080">GmbH<br>Boyenstr. 41 - 10115 Berlin-Mitte - Germany<br></font></font></font><font color="#808080"><font face="Arial"><font face="Arial, Helvetica, sans-serif">+49-30-</font>814 591 800 <font face="Arial, Helvetica, sans-serif">- </font><a href="http://www.quobyte.com/" style="font-family:Arial,Helvetica,sans-serif" target="_blank">www.quobyte.com</a></font></font><div style="font-family:Arial,Helvetica,sans-serif"><font><font face="Arial" color="#808080">Amtsgericht Berlin-Charlottenburg, HRB 149012B<br>management board: Dr. Felix Hupfeld, Dr. Björn Kolbeck, Dr. Jan Stender</font></font></div><br>__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
<br></blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature"><div dir="ltr"><pre style="white-space:pre-wrap;font-size:10px;word-wrap:break-word;margin-top:0px;margin-bottom:0px"><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><b><span lang="EN-US" style="font-size:10pt;font-family:Arial,sans-serif">Eduard Biceri Matei, Senior Software Developer</span></b></div><div style="color:rgb(0,0,0);font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span style="font-size:13.5pt;font-family:Helvetica,sans-serif"><a href="http://www.cloudfounders.com/" style="color:rgb(17,85,204)" target="_blank"><span lang="EN-US" style="font-size:11pt;font-family:Calibri,sans-serif"><font color="#0045a3">www.cloudfounders.com</font></span></a><div style="display:inline-block;width:16px;height:16px"></div><div style="display:inline-block;width:16px;min-height:16px"></div></span><span lang="EN-US" style="font-size:11pt;font-family:Calibri,sans-serif"><font color="#1f497d"> | </font><a href="mailto:eduard.matei@cloudfounders.com" style="color:rgb(17,85,204)" target="_blank"><font color="#0045a3">eduard.matei@cloudfounders.com</font></a></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:11pt;font-family:Calibri,sans-serif;color:rgb(31,73,125)"><u></u> <u></u></span></div><br><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:13.5pt;font-family:Arial,sans-serif;color:rgb(80,0,80)"><u></u> <u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><b><span lang="EN-US" style="font-size:13.5pt;font-family:Arial,sans-serif">CloudFounders, The Private Cloud Software Company</span></b><span lang="EN-US" style="font-size:13.5pt;font-family:Arial,sans-serif"><u></u><u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:13.5pt;font-family:Helvetica,sans-serif"><u></u> <u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-family:Helvetica,sans-serif;font-size:11px">Disclaimer:<u></u><u></u></span></div><div style="font-family:arial,sans-serif;font-size:13px;text-align:-webkit-auto;white-space:normal;margin:0px"><span lang="EN-US" style="font-size:8.5pt;font-family:Calibri,sans-serif;color:rgb(31,73,125)">This email and any files transmitted with it are confidential and intended solely for the use of the individual or entity to whom they are addressed.</span><span lang="EN-US" style="font-family:Calibri,sans-serif;color:rgb(31,73,125)"><br><span style="font-size:11px">If you are not the named addressee or an employee or agent responsible for delivering this message to the named addressee, you are hereby notified that you are not authorized to read, print, retain, copy or disseminate this message or any part of it. If you have received this email in error we request you to notify us by reply e-mail and to delete all electronic files of the message. If you are not the intended recipient you are notified that disclosing, copying, distributing or taking any action in reliance on the contents of this information is strictly prohibited. <br>E-mail transmission cannot be guaranteed to be secure or error free as information could be intercepted, corrupted, lost, destroyed, arrive late or incomplete, or contain viruses. The sender therefore does not accept liability for any errors or omissions in the content of this message, and shall have no liability for any loss or damage suffered by the user, which arise as a result of e-mail transmission.</span></span></div></pre></div></div>
</div>