<div dir="ltr"><br><div class="gmail_extra"><br><div class="gmail_quote">On Thu, May 7, 2015 at 1:10 PM, Chuck Thier <span dir="ltr"><<a href="mailto:cthier@gmail.com" target="_blank">cthier@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">I think most are missing the point a bit.  The question that should really be asked is, what is right for Swift to continue to scale.  Since the inception of Openstack, Swift has had to solve for problems of scale that generally are not shared with the rest of Openstack.<div><br></div><div>When we first set out to write Swift, we had set, what we thought at the time were pretty lofty goals for ourselves:</div><div><br></div><div>* 100 Billion objects<br></div><div>* 100 Petabytes of data</div><div>* 100 K requests/second</div><div>* 100 Gb/s throughput</div><div><br></div><div>We started with Python figuring that when we hit major bottlenecks, we would look at other options.  We have been surprised at how far we have been able to push Python and have met most if not all of the goals above.</div><div><br></div><div>As we look toward the future, we realize that we are now looking for how we will support trillions of objects, 100's of petabytes to exabytes of data, etc.  We feel that we have finally hit that point that we need more than incremental improvements, and that we are running out of incremental improvements that can be made with Python.</div><div><br></div><div>What started as a simple experiment by Mike Barton, has turned into quite a significant improvement in performance and builds a base that can be built off of for future improvements.  This wasn't built because of it being "shiny" but out of direct need, and is currently being tested with great results on production workloads.</div></div></blockquote><div><br></div><div>Out of curiosity, Do you have any numbers to quantify the improvement?</div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><br></div><div>I applaud the team that has worked on this at Rackspace, and hope the community can look at the current needs of Swift, and the merits of the work that has been accomplished, rather than the politics of "shiny".</div><div><br></div><div>Thanks,</div><div><br></div><div>--</div><div>Chuck</div><div><br></div><div><br><div class="gmail_quote"><div><div class="h5">On Thu, Apr 30, 2015 at 11:45 AM John Dickinson <<a href="mailto:me@not.mn" target="_blank">me@not.mn</a>> wrote:<br></div></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5">Swift is a scalable and durable storage engine for storing unstructured data. It's been proven time and time again in production in clusters all over the world.<br>
<br>
We in the Swift developer community are constantly looking for ways to improve the codebase and deliver a better quality codebase to users everywhere. During the past year, the Rackspace Cloud Files team has been exploring the idea of reimplementing parts of Swift in Go. Yesterday, they released some of this code, called "hummingbird", for the first time. It's been proposed to a "feature/hummingbird" branch in Swift's source repo.<br>
<br>
<a href="https://review.openstack.org/#/c/178851" target="_blank">https://review.openstack.org/#/c/178851</a><br>
<br>
I am very excited about this work being in the greater OpenStack Swift developer community. If you look at the patch above, you'll see that there are various parts of Swift reimplemented in Go. During the next six months (i.e. before Tokyo), I would like us to answer this question:<br>
<br>
What advantages does a compiled-language object server bring, and do they outweigh the costs of using a different language?<br>
<br>
Of course, there are a ton of things we need to explore on this topic, but I'm happy that we'll be doing it in the context of the open community instead of behind closed doors. We will have a fishbowl session in Vancouver on this topic. I'm looking forward to the discussion.<br>
<br>
<br>
--John<br>
<br>
<br>
<br>
<br></div></div><span class="">
__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
</span></blockquote></div></div></div>
<br>__________________________________________________________________________<br>
OpenStack Development Mailing List (not for usage questions)<br>
Unsubscribe: <a href="http://OpenStack-dev-request@lists.openstack.org?subject:unsubscribe" target="_blank">OpenStack-dev-request@lists.openstack.org?subject:unsubscribe</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev" target="_blank">http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-dev</a><br>
<br></blockquote></div><br></div></div>