<div dir="ltr"><div><div>If fault domain is a concern, you can always split the cloud up into 3 regions, each having a dedicate Ceph cluster. It isn't necessarily going to mean more hardware, just logical splits. This is kind of assuming that the network doesn't share the same fault domain though.<br><br></div>Alternatively, you can split the hardware for the Ceph boxes into multiple clusters, and use multi backend Cinder to talk to the same set of hypervisors to use multiple Ceph clusters. We're doing that to migrate from one Ceph cluster to another. You can even mount a volume from each cluster into a single instance. <br><br></div><div>Keep in mind that you don't really want to shrink a Ceph cluster too much. What's "too big"? You should keep growing so that the fault domains aren't too small (3 physical rack min), or you guarantee that the entire cluster stops if you lose network.<br></div><div><br></div><div>Just my 2 cents,<br></div>Warren<br></div><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Oct 12, 2016 at 8:35 AM, Adam Kijak <span dir="ltr"><<a href="mailto:adam.kijak@corp.ovh.com" target="_blank">adam.kijak@corp.ovh.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">> ______________________________<wbr>_________<br>
> From: Abel Lopez <<a href="mailto:alopgeek@gmail.com">alopgeek@gmail.com</a>><br>
> Sent: Monday, October 10, 2016 9:57 PM<br>
> To: Adam Kijak<br>
> Cc: openstack-operators<br>
<span class="">> Subject: Re: [Openstack-operators] [openstack-operators][ceph][<wbr>nova] How do you handle Nova on Ceph?<br>
><br>
</span><span class="">> Have you thought about dedicated pools for cinder/nova and a separate pool for glance, and any other uses you might have?<br>
> You need to setup secrets on kvm, but you can have cinder creating volumes from glance images quickly in different pools<br>
<br>
</span>We already have separate pool for images, volumes and instances.<br>
Separate pools doesn't really split the failure domain though.<br>
Also AFAIK you can't set up multiple pools for instances in nova.conf, right?<br>
<div class="HOEnZb"><div class="h5"><br>
______________________________<wbr>_________________<br>
OpenStack-operators mailing list<br>
<a href="mailto:OpenStack-operators@lists.openstack.org">OpenStack-operators@lists.<wbr>openstack.org</a><br>
<a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack-operators" rel="noreferrer" target="_blank">http://lists.openstack.org/<wbr>cgi-bin/mailman/listinfo/<wbr>openstack-operators</a><br>
</div></div></blockquote></div><br></div>