<div dir="ltr">Allow me to rephrase. I've read somewhere (can't remember where) that it would be faster to upload files if they would be uploaded to separate containeres. This was suggested for a standard swift installation with a certain replication factor. Since I'll be uploading the files with the replicators turned off, does it really matter if I insert a group of them in separate containeres?</div>
<div class="gmail_extra"><br><br><div class="gmail_quote">On Mon, Jan 14, 2013 at 2:27 PM, Robert van Leeuwen <span dir="ltr"><<a href="mailto:Robert.vanLeeuwen@spilgames.com" target="_blank">Robert.vanLeeuwen@spilgames.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">




<div>
<div style="direction:ltr;font-size:10pt;font-family:Tahoma">
<div style="font-size:16px;font-family:Times New Roman"><div class="im">> I see. With replication switched off during upload, does inserting into various containers speed up the process
<br>
> or is it irrelevant?<br>
<br></div>
I'm not sure what's your question but maybe this helps:<br>
In short:<br>
The replication daemon is "walking" across your files to check if any files need to be replicated to other nodes
<br>
(e.g. when a node was broken or a new node is added to the cluster).<br>
Because it is scanning your filesystem it eats up io's. That is why it speeds up the system if you turn this off.<br>
<br>
The number off objects in a container impacts the sqlite databases. Each container is a SQLite database.<br>
The SQLite database will get slower with more objects in them. <br>
I think the recommendations for spinning disks is max a few million for one container, when using SSD's for the databases you can go quite a bit higher though.<br>
<br>
Cheers,<br>
Robert<br>
</div>
</div>
</div>

<br>_______________________________________________<br>
Mailing list: <a href="https://launchpad.net/~openstack" target="_blank">https://launchpad.net/~openstack</a><br>
Post to     : <a href="mailto:openstack@lists.launchpad.net">openstack@lists.launchpad.net</a><br>
Unsubscribe : <a href="https://launchpad.net/~openstack" target="_blank">https://launchpad.net/~openstack</a><br>
More help   : <a href="https://help.launchpad.net/ListHelp" target="_blank">https://help.launchpad.net/ListHelp</a><br>
<br></blockquote></div><br></div>