<div dir="ltr">Hello Vlad,<div><br></div><div>the 'cluster network' (aka 'cluster_network') in ceph.conf is just a hint to OSDs which address to use for cluster traffic (as they register it in MONs).</div><div>We use globals.yml 'cluster_interface' to explicitly run the OSD using the first address on the selected interface for cluster address:</div><div>ceph-osd ... --cluster-addr {{ hostvars[inventory_hostname]['ansible_' + cluster_interface]['ipv4']['address'] }} ...</div><div>Therefore, there is no need to set 'cluster network'.</div><div>If you really want to set it (perhaps for reference), you can set it in '/etc/kolla/config/ceph.conf' (notice no ceph/ directory).</div><div><br></div><div>Kind regards,</div><div>Radek</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">sob., 29 cze 2019 o 17:33 vladimir franciz blando <<a href="mailto:vladimir.blando@gmail.com">vladimir.blando@gmail.com</a>> napisał(a):<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hi,<div><br></div><div>In my globals.yml file </div><div>---</div><div>cluster_interface: "bond1"</div><div>---</div><div><br></div><div>but after deployment, there's nothing on the ceph.conf file that indicates that it's using the cluster interface</div><div>---</div><div># docker exec ceph_mon cat /etc/ceph/ceph.conf<br>[global]<br>log file = /var/log/kolla/ceph/$cluster-$name.log<br>log to syslog = false<br>err to syslog = false<br>log to stderr = false<br>err to stderr = false<br>fsid = f8ff1404-bead-422b-9076-21583012ad30<br>mon initial members = 172.16.43.22, 172.16.43.11, 172.16.43.12<br>mon host = 172.16.43.22, 172.16.43.11, 172.16.43.12<br>mon addr = <a href="http://172.16.43.22:6789" target="_blank">172.16.43.22:6789</a>, <a href="http://172.16.43.11:6789" target="_blank">172.16.43.11:6789</a>, <a href="http://172.16.43.12:6789" target="_blank">172.16.43.12:6789</a><br>auth cluster required = cephx<br>auth service required = cephx<br>auth client required = cephx<br>setuser match path = /var/lib/ceph/$type/$cluster-$id<br><br>[mon]<br>mon compact on start = true<br>mon cluster log file = /var/log/kolla/ceph/$cluster.log</div><div>---</div><div>I was expecting </div><div>cluster network = <cluster_network_cidr>.</div><div><br></div><div>I even tried making a custom config (/etc/kolla/config/ceph/ceph.conf) which includes the </div><div>cluster network = <cluster_network_cidr></div><div>public network = <public_network_cidr></div><div><br></div><div>and run "kolla-ansible -i multinode reconfigure"</div><div><br></div><div>but it did nothing, was there something missing on what I did?</div><div><br></div><div><div><div><div dir="ltr" class="gmail-m_1720885553072548923gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><br></div><div>- Vlad</div></div></div></div></div></div></div></div></div></div></div><div hspace="streak-pt-mark" style="max-height:1px"><img alt="" style="width: 0px; max-height: 0px; overflow: hidden;"><font color="#ffffff" size="1">ᐧ</font></div>
</blockquote></div>