<div dir="ltr">Hai,<div><br></div><div>I think , I am not effected by this bug. As we have around 220 vm max. But as suggested in bug, do I need to set this on all nodes. (1. controller 2. Network and 3. Compute) or just network node?</div><div>As br-ex bridge is been used , I am supposed to use only br-ex while setting.</div><div><br></div><div>

<span style="color:rgb(51,51,51);font-family:monospace;font-size:12px;text-align:left;background-color:rgb(255,255,255);text-decoration-style:initial;text-decoration-color:initial;float:none;display:inline">ovs-vsctl set bridge <bridge> other-config:</span><wbr style="color:rgb(51,51,51);font-family:monospace;font-size:12px;text-align:left;background-color:rgb(255,255,255);text-decoration-style:initial;text-decoration-color:initial"><span style="color:rgb(51,51,51);font-family:monospace;font-size:12px;text-align:left;background-color:rgb(255,255,255);text-decoration-style:initial;text-decoration-color:initial;float:none;display:inline">mac-table-</span><wbr style="color:rgb(51,51,51);font-family:monospace;font-size:12px;text-align:left;background-color:rgb(255,255,255);text-decoration-style:initial;text-decoration-color:initial"><span style="color:rgb(51,51,51);font-family:monospace;font-size:12px;text-align:left;background-color:rgb(255,255,255);text-decoration-style:initial;text-decoration-color:initial;float:none;display:inline">size=50000</span>

<br></div><div><br></div><div>Regarding the MTU link suggested by Slawomir Kaplonski in IRC discussion, we are using 1500 MTU consistently in all those locations.</div><div><br></div><div>PS: I am not expert in openstack system, just started working on existing system</div><div><br></div><div>~ Jayachander.</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Mon, Jun 18, 2018 at 1:28 PM, Slawomir Kaplonski <span dir="ltr"><<a href="mailto:skaplons@redhat.com" target="_blank">skaplons@redhat.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Hi,<br>
<br>
> Wiadomość napisana przez Jay See <<a href="mailto:jayachander.it@gmail.com">jayachander.it@gmail.com</a>> w dniu 18.06.2018, o godz. 12:48:<br>
<div><div class="h5">> <br>
> <br>
> I have created question on ask.opestack, but profile is still not approved by moderators. (<a href="https://ask.openstack.org/en/question/114803/network-is-unreachable-in-instance/" rel="noreferrer" target="_blank">https://ask.openstack.org/en/<wbr>question/114803/network-is-<wbr>unreachable-in-instance/</a>) Someone in IRC suggested to send the mail here.<br>
> <br>
> <br>
> Problem seems to be similar to, but I am not able to follow the bug to fix the issue - <a href="https://ask.openstack.org/en/question/80462/network-is-unreachable-in-instance/" rel="noreferrer" target="_blank">https://ask.openstack.org/en/<wbr>question/80462/network-is-<wbr>unreachable-in-instance/</a><br>
> <br>
> We have 3 controller nodes connected to 12 compute nodes. Eth3 port on all the compute node is down.<br>
> <br>
> [Thu Jun 14 14:38:57] root@:~# node-ping-check<br>
> <br>
>  Ping check of all service-ip, vm-ip, data-ip and floating-ip, ping<br>
>  status result after ip, 1/0 = alive/dead<br>
> <br>
>  command start time 2018-06-14 14:39:00<br>
> <br>
>  node    service-ip        vm-ip          data-ip        floating-ip<br>
> ------------------------------<wbr>------------------------------<wbr>---------<br>
>  h002   10.1.12.102 1   10.2.12.102 1   10.3.13.102 1   10.4.13.102 1 (controller 1)<br>
>  h003   10.1.12.103 1   10.2.12.103 1   10.3.13.103 1   10.4.13.103 1 (controller 2)<br>
>  h004   10.1.12.104 1   10.2.12.104 1   10.3.13.104 1   10.4.13.104 1 (controller 3 + Network node)<br>
>  h005   10.1.12.105 1   10.2.12.105 1   10.3.13.105 1   10.4.13.105 0<br>
>  h006   10.1.12.106 1   10.2.12.106 1   10.3.13.106 1   10.4.13.106 0<br>
>  h007   10.1.12.107 1   10.2.12.107 1   10.3.13.107 1   10.4.13.107 0<br>
>  h008   10.1.12.108 1   10.2.12.108 1   10.3.13.108 1   10.4.13.108 0<br>
>  h009   10.1.12.109 1   10.2.12.109 1   10.3.13.109 1   10.4.13.109 0<br>
>  h010   10.1.12.110 1   10.2.12.110 1   10.3.13.110 1   10.4.13.110 0<br>
>  h011   10.1.14.111 1   10.2.14.111 1   10.3.15.111 1   10.4.15.111 0<br>
>  h012   10.1.14.112 1   10.2.14.112 1   10.3.15.112 1   10.4.15.112 0<br>
>  h013   10.1.14.113 1   10.2.14.113 1   10.3.15.113 1   10.4.15.113 0<br>
>  h014   10.1.14.114 1   10.2.14.114 1   10.3.15.114 1   10.4.15.114 0<br>
>  h015   10.1.14.115 1   10.2.14.115 1   10.3.15.115 1   10.4.15.115 0<br>
>  h016   10.1.14.116 0   10.2.14.116 0   10.3.15.116 0   10.4.15.116 0  ( Down because of hardware issue)<br>
>  h017   10.1.14.117 1   10.2.14.117 1   10.3.15.117 1   10.4.15.117 0<br>
> <br>
> [Thu Jun 14 14:39:39] root@:~#<br>
> <br>
> <br>
> To bring eth3 on Network node followed following steps:<br>
> <br>
> ifconfig eth3 down<br>
> ifconfig eth3 0.0.0.0 up<br>
> <br>
> ovs-vsctl del-br br-ex<br>
> ovs-vsctl add-br br-ex<br>
<br>
</div></div>When You removed and added again br-ex it has no any openflow rules configured. So there will be no traffic passed via this bridge at all please try to restart neutron-openvswitch-agent and check if rules are recreated.<br>
If that will help, You can apply patch <a href="https://review.openstack.org/#/c/573696/" rel="noreferrer" target="_blank">https://review.openstack.org/#<wbr>/c/573696/</a> and check if that will help :)<br>
<div><div class="h5"><br>
> ovs-vsctl add-port br-ex eth3<br>
> ifconfig br-ex 10.4.13.104 netmask 255.255.255.0<br>
> route add -net 10.4.0.0 netmask 255.255.0.0 gateway 10.4.13.1 dev br-ex<br>
> <br>
> <br>
> On Network node:<br>
> <br>
> [2018-06-18 11:38:24] root@h004:~$ ip netns exec qdhcp-eb7573a0-9d91-491c-b150-<wbr>90f0135778ad ping 12.12.0.4<br>
> PING 12.12.0.4 (12.12.0.4) 56(84) bytes of data.<br>
> 64 bytes from <a href="http://12.12.0.4" rel="noreferrer" target="_blank">12.12.0.4</a>: icmp_seq=1 ttl=64 time=1.98 ms<br>
> 64 bytes from <a href="http://12.12.0.4" rel="noreferrer" target="_blank">12.12.0.4</a>: icmp_seq=2 ttl=64 time=0.529 ms<br>
> ^C<br>
> --- 12.12.0.4 ping statistics ---<br>
> 2 packets transmitted, 2 received, 0% packet loss, time 1001ms<br>
> rtt min/avg/max/mdev = 0.529/1.254/1.980/0.726 ms<br>
> [2018-06-18 11:38:33] root@h004:~$ ip netns exec qdhcp-eb7573a0-9d91-491c-b150-<wbr>90f0135778ad ssh <a href="mailto:cirros@12.12.0.4">cirros@12.12.0.4</a><br>
> ^C<br>
>  [SSH Not working]<br>
> <br>
> [2018-06-18 11:45:51] root@h004:~$ ip netns exec qrouter-d770b552-1979-4063-<wbr>ae79-c6ff402c8cbc traceroute 8.8.8.8<br>
> traceroute to 8.8.8.8 (8.8.8.8), 30 hops max, 60 byte packets<br>
> connect: Network is unreachable<br>
> [2018-06-18 11:58:01] root@h004:~$ ip netns exec qrouter-d770b552-1979-4063-<wbr>ae79-c6ff402c8cbc traceroute 12.12.0.4<br>
> traceroute to 12.12.0.4 (12.12.0.4), 30 hops max, 60 byte packets<br>
> <br>
> <br>
> On Compute node:<br>
> [2018-06-18 11:56:12] root@h011:~$ ip netns exec qrouter-d770b552-1979-4063-<wbr>ae79-c6ff402c8cbc traceroute 8.8.8.8<br>
> traceroute to 8.8.8.8 (8.8.8.8), 30 hops max, 60 byte packets<br>
> connect: Network is unreachable<br>
> <br>
> [2018-06-18 11:59:20] root@h011:~$ ip netns exec qrouter-d770b552-1979-4063-<wbr>ae79-c6ff402c8cbc ping 12.12.0.4<br>
> PING 12.12.0.4 (12.12.0.4) 56(84) bytes of data.<br>
> 64 bytes from <a href="http://12.12.0.4" rel="noreferrer" target="_blank">12.12.0.4</a>: icmp_seq=1 ttl=64 time=1.61 ms<br>
> 64 bytes from <a href="http://12.12.0.4" rel="noreferrer" target="_blank">12.12.0.4</a>: icmp_seq=2 ttl=64 time=0.273 ms<br>
> ^C<br>
> --- 12.12.0.4 ping statistics ---<br>
> 2 packets transmitted, 2 received, 0% packet loss, time 1001ms<br>
> rtt min/avg/max/mdev = 0.273/0.943/1.614/0.671 ms<br>
> [2018-06-18 12:02:21] root@h011:~$ ip netns exec qrouter-d770b552-1979-4063-<wbr>ae79-c6ff402c8cbc ping x.x.170.61  (floating ip)<br>
> connect: Network is unreachable<br>
> <br>
> <br>
> <br>
> -- <br>
> ​P  SAVE PAPER – Please do not print this e-mail unless absolutely necessary.<br>
</div></div>> ______________________________<wbr>_________________<br>
> Mailing list: <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" rel="noreferrer" target="_blank">http://lists.openstack.org/<wbr>cgi-bin/mailman/listinfo/<wbr>openstack</a><br>
> Post to     : <a href="mailto:openstack@lists.openstack.org">openstack@lists.openstack.org</a><br>
> Unsubscribe : <a href="http://lists.openstack.org/cgi-bin/mailman/listinfo/openstack" rel="noreferrer" target="_blank">http://lists.openstack.org/<wbr>cgi-bin/mailman/listinfo/<wbr>openstack</a><br>
<br>
— <br>
Slawek Kaplonski<br>
Senior software engineer<br>
Red Hat<br>
<br>
</blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><span lang="EN-GB" style="font-size:18pt;font-family:Webdings;color:green"><div style="font-family:arial,helvetica,sans-serif;display:inline">​</div>P</span><span lang="EN-US" style="font-size:8pt;font-family:Arial,sans-serif;color:green">  </span><b style="font-family:Calibri,sans-serif;font-size:14.44444465637207px"><span lang="EN-US" style="font-size:8pt;color:green">SAVE PAPER – Please do not print this e-mail unless absolutely necessary.</span></b><br></div></div>
</div>