<html>
  <head>
    <meta content="text/html; charset=utf-8" http-equiv="Content-Type">
  </head>
  <body bgcolor="#FFFFFF" text="#000000">
    <div class="moz-cite-prefix">Thanks for the advice - followed the
      network setup recipe and same error after deploying Openstack on
      the controller node<br>
      <br>
      But it is indeed a bizarre connectivity issue in the external
      network infrastructure<br>
      <p
        data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$40.1">Deployment
        has failed. All nodes are finished. Failed tasks:
        Task[connectivity_tests/4] Stopping the deployment process!</p>
      <div class="notification text-danger clickable unread"
        data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39">
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">Failed
          to deploy node 'MOS_Controller (1e:c1)': Task
          connectivity_tests failed on node 4.</p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">Looking
          at the logs here are the errors that I see (time is in UTC) -
          it seems to be related to an internet connectivity issue on
          the Controller</p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">Logs
          below<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">However
          I have set the networking as per the neutron guide and  the
          issue is still unclear<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">[root@fuel
          ~]# fuel node<br>
          id | status   | name                   | cluster | ip        |
          mac               | roles      | pending_roles | online |
          group_id<br>
---+----------+------------------------+---------+-----------+-------------------+------------+---------------+--------+---------<br>
           4 | error    | MOS_Controller (1e:c1) |       1 | 10.20.0.3 |
          00:50:56:98:1e:c1 | controller |               |      1
          |        1<br>
           3 | discover | MOS_Compute (46:4a)    |         | 10.20.0.4 |
          00:50:56:98:46:4a |            |               |      1 |<br>
          [root@fuel ~]#<br>
          Logging in to the controller node</p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">[root@fuel
          ~]# ssh 10.20.0.3<br>
          Warning: Permanently added '10.20.0.3' (ECDSA) to the list of
          known hosts.<br>
          Welcome to Ubuntu 14.04.5 LTS (GNU/Linux 3.13.0-110-generic
          x86_64)<br>
          <br>
           * Documentation:  <a class="moz-txt-link-freetext" href="https://help.ubuntu.com/">https://help.ubuntu.com/</a><br>
          Last login: Fri Feb 24 04:23:12 2017 from 10.20.0.2<br>
          root@node-4:~#<br>
          Pings across to IP work fine</p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">root@node-4:~#
          ping 192.168.198.3  <<< this is the internet exit
          gateway across the physical network infra<br>
          PING 192.168.198.3 (192.168.198.3) 56(84) bytes of data.<br>
          64 bytes from 192.168.198.3: icmp_seq=1 ttl=254 time=4.35 ms<br>
          64 bytes from 192.168.198.3: icmp_seq=2 ttl=254 time=3.18 ms<br>
          root@node-4:~# cat /etc/resolv.conf<br>
          # re-generated by cloud-init boothook only at the first boot;<br>
          search domain.tld<br>
          domain domain.tld<br>
          nameserver 10.20.0.2  <<< this is the Fuel master
          node<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">root@node-4:~#
          nslookup google.com<br>
          Server:         10.20.0.2<br>
          Address:        10.20.0.2#53<br>
          Non-authoritative answer:<br>
          Name:   google.com<br>
          Address: 172.217.6.14   <<< DNS resolution OK<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">root@node-4:~#
          route<br>
          Kernel IP routing table<br>
          Destination     Gateway         Genmask         Flags Metric
          Ref    Use Iface<br>
          default         10.100.20.1     0.0.0.0         UG    0     
          0        0 br-ex   <<< this is the SVI default gw on
          VLAN 20 (public)<br>
          10.20.0.0       *               255.255.255.0   U     0     
          0        0 br-fw-admin<br>
          10.100.20.0     *               255.255.255.0   U     0     
          0        0 br-ex<br>
          10.100.121.0    *               255.255.255.0   U     0     
          0        0 br-mgmt<br>
          10.100.122.0    *               255.255.255.0   U     0     
          0        0 br-storage<br>
          169.254.169.254 -               255.255.255.255 !H    0     
          -        0 -<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">root@node-4:~#
          ip route get 172.217.6.14<br>
          172.217.6.14 via 10.100.20.1 dev br-ex  src 10.100.20.33<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">root@node-4:~#
          ping google.com<br>
          PING google.com (172.217.6.14) 56(84) bytes of data.<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">And
          on the internet gateway there is nothing in the NAT
          translations<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">CiscoGw#sh
          ip nat translations | inc 10.100.20.<br>
          CiscoGw# --- nothing ---<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">root@node-4:~#
          ifconfig br-ex<br>
          br-ex     Link encap:Ethernet  HWaddr 00:50:56:98:09:29<br>
                    inet addr:10.100.20.33  Bcast:10.100.20.255 
          Mask:255.255.255.0<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">And
          on the intermediate L3 switch I can see the MAC and IP i.e. it
          goes to the external network infra<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1">Cisco-SMI#sh
          ip arp | inc 10.100.20.<br>
          Internet  10.100.20.33            3   0050.5698.0929  ARPA  
          Vlan20<br>
            <br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1"><br>
          !!! I have to dig into this strange connectivity issue<br>
        </p>
        <p
          data-reactid=".0.0.0:$navbar.1.0.2.0.$notifications-popover.1.0:$39.1"><img
            src="cid:part1.D223057D.C9B0712D@mindtrek.dnsalias.net"
            alt=""></p>
      </div>
      <br>
      <img src="cid:part2.5ADD58FA.17F9F9FC@mindtrek.dnsalias.net"
        alt=""><br>
      <br>
      <img src="cid:part3.1B8C2E46.F683EE8B@mindtrek.dnsalias.net"
        alt=""><br>
      On 2/23/2017 9:33 PM, Mario Romascanu wrote:<br>
    </div>
    <blockquote
      cite="mid:2c888401-1704-e856-15e4-945776fb9563@mindtrek.dnsalias.net"
      type="cite">
      <meta http-equiv="content-type" content="text/html; charset=utf-8">
      Hi<br>
      <br>
      I was able to get to a certain point in deploying an environment
      on a fresh installation of Mirantis OpenStack 9.0 but I am stuck
      with this bizarre error in the controller deployment<br>
      It does not seem to be  a communication issue - but rather a
      logical one - an error 500 on a particular REST call URI to
      neutron and 200 OK otherwise on different neutron URI.<br>
      This occurs after deploying Ubuntu and Openstack on the Controller
      node<br>
      <font color="#ff0000"><font size="+2"><b>I am at a loss of what
            the issue is here - any suggestion welcome</b></font></font><br>
      <br>
      <div class="moz-signature">"Deployment has failed. All nodes are
        finished. Failed tasks: Task[connectivity_tests/4] Stopping the
        deployment process!"<br>
        "Failed to deploy node 'MOS_Controller (1e:c1)': Task
        connectivity_tests failed on node 4"<br>
        [root@fuel ~]# fuel node<br>
        id | status  | name                   | cluster | ip        |
        mac               | roles      | pending_roles | online |
        group_id<br>
---+---------+------------------------+---------+-----------+-------------------+------------+---------------+--------+---------<br>
         3 | stopped | MOS_Compute (46:4a)    |       1 | 10.20.0.4 |
        00:50:56:98:46:4a | compute    |               |      1 |       
        1<br>
         4 | error   | MOS_Controller (1e:c1) |       1 | 10.20.0.3 |
        00:50:56:98:1e:c1 | controller |               |      1 |       
        1<br>
        <br>
        An in the logs I see the traceback partially included - the root
        cause is highlighted<br>
      </div>
    </blockquote>
    <br>
  
<br /><br />
<hr style='border:none; color:#909090; background-color:#B0B0B0; height: 1px; width: 99%;' />
<table style='border-collapse:collapse;border:none;'>
        <tr>
                <td style='border:none;padding:0px 15px 0px 8px'>
                        <a href="https://www.avast.com/antivirus">
                                <img border=0 src="http://static.avast.com/emails/avast-mail-stamp.png" alt="Avast logo" />
                        </a>
                </td>
                <td>
                        <p style='color:#3d4d5a; font-family:"Calibri","Verdana","Arial","Helvetica"; font-size:12pt;'>
                                This email has been checked for viruses by Avast antivirus software.
                                <br><a href="https://www.avast.com/antivirus">www.avast.com</a>
                        </p>
                </td>
        </tr>
</table>
<br />
</body>
</html>