<div dir="ltr"><div><div><div><div><div><div><div><div><div><div>Numan,<br></div>Sorry for making this thread too long.<br></div>Kind of deadlock scenario here:<br></div>The process listening on port 6641 is ovsdb-server(not NB db). <br></div>Details:<br></div>Start OVS:<br># /usr/share/openvswitch/scripts/ovs-ctl start  --system-id="random"<br># netstat -putna | grep 6641<br>tcp        0      0 <a href="http://192.168.10.10:6641">192.168.10.10:6641</a>      0.0.0.0:*               LISTEN      5118/ovsdb-server<br># ps -afx | grep ovsdb<br> 5118 ?        S<     0:00  \_ ovsdb-server /etc/openvswitch/conf.db -vconsole:emer -vsyslog:err -vfile:info --remote=punix:/var/run/openvswitch/db.sock --private-key=db:Open_vSwitch,SSL,private_key --certificate=db:Open_vSwitch,SSL,certificate --bootstrap-ca-cert=db:Open_vSwitch,SSL,ca_cert --no-chdir --log-file=/var/log/openvswitch/ovsdb-server.log --pidfile=/var/run/openvswitch/ovsdb-server.pid --detach --monitor<br><br>Start NB db<br># /usr/share/openvswitch/scripts/ovn-ctl restart_northd --db-sb-create-insecure-remote=yes --db-nb-create-insecure-remote=yes<br><br># netstat -putna | grep 6641<br>tcp        0      0 <a href="http://192.168.10.10:6641">192.168.10.10:6641</a>      0.0.0.0:*               LISTEN      5118/ovsdb-server   <br><br># ps -afx | grep ovsdb<br> 5118 ?        S<     0:00  \_ ovsdb-server /etc/openvswitch/conf.db -vconsole:emer -vsyslog:err -vfile:info --remote=punix:/var/run/openvswitch/db.sock --private-key=db:Open_vSwitch,SSL,private_key --certificate=db:Open_vSwitch,SSL,certificate --bootstrap-ca-cert=db:Open_vSwitch,SSL,ca_cert --no-chdir --log-file=/var/log/openvswitch/ovsdb-server.log --pidfile=/var/run/openvswitch/ovsdb-server.pid --detach --monitor<br><br> 5215 ?        S      0:00  \_ ovsdb-server --detach --monitor -vconsole:off --log-file=/var/log/openvswitch/ovsdb-server-nb.log --remote=punix:/var/run/openvswitch/ovnnb_db.sock --pidfile=/var/run/openvswitch/ovnnb_db.pid --remote=db:OVN_Northbound,NB_Global,connections --unixctl=ovnnb_db.ctl --private-key=db:OVN_Northbound,SSL,private_key --certificate=db:OVN_Northbound,SSL,certificate --ca-cert=db:OVN_Northbound,SSL,ca_cert --remote=ptcp:6641:192.168.10.10 /etc/openvswitch/ovnnb_db.db<br><br> 5223 ?        S      0:00  \_ ovsdb-server --detach --monitor -vconsole:off --log-file=/var/log/openvswitch/ovsdb-server-sb.log --remote=punix:/var/run/openvswitch/ovnsb_db.sock --pidfile=/var/run/openvswitch/ovnsb_db.pid --remote=db:OVN_Southbound,SB_Global,connections --unixctl=ovnsb_db.ctl --private-key=db:OVN_Southbound,SSL,private_key --certificate=db:OVN_Southbound,SSL,certificate --ca-cert=db:OVN_Southbound,SSL,ca_cert --remote=ptcp:6642:192.168.10.10 /etc/openvswitch/ovnsb_db.db<br><br></div>Northbound DB logs show the same error. <br><br></div>Well I am not supposed to kill the ovsdb-server process. Am I ? <br><br></div>Also when I kill the ovsdb-server process, the error goes away. But my doubt is we need the ovsdb-server process on the Controller node. Right?<br><br></div>Thanks for your patience. <br><br></div>Pranab<br><div><div><div><div><div><div><br><br><br></div></div></div></div></div></div></div><div class="gmail_extra"><br><div class="gmail_quote">On 2 February 2017 at 17:45, Numan Siddique <span dir="ltr"><<a href="mailto:nusiddiq@redhat.com" target="_blank">nusiddiq@redhat.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_default"><font face="arial, helvetica, sans-serif">In the ovsdb logs I see </font></div><span class=""><div class="gmail_default"><font face="arial, helvetica, sans-serif"><br></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"><span style="font-size:12.8px">2017-02-02T11:07:12.366Z|</span><span style="font-size:12.8px">00020<wbr>|socket_util|ERR|6641:</span><a href="http://192.168.10.10/" style="font-size:12.8px" target="_blank">192.168.<wbr>10.10</a><span style="font-size:12.8px">: bind: Address already in use</span><br style="font-size:12.8px"><span style="font-size:12.8px">2017-02-02T11:07:14.869Z|</span><span style="font-size:12.8px">00021<wbr>|socket_util|ERR|6641:</span><a href="http://192.168.10.10/" style="font-size:12.8px" target="_blank">192.168.<wbr>10.10</a><span style="font-size:12.8px">: bind: Address already in use</span><br style="font-size:12.8px"><span style="font-size:12.8px">2017-02-02T11:07:16.182Z|</span><span style="font-size:12.8px">00022<wbr>|socket_util|ERR|6641:</span><a href="http://192.168.10.10/" style="font-size:12.8px" target="_blank">192.168.<wbr>10.10</a><span style="font-size:12.8px">: bind: Address already in use</span><br style="font-size:12.8px"><span style="font-size:12.8px">2017-02-02T11:07:16.183Z|</span><span style="font-size:12.8px">00023<wbr>|socket_util|ERR|6641:</span><a href="http://192.168.10.10/" style="font-size:12.8px" target="_blank">192.168.<wbr>10.10</a><span style="font-size:12.8px">: bind: Address already in use</span><br></font></div><div class="gmail_default"><span style="font-size:12.8px"><font face="arial, helvetica, sans-serif"><br></font></span></div></span><div class="gmail_default"><span style="font-size:12.8px"><font face="arial, helvetica, sans-serif">Probably you can use netstat and see which processes are listening on port 6641, kill those processes and restart ovn-northd service and see if it works.</font></span></div><div class="gmail_default"><span style="font-size:12.8px"><font face="arial, helvetica, sans-serif"><br></font></span></div><div class="gmail_default"><span style="font-size:12.8px"><font face="arial, helvetica, sans-serif">Thanks</font></span></div><span class="HOEnZb"><font color="#888888"><div class="gmail_default"><span style="font-size:12.8px"><font face="arial, helvetica, sans-serif">Numan</font></span></div><div class="gmail_default"><span style="font-size:12.8px"><br></span></div></font></span></div><div class="HOEnZb"><div class="h5"><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Feb 2, 2017 at 5:26 PM, pranab boruah <span dir="ltr"><<a href="mailto:pranabjyotiboruah@gmail.com" target="_blank">pranabjyotiboruah@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><div>NB db is not listening on the port 6641:<br> # ovn-nbctl --db=tcp:<a href="http://192.168.10.10:6641" target="_blank">192.168.10.10:6641</a> show<br>2017-02-02T11:35:10Z|00001|ovs<wbr>db_idl|ERR|tcp:<a href="http://192.168.10.10:6641" target="_blank">192.168.10.10:<wbr>6641</a>: requested schema not found<br>ovn-nbctl: tcp:<a href="http://192.168.10.10:6641" target="_blank">192.168.10.10:6641</a>: database connection failed (No such file or directory)<br><br># ovn-sbctl --db=tcp:<a href="http://192.168.10.10:6642" target="_blank">192.168.10.10:6642</a> show<br>Chassis "e8968c35-11db-4b3b-ab24-c2086<wbr>6ac3dc8"<br>    hostname: "compute-447"<br>    Encap geneve<br>        ip: "172.16.10.11"<br>        options: {csum="true"}<br>    Encap vxlan<br>        ip: "172.16.10.11"<br>        options: {csum="true"}<br>Chassis "9f20e7bd-5e16-4273-8ce8-96d0e<wbr>0a12047"<br>    hostname: "compute-397"<br>    Encap geneve<br>        ip: "172.16.10.12"<br>        options: {csum="true"}<br>    Encap vxlan<br>        ip: "172.16.10.12"<br>        options: {csum="true"}<br><br># ovsdb-client dump unix:/var/run/openvswitch/ovnn<wbr>b_db.sock Connection<br>Connection table<br>_uuid                         <wbr>       external_ids inactivity_probe is_connected max_backoff other_config status          target                   <br>------------------------------<wbr>------ ------------ ---------------- ------------ ----------- ------------ --------------- -------------------------<br>c110ffff-5ba2-4125-8a51-3c3db5<wbr>83f267 {}           []               false        []          {}           {state=BACKOFF} "ptcp:<a href="http://192.168.10.10:6641" target="_blank">192.168.10.10:6641</a>"<br><br># ovsdb-client dump unix:/var/run/openvswitch/ovns<wbr>b_db.sock Connection<br>Connection table<br>_uuid                         <wbr>       external_ids inactivity_probe is_connected max_backoff other_config read_only status          target                   <br>------------------------------<wbr>------ ------------ ---------------- ------------ ----------- ------------ --------- --------------- -------------------------<br>1beb9cba-cc01-4981-8a67-a8b265<wbr>326df9 {}           []               false        []          {}           false     {state=BACKOFF} "ptcp:<a href="http://192.168.10.10:6642" target="_blank">192.168.10.10:6642</a>"<br><br></div>No change after restarting Controller node and restating Northd as mentioned here:<br><a href="https://github.com/openvswitch/ovs/commit/84d0ca5d00fe01b29163236d48fa0f9105687149" target="_blank">https://github.com/openvswitch<wbr>/ovs/commit/84d0ca5d00fe01b291<wbr>63236d48fa0f9105687149</a><span class="m_-8386175870206977817HOEnZb"><font color="#888888"><br><br></font></span></div><span class="m_-8386175870206977817HOEnZb"><font color="#888888">Pranab<br><div><br><br><div><br><br></div></div></font></span></div><div class="m_-8386175870206977817HOEnZb"><div class="m_-8386175870206977817h5"><div class="gmail_extra"><br><div class="gmail_quote">On 2 February 2017 at 17:00, Numan Siddique <span dir="ltr"><<a href="mailto:nusiddiq@redhat.com" target="_blank">nusiddiq@redhat.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_default" style="font-family:monospace,monospace"><br></div><div class="gmail_extra"><br><div class="gmail_quote"><span>On Thu, Feb 2, 2017 at 4:44 PM, pranab boruah <span dir="ltr"><<a href="mailto:pranabjyotiboruah@gmail.com" target="_blank">pranabjyotiboruah@gmail.com</a>></span> wrote:<br></span><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><div>Numan, <br><br></div><span>Thanks, but, the above commands didn't changed anything. Checked the logs and found this: <br><br></span></div></div></blockquote><div><br></div><div><div class="gmail_default" style="font-family:monospace,monospace;display:inline">​</div><div class="gmail_default" style="display:inline"><font face="arial, helvetica, sans-serif">Could you run the below two commands and see how it goes</font></div></div><div><div class="gmail_default" style="display:inline"><font face="arial, helvetica, sans-serif"><br></font></div></div><div><div class="gmail_default" style="display:inline"><font face="arial, helvetica, sans-serif"> - "ovn-nbctl --db=tcp:<a href="http://192.168.10.10:6641" target="_blank">192.168.10.10:6641</a> show" -> See if this command is successful or not. If not then ovsdb-server is either not listening on this port or it may be possible that you need to add iptables rule to allow this port.</font></div></div><div><div class="gmail_default" style="display:inline"><font face="arial, helvetica, sans-serif"><br></font></div></div><div><font face="arial, helvetica, sans-serif"><div class="gmail_default" style="display:inline"> - </div>"ovn-<div class="gmail_default" style="display:inline">​s​</div>bctl --db=tcp:<a href="http://192.168.10.10:664" target="_blank">192.168.10.10:664</a><div class="gmail_default" style="display:inline">​2​</div> show"</font></div><div><font face="arial, helvetica, sans-serif"><div class="gmail_default" style="display:inline"> -​</div> </font></div><div><font face="arial, helvetica, sans-serif"><br></font></div><div><div class="gmail_default"><font face="arial, helvetica, sans-serif">​On the controller node where you are running the ovsdb-server's run</font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"> - "sudo ovsdb-client dump unix:/var/run/openvswitch<wbr>/ovnnb_db.sock <span style="color:rgb(51,51,51);font-size:12px;white-space:pre-wrap">Connection"</span></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"><span style="color:rgb(51,51,51);font-size:12px;white-space:pre-wrap"> - "</span>sudo ovsdb-client dump unix:/var/run/openvswitch<wbr>/ovnsb_db.sock <span style="color:rgb(51,51,51);font-size:12px;white-space:pre-wrap">Connection"</span></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">​</font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">If the Connection table is empty, it means ovsdb-server is not listening on the tcp ports.</font></div><div class="gmail_default" style="font-family:monospace,monospace"><br></div><div class="gmail_default" style="font-family:monospace,monospace">Thanks</div><span class="m_-8386175870206977817m_1196792361470299631HOEnZb"><font color="#888888"><div class="gmail_default" style="font-family:monospace,monospace">Numan</div><div class="gmail_default" style="font-family:monospace,monospace"><br></div><br></font></span></div><div><div class="m_-8386175870206977817m_1196792361470299631h5"><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div>LOG of NB database:<br><br>2017-02-02T11:07:12.366Z|00020<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:07:14.869Z|00021<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:07:16.182Z|00022<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:07:16.183Z|00023<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:07:16.184Z|00024<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:09:55.403Z|00025<wbr>|ovsdb_jsonrpc_server|INFO|ptc<wbr>p:6642:<a href="http://192.168.10.10" target="_blank">192.168.10.10</a>: remote deconfigured<br>2017-02-02T11:09:55.403Z|00026<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:09:55.403Z|00027<wbr>|ovsdb_jsonrpc_server|ERR|Drop<wbr>ped 10 log messages in last 176 seconds (most recently, 159 seconds ago) due to excessive rate<br>2017-02-02T11:09:55.403Z|00028<wbr>|ovsdb_jsonrpc_server|ERR|ptcp<wbr>:6641:<a href="http://192.168.10.10" target="_blank">192.168.10.10</a>: listen failed: Address already in use<br>2017-02-02T11:09:55.403Z|00029<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:09:55.403Z|00030<wbr>|ovsdb_jsonrpc_server|ERR|ptcp<wbr>:6641:<a href="http://192.168.10.10" target="_blank">192.168.10.10</a>: listen failed: Address already in use<br>2017-02-02T11:09:57.460Z|00031<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:09:57.460Z|00032<wbr>|ovsdb_jsonrpc_server|ERR|ptcp<wbr>:6641:<a href="http://192.168.10.10" target="_blank">192.168.10.10</a>: listen failed: Address already in use<br>2017-02-02T11:09:57.460Z|00033<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:09:59.961Z|00034<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:10:02.464Z|00035<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:10:04.967Z|00036<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:10:07.469Z|00037<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:10:09.972Z|00038<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:10:12.475Z|00039<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:10:14.978Z|00040<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<br>2017-02-02T11:10:17.481Z|00041<wbr>|socket_util|ERR|6641:<a href="http://192.168.10.10" target="_blank">192.168.<wbr>10.10</a>: bind: Address already in use<span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-HOEnZb"><font color="#888888"><br><br></font></span></div><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-HOEnZb"><font color="#888888">-Pranab<br><div><div><br></div></div></font></span></div><div class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-HOEnZb"><div class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-h5"><div class="gmail_extra"><br><div class="gmail_quote">On 2 February 2017 at 16:36, Numan Siddique <span dir="ltr"><<a href="mailto:nusiddiq@redhat.com" target="_blank">nusiddiq@redhat.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div style="font-family:monospace,monospace"><br></div><div class="gmail_extra"><br><div class="gmail_quote"><span>On Thu, Feb 2, 2017 at 4:00 PM, pranab boruah <span dir="ltr"><<a href="mailto:pranabjyotiboruah@gmail.com" target="_blank">pranabjyotiboruah@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><div>Numan,<br></div>Details as requested:<br></div><div><br>___________<br>ml2_conf.ini:|<br>```````````````````<br>ovn_nb_connection = tcp:<a href="http://192.168.10.10:6641" target="_blank">192.168.10.10:6641</a><br>ovn_sb_connection = tcp:<a href="http://192.168.10.10:6642" target="_blank">192.168.10.10:6642</a><br>ovn_l3_mode = True<br>ovn_l3_scheduler = chance<br>ovn_l3_admin_net_cidr = <a href="http://169.254.128.0/30" target="_blank">169.254.128.0/30</a><br>ovn_native_dhcp = True<br><br></div><div>Note: 192.168.10.10 is the management ip of controller. Firewall, NetworkManager and SElinux are disabled on all nodes.<br></div><div><font face="arial, helvetica, sans-serif">____________________________<br>output of "ps -aef | grep ovsdb" :  |<br>``````````````````````````````<wbr>```````````````````<br>root     21220 21219  0 Feb01 ?        00:00:44 ovsdb-server /etc/openvswitch/conf.db -vconsole:emer -vsyslog:err -vfile:info --remote=punix:/var/run/openvs<wbr>witch/db.sock --private-key=db:Open_vSwitch,<wbr>SSL,private_key --certificate=db:Open_vSwitch,<wbr>SSL,certificate --bootstrap-ca-cert=db:Open_vS<wbr>witch,SSL,ca_cert --no-chdir --log-file=/var/log/openvswitc<wbr>h/ovsdb-server.log --pidfile=/var/run/openvswitch<wbr>/ovsdb-server.pid --detach --monitor<br><br>root     21324 21323  0 Feb01 ?        00:00:03 ovsdb-server --detach --monitor -vconsole:off --log-file=/var/log/openvswitc<wbr>h/ovsdb-server-nb.log --remote=punix:/var/run/openvs<wbr>witch/ovnnb_db.sock --pidfile=/var/run/openvswitch<wbr>/ovnnb_db.pid --remote=db:OVN_Northbound,NB_<wbr>Global,connections --unixctl=ovnnb_db.ctl --private-key=db:OVN_Northboun<wbr>d,SSL,private_key --certificate=db:OVN_Northboun<wbr>d,SSL,certificate --ca-cert=db:OVN_Northbound,SS<wbr>L,ca_cert /etc/openvswitch/ovnnb_db.db<br><br>root     21332 21331  0 Feb01 ?        00:00:03 ovsdb-server --detach --monitor -vconsole:off --log-file=/var/log/openvswitc<wbr>h/ovsdb-server-sb.log --remote=punix:/var/run/openvs<wbr>witch/ovnsb_db.sock --pidfile=/var/run/openvswitch<wbr>/ovnsb_db.pid --remote=db:OVN_Southbound,SB_<wbr>Global,connections --unixctl=ovnsb_db.ctl --private-key=db:OVN_Southboun<wbr>d,SSL,private_key --certificate=db:OVN_Southboun<wbr>d,SSL,certificate --ca-cert=db:OVN_Southbound,SS<wbr>L,ca_cert /etc/openvswitch/ovnsb_db.db<br><br></font></div><div><font face="arial, helvetica, sans-serif">Note: NB and SB databases are supposed to be listening on a tcp socket. But it isn't. <br><br></font></div></div></blockquote><div><br></div></span><div><div style="display:inline"><font face="arial, helvetica, sans-serif">​Running the below commands should solve your problem</font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif">  - ovn-nbctl set-connection ptcp:6641:192.168.10.10</font></div></div><div><font face="arial, helvetica, sans-serif"><div style="display:inline">  </div>- ovn-<div style="display:inline">​s​</div>bctl set-connection ptcp:664<div style="display:inline">​2​</div>:192.168.10.10</font></div><div><font face="arial, helvetica, sans-serif"><br></font></div><div><font face="arial, helvetica, sans-serif">L<div style="display:inline">​et me know if you still face problems.</div></font></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif"><br></font></div></div><div><font face="arial, helvetica, sans-serif"><div style="display:inline">The reason for this is this commit - </div><a href="https://github.com/openvswitch/ovs/commit/84d0ca5d00fe01b29163236d48fa0f9105687149" target="_blank">https://github.com/openvswitch<wbr>/ovs/commit/84d0ca5d00fe01b291<wbr>63236d48fa0f9105687149</a></font></div><div><font face="arial, helvetica, sans-serif"><br></font></div><div><font face="arial, helvetica, sans-serif">P<div style="display:inline">​lease have a look at it.</div></font></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif"><br></font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif">Thanks</font></div></div><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637HOEnZb"><font color="#888888"><div><div style="display:inline"><font face="arial, helvetica, sans-serif">Numan</font></div></div></font></span><div><div class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637h5"><div><span style="font-family:monospace,monospace"><div style="font-family:monospace,monospace;display:inline">​</div></span></div><div><font face="monospace, monospace"></font><span style="font-family:monospace,monospace">​</span></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><font face="arial, helvetica, sans-serif"></font>_________________________<br><font face="arial, helvetica, sans-serif"><font face="arial, helvetica, sans-serif">output of logs                       |<br>``````````````````````````````<wbr>`````````````<br></font>Neutron server log :<br>     - <a href="http://paste.openstack.org/show/597320/" target="_blank">http://paste.openstack.org/sho<wbr>w/597320/</a><br></font></div><div><font face="arial, helvetica, sans-serif">ovs-nothd log:<br>     - <a href="http://paste.openstack.org/show/597322/" target="_blank">http://paste.openstack.org/sho<wbr>w/597322/</a><br>ovs-vswitchd log on Controller:<br>      - <a href="http://paste.openstack.org/show/597324/" target="_blank">http://paste.openstack.org/sho<wbr>w/597324/</a><br>______________________________<wbr>___________<br></font></div><div><font face="arial, helvetica, sans-serif"># ovn-nbctl and ovn-sbctl show no output.           |<br>``````````````````````````````<wbr>``````````````````````````````<wbr>```````````<br></font></div><div><font face="arial, helvetica, sans-serif">______________________________<wbr>__________<br>OVN RPMS installation and download details:   |<br>``````````````````````````````<wbr>``````````````````````````````<wbr>``````````<br></font></div><div><font face="arial, helvetica, sans-serif">On controller:<br></font></div><div><font face="arial, helvetica, sans-serif"># git clone </font><a id="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-LPlnk244053" href="https://github.com/openvswitch/ovs.git" class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-OWAAutoLink" target="_blank">https://github.com/openvswitch<wbr>/ovs.git</a></div><div><font face="arial, helvetica, sans-serif"># </font><code><span>.<span style="font-family:arial,helvetica,sans-serif">/boot.sh</span></span><span style="font-family:arial,helvetica,sans-serif"><br>
<span># ./configure </span><br>
</span><div><span style="font-family:arial,helvetica,sans-serif"># make rpm-fedora RPMBUILD_OPT="--without check"<br></span>
</div><span style="font-family:arial,helvetica,sans-serif">
</span><span><span style="font-family:arial,helvetica,sans-serif"># make rpm-fedora-km</span>od</span></code><span style="font-family:arial,helvetica,sans-serif"><br></span></div><div><br></div><div>ALL nodes:<br></div><div><code><pre><span style="font-family:arial,helvetica,sans-serif"><code class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-bash"><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line"># <span style="font-family:arial,helvetica,sans-serif">rpm -i openvswitch-kmod-2.6.90-1.el7.<wbr>centos.x86_64.rpm
</span></span><span style="font-family:arial,helvetica,sans-serif"><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line">#  rpm -U openvswitch-2.6.90-1.el7.cento<wbr>s.x86_64.rpm<br></span></span></code><br></span><code><span style="font-family:arial,helvetica,sans-serif">Only Controller:</span><pre><span style="font-family:arial,helvetica,sans-serif"><code class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-bash"><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line"><span style="font-family:arial,helvetica,sans-serif"># rpm -i openvswitch-ovn-common-*.x86_6<wbr>4.rpm</span>
</span><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line"><span style="font-family:arial,helvetica,sans-serif"># rpm -i openvswitch-ovn-central-*.x86_<wbr>64.rpm</span><br></span></code></span></pre><pre><span style="font-family:arial,helvetica,sans-serif"><code class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-bash"><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line"><span style="font-family:arial,helvetica,sans-serif">Only Compute:</span><br></span></code></span></pre><pre><span style="font-family:arial,helvetica,sans-serif"><code><pre><code class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-bash"><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line"><span style="font-family:arial,helvetica,sans-serif"># rpm -i openvswitch-ovn-common-*.x86_6<wbr>4.rpm</span>
</span><span style="font-family:arial,helvetica,sans-serif"><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line"># rpm -i openvswitch-ovn-host-*.x86_64.<wbr>rpm<br><br></span></span></code></pre><pre><span style="font-family:arial,helvetica,sans-serif"># lsmod | grep open</span> <span style="font-family:arial,helvetica,sans-serif"> <br>     - shows all the required modules<br></span></pre><pre><span style="font-family:arial,helvetica,sans-serif">Let me know if you need anything else.</span></pre><pre><code class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-bash"><span style="font-family:arial,helvetica,sans-serif"><span class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-m_6029987945178098797gmail-line">Thanks. <br>pjb<br></span></span></code></pre></code></span><br></pre></code><br><br></pre></code></div><div><span style="font-family:arial,helvetica,sans-serif"><br></span><br></div><div><font face="arial, helvetica, sans-serif"><br></font></div><div><br></div></div><div class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-HOEnZb"><div class="m_-8386175870206977817m_1196792361470299631m_8934700045389942458gmail-m_5835186245870029637m_-409230226348209778gmail-h5"><div class="gmail_extra"><br><div class="gmail_quote">On 2 February 2017 at 15:23, Numan Siddique <span dir="ltr"><<a href="mailto:nusiddiq@redhat.com" target="_blank">nusiddiq@redhat.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><font face="arial, helvetica, sans-serif">Adding openstack-dev ML with [networking-ovn] tag.</font></div><div><font face="arial, helvetica, sans-serif"><br></font></div><div><font face="arial, helvetica, sans-serif">Please see comments inline</font></div><div style="font-family:monospace,monospace"><br></div><div class="gmail_extra"><br><div class="gmail_quote"><span>On Thu, Feb 2, 2017 at 3:01 PM, pranab boruah <span dir="ltr"><<a href="mailto:pranabjyotiboruah@gmail.com" target="_blank">pranabjyotiboruah@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><div><div><div><div><div><div>Hi guys, <br></div>We have a OpenStack multi-node lab. Everything was working, until I tried integrating with OVN.<br></div>Followed the official guide for integration:<br><br><a href="http://docs.openstack.org/developer/networking-ovn/install.html" target="_blank">http://docs.openstack.org/deve<wbr>loper/networking-ovn/install.h<wbr>tml</a><br><br></div>Lab details:<br></div>1 Controller, 2 computes<br><br></div>CentOS-7.3, OpenStack Newton, separate network for mgmt and tunnel. <br><br></div>Error details :<br></div>Neutron Server log shows :<br><br> ERROR networking_ovn.ovsdb.impl_idl_<wbr>ovn
 [-] OVS database connection to OVN_Northbound failed with error: 
'{u'error': u'unknown database', u'details': u'get_schema request 
specifies unknown database OVN_Northbound', u'syntax': u'["OVN_Northbound"]'}'.
 Verify that the OVS and OVN services are available and that the 
'ovn_nb_connection' and 'ovn_sb_connection' configuration options are 
correct.
<p>Stuck in this for more than 2 week. Starting to hate my life. 
Please help. Before I tried installing in physical machines, followed 
the same guide and installed in VMs. Everything was working then.</p>
<p>Solutions I tried:<br>
1) Completely fresh installing everything.<br>
2) Rebuilding ovs<br>
3) Check SB and NB configuration options in plugin.ini are exactly correct.</p><p><br></p></div></blockquote><div><br></div></span><div><div style="font-family:monospace,monospace;display:inline">​</div><div style="display:inline"><font face="arial, helvetica, sans-serif">Could you please share</font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif"> - the values of ovn_nb_connection and ovn_sb_connection defined in ml2_conf.ini.</font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif"> - the output of "ps -aef | grep ovsdb" on the node where you are running the ovn-northd server.</font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif"> - If you could share the output of neutron-server logs in some paste link, it would be helpful.</font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif"><br></font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif">Are you able to run "ovn-nbctl show" ? I presume you have installed the appropriate ovn RPMS ? If not so, please let me know how you have installed it.</font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif"><br></font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif">Thanks</font></div></div><div><div style="display:inline"><font face="arial, helvetica, sans-serif">Numan</font></div></div><div><div style="font-family:monospace,monospace;display:inline"><br></div></div><div><div style="font-family:monospace,monospace;display:inline">​</div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><span><div dir="ltr"><p></p><p>Let me know if additional details are required.</p><p><br></p><p>-pjb<br></p>

      
        <h2><br></h2><br></div>
<br></span>______________________________<wbr>_________________<br>
discuss mailing list<br>
<a href="mailto:discuss@openvswitch.org" target="_blank">discuss@openvswitch.org</a><br>
<a href="https://mail.openvswitch.org/mailman/listinfo/ovs-discuss" rel="noreferrer" target="_blank">https://mail.openvswitch.org/m<wbr>ailman/listinfo/ovs-discuss</a><br>
<br></blockquote></div><br></div></div>
</blockquote></div><br></div>
</div></div></blockquote></div></div></div><br></div></div>
</blockquote></div><br></div>
</div></div></blockquote></div></div></div><br></div></div>
</blockquote></div><br></div>
</div></div></blockquote></div><br></div>
</div></div></blockquote></div><br></div>