<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:Wingdings;
        panose-1:5 0 0 0 0 0 0 0 0 0;}
@font-face
        {font-family:SimSun;
        panose-1:2 1 6 0 3 1 1 1 1 1;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:SimSun;
        panose-1:2 1 6 0 3 1 1 1 1 1;}
@font-face
        {font-family:"Segoe Script";
        panose-1:2 11 5 4 2 0 0 0 0 3;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
p.MsoListParagraph, li.MsoListParagraph, div.MsoListParagraph
        {mso-style-priority:34;
        margin-top:0cm;
        margin-right:0cm;
        margin-bottom:0cm;
        margin-left:36.0pt;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
span.EmailStyle18
        {mso-style-type:personal;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
span.EmailStyle19
        {mso-style-type:personal;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
span.EmailStyle20
        {mso-style-type:personal;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
span.EmailStyle21
        {mso-style-type:personal-reply;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 90.0pt 72.0pt 90.0pt;}
div.WordSection1
        {page:WordSection1;}
/* List Definitions */
@list l0
        {mso-list-id:741952709;
        mso-list-type:hybrid;
        mso-list-template-ids:1181640786 67698705 67698713 67698715 67698703 67698713 67698715 67698703 67698713 67698715;}
@list l0:level1
        {mso-level-text:"%1\)";
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-18.0pt;}
@list l0:level2
        {mso-level-number-format:alpha-lower;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-18.0pt;}
@list l0:level3
        {mso-level-number-format:roman-lower;
        mso-level-tab-stop:none;
        mso-level-number-position:right;
        text-indent:-9.0pt;}
@list l0:level4
        {mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-18.0pt;}
@list l0:level5
        {mso-level-number-format:alpha-lower;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-18.0pt;}
@list l0:level6
        {mso-level-number-format:roman-lower;
        mso-level-tab-stop:none;
        mso-level-number-position:right;
        text-indent:-9.0pt;}
@list l0:level7
        {mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-18.0pt;}
@list l0:level8
        {mso-level-number-format:alpha-lower;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-18.0pt;}
@list l0:level9
        {mso-level-number-format:roman-lower;
        mso-level-tab-stop:none;
        mso-level-number-position:right;
        text-indent:-9.0pt;}
ol
        {margin-bottom:0cm;}
ul
        {margin-bottom:0cm;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal"><span style="color:#1F497D">Hi all,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="color:#1F497D">Adopted laserjetyang’s suggestion,  disabled DHCP agent HA (because this feature is not stable in current grizzly release and will be completed in h-3 release, we use single dhcp mode instead) and set agent_down_time
 to 15 secs, “<b>no active DHCP agent</b>” issue disappeared. But we still meet the some VM of one request cannot get IP issue. I gathered the logs and configs, need somebody help.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="color:#1F497D"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="color:#1F497D">Configs files:<o:p></o:p></span></p>
<p class="MsoNormal"><a href="https://gist.github.com/yaoyaminaco/6119120">https://gist.github.com/yaoyaminaco/6119120</a><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><span style="color:#1F497D">Error logs:<o:p></o:p></span></p>
<p class="MsoListParagraph" style="text-indent:-18.0pt;mso-list:l0 level1 lfo2"><![if !supportLists]><b><span style="color:#1F497D"><span style="mso-list:Ignore">1)<span style="font:7.0pt "Times New Roman"">     
</span></span></span></b><![endif]><b><span style="color:#1F497D">quantum/dhcp-agent.log<o:p></o:p></span></b></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">2013-07-30 10:36:14    ERROR [quantum.agent.dhcp_agent] Failed reporting state!<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">Traceback (most recent call last):<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/agent/dhcp_agent.py", line 702, in _report_state<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self.agent_state)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/agent/rpc.py", line 66, in report_state<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">   topic=self.topic)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/proxy.py", line 80, in call<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return rpc.call(context, self._get_topic(topic), msg, timeout)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/__init__.py", line 140, in call<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return _get_impl().call(CONF, context, topic, msg, timeout)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/impl_kombu.py", line 798, in call<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    rpc_amqp.get_connection_pool(conf, Connection))<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 613, in call<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    rv = list(rv)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 562, in __iter__<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    raise result<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><b><span style="font-size:9.0pt;color:red">RemoteError: Remote error: AMQPConnectionException (503, u"COMMAND_INVALID - second 'channel.open' seen", (20, 10), 'Channel.open')</span></b><b><span style="font-size:9.0pt;color:#1F497D"><o:p></o:p></span></b></p>
<p class="MsoListParagraph"><b><span style="color:#1F497D"><o:p> </o:p></span></b></p>
<p class="MsoListParagraph" style="text-indent:-18.0pt;mso-list:l0 level1 lfo2"><![if !supportLists]><b><span style="color:#1F497D"><span style="mso-list:Ignore">2)<span style="font:7.0pt "Times New Roman"">     
</span></span></span></b><![endif]><b><span style="color:#1F497D">quantum/server.log<o:p></o:p></span></b></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">2013-07-30 10:35:58    ERROR [quantum.openstack.common.rpc.amqp] Exception during message handling<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">Traceback (most recent call last):<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 436, in _process_data<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    ctxt.reply(rval, None, connection_pool=self.connection_pool)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 272, in reply<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    reply, failure, ending, log_failure)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 250, in msg_reply<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    conn.direct_send(msg_id, rpc_common.serialize_msg(msg))<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 152, in __exit__<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self._done()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 141, in _done<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self.connection.reset()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/impl_kombu.py", line 595, in reset<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self.channel.close()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/kombu/transport/pyamqplib.py", line 201, in close<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    super(Channel, self).close()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/channel.py", line 194, in close<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    (20, 41),    # Channel.close_ok<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/abstract_channel.py", line 97, in wait<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return self.dispatch_method(method_sig, args, content)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/abstract_channel.py", line 115, in dispatch_method<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return amqp_method(self, args)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/channel.py", line 273, in _close<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    (class_id, method_id))<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><b><span style="font-size:9.0pt;color:red">AMQPChannelException: (404, u"NOT_FOUND - no exchange '1bc587b773be4df8b0d956e4f02cf006' in vhost '/'", (60, 40), 'Channel.basic_publish')<o:p></o:p></span></b></p>
<p class="MsoNormal" style="margin-left:18.0pt"><b><span style="font-size:9.0pt;color:red">2013-07-30 10:35:59    ERROR [quantum.openstack.common.rpc.common] Returning exception (404, u"NOT_FOUND - no exchange '1bc587b773be4df8b0d956e4f02cf006' in vhost '/'",
 (60, 40), 'Channel.basic_publish') to caller</span></b><span style="font-size:9.0pt;color:red"><o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">…<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">2013-07-30 10:36:06    ERROR [quantum.openstack.common.rpc.amqp] Exception during message handling<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">Traceback (most recent call last):<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 436, in _process_data<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    ctxt.reply(rval, None, connection_pool=self.connection_pool)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 272, in reply<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    reply, failure, ending, log_failure)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 250, in msg_reply<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    conn.direct_send(msg_id, rpc_common.serialize_msg(msg))<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 152, in __exit__<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self._done()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/amqp.py", line 141, in _done<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self.connection.reset()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/quantum/openstack/common/rpc/impl_kombu.py", line 596, in reset<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self.channel = self.connection.channel()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/kombu/connection.py", line 159, in channel<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    chan = self.transport.create_channel(self.connection)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/kombu/transport/pyamqplib.py", line 235, in create_channel<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return connection.channel()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/kombu/transport/pyamqplib.py", line 144, in channel<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return Channel(self, channel_id)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/kombu/transport/pyamqplib.py", line 183, in __init__<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    super(Channel, self).__init__(*args, **kwargs)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/channel.py", line 82, in __init__<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self._x_open()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/channel.py", line 471, in _x_open<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    (20, 11),    # Channel.open_ok<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/abstract_channel.py", line 95, in wait<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self.channel_id, allowed_methods)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/connection.py", line 231, in _wait_method<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    self.wait()<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D"> File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/abstract_channel.py", line 97, in wait<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return self.dispatch_method(method_sig, args, content)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/abstract_channel.py", line 115, in dispatch_method<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    return amqp_method(self, args)<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">  File "/usr/lib/python2.7/dist-packages/amqplib/client_0_8/connection.py", line 380, in _close<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:#1F497D">    raise AMQPConnectionException(reply_code, reply_text, (class_id, method_id))<o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><b><span style="font-size:9.0pt;color:red">AMQPConnectionException: (503, u"COMMAND_INVALID - second 'channel.open' seen", (20, 10), 'Channel.open')<o:p></o:p></span></b></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="font-size:9.0pt;color:red"><o:p> </o:p></span></p>
<p class="MsoNormal" style="margin-left:18.0pt"><b><span style="font-size:9.0pt;color:red">2013-07-26 20:59:43  WARNING [quantum.scheduler.dhcp_agent_scheduler] No enabled DHCP agent on host SHNetworkNode<o:p></o:p></span></b></p>
<p class="MsoNormal" style="margin-left:18.0pt"><span style="color:#1F497D"><o:p> </o:p></span></p>
<div>
<p class="MsoNormal"><span style="color:#1F497D">Best wishes,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:"Segoe Script","sans-serif";color:#1F497D">Yale Yuan<o:p></o:p></span></p>
</div>
<p class="MsoNormal"><span style="color:#1F497D"><o:p> </o:p></span></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="MsoNormal"><b>From:</b> Yuan, Ye A <br>
<b>Sent:</b> Thursday, July 25, 2013 7:58 PM<br>
<b>To:</b> <a href="mailto:openstack@lists.launchpad.net">openstack@lists.launchpad.net</a><br>
<b>Subject:</b> RE: VM cannot get IP in Big cluster (grizzly, quantum, multi-host, gre)<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Hi all,<o:p></o:p></p>
<p class="MsoNormal">Our team has built 15+ compute nodes Openstack cluster, and with 200+ VM running on it. But we met a stranger issue and boring me several work days. Could anyone help me ?
<span style="font-family:Wingdings">J</span><o:p></o:p></p>
<p class="MsoNormal">The phenomenon is: if we create multi VMs in one request some or all of them cannot get IP from DHCP agent. Logs in quantum-server report
<b>“no active DHCP agent”</b> .I read official doc and enabled DHCP HA, but all DHCP agents for network are inactive while instance boot and suddenly change to active. “no active DHCP agent” still occurs. In other words, the agent heartbeat always go active
 and immediately go inactive.<b> </b>I set agent_down_time = 120 but does not work
<span style="font-family:Wingdings">L</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:#1F497D">My quantum server log is very big and if anyone interesting this issue , I will send it to you.</span><o:p></o:p></p>
<p class="MsoNormal">Openstack is Grizzly, quantum using GRE mode, multi-host is enabled.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Best wishes,<o:p></o:p></p>
<p class="MsoNormal"><span style="font-family:"Segoe Script","sans-serif"">Yale Yuan<o:p></o:p></span></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</body>
</html>