<html><head><meta http-equiv="Content-Type" content="text/html charset=iso-8859-1"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div>Hi Sylvain,</div><div><br></div><div>I agree, though I've confirmed that the UID and GID are consistent across both the compute nodes and my Glusterfs nodes. </div><div><br></div><div>JP</div><div><br></div><br><div><div>On Apr 11, 2013, at 11:22 AM, Sylvain Bauza <<a href="mailto:sylvain.bauza@digimind.com">sylvain.bauza@digimind.com</a>> wrote:</div><br class="Apple-interchange-newline"><blockquote type="cite">
  
    <meta content="text/html; charset=ISO-8859-1" http-equiv="Content-Type">
  
  <div text="#000000" bgcolor="#FFFFFF">
    <div class="moz-cite-prefix">Agree.<br>
      As for other shared FS, this is *highly* important to make sure
      Nova UID and GID are consistent in between all compute nodes. <br>
      If this is not the case, then you have to usermod all instances...<br>
      <br>
      -Sylvain<br>
      <br>
      Le 11/04/2013 16:49, Razique Mahroua a écrit :<br>
    </div>
    <blockquote cite="mid:835DCFB2-B8C1-419E-BF23-2FD7FAD8B83C@gmail.com" type="cite">
      <meta http-equiv="Content-Type" content="text/html;
        charset=ISO-8859-1">
      Hi JP,
      <div>my bet is that this is a writing permissions issue. Does nova
        has the right to write within the mounted directory?</div>
      <div><br>
        <div apple-content-edited="true"> <span class="Apple-style-span" style="font-size: medium; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: -webkit-auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; border-collapse: separate; font-family: 'Lucida Grande'; border-spacing: 0px; -webkit-text-decorations-in-effect: none; "><span class="Apple-style-span" style="font-weight: normal;
              font-family: Helvetica; "><b style="color: rgb(19, 112,
                138); ">Razique Mahroua</b></span><span class="Apple-style-span" style="font-weight: normal;
              font-family: Helvetica; color: rgb(19, 112, 138); "><b> - </b></span><span class="Apple-style-span" style="font-family: Helvetica; "><span class="Apple-style-span" style="font-weight: normal;
                font-family: Helvetica; "><b style="color: rgb(19, 112,
                  138); ">Nuage & Co</b></span><span class="Apple-style-span" style="border-collapse:
                separate; font-family: Helvetica; font-style: normal;
                font-variant: normal; letter-spacing: normal;
                line-height: normal; orphans: 2; text-align:
                -webkit-auto; text-indent: 0px; text-transform: none;
                white-space: normal; widows: 2; word-spacing: 0px;
                border-spacing: 0px; -webkit-text-decorations-in-effect:
                none; -webkit-text-size-adjust: auto;
                -webkit-text-stroke-width: 0px; font-size: medium; "><span class="Apple-style-span" style="font-family: Helvetica; font-size: medium; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: -webkit-auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; border-collapse: separate; border-spacing: 0px; -webkit-text-decorations-in-effect: none; "><span class="Apple-style-span" style="border-collapse:
                    separate; font-variant: normal; letter-spacing:
                    normal; line-height: normal; orphans: 2; text-align:
                    -webkit-auto; text-indent: 0px; text-transform:
                    none; white-space: normal; widows: 2; word-spacing:
                    0px; border-spacing: 0px;
                    -webkit-text-decorations-in-effect: none;
                    -webkit-text-size-adjust: auto;
                    -webkit-text-stroke-width: 0px; ">
                    <div style="font-weight: normal; font-family: Helvetica; font-size: medium; font-style: normal; "><font class="Apple-style-span" color="#13708a"><a moz-do-not-send="true" href="mailto:razique.mahroua@gmail.com">razique.mahroua@gmail.com</a></font></div>
                    <div style="font-family: Helvetica; font-size: medium; font-style: normal; "><font class="Apple-style-span" color="#13708a">Tel :

                        +33 9 72 37 94 15</font></div>
                  </span></span></span></span></span><br class="Apple-interchange-newline" style="font-family: Arial; font-size: medium; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: -webkit-auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; ">
          <br>
        </div>
        <br>
        <div>
          <div>Le 11 avr. 2013 à 16:36, John Paul Walters <<a moz-do-not-send="true" href="mailto:jwalters@isi.edu">jwalters@isi.edu</a>>

            a écrit :</div>
          <br class="Apple-interchange-newline">
          <blockquote type="cite">Hi,<br>
            <br>
            We've started implementing a Glusterfs-based solution for
            instance storage in order to provide live migration.  I've
            run into a strange problem when using a multi-node Gluster
            setup that I hope someone has a suggestion to resolve.<br>
            <br>
            I have a 12 node distributed/replicated Gluster cluster.  I
            can mount it to my client machines, and it seems to be
            working alright.  When I launch instances, the nova-compute
            log on the client machines are giving me two error messages:<br>
            <br>
            First is a qemu-kvm error: could not open disk image
            /exports/instances/instances/instance-00000242/disk: Invalid
            argument<br>
            (full output at <a moz-do-not-send="true" href="http://pastebin.com/i8vzWegJ">http://pastebin.com/i8vzWegJ</a>)<br>
            <br>
            The second error message comes a short time later ending
            with nova.openstack.common.rpc.amqp Invalid: Instance has
            already been created<br>
            (full output at <a moz-do-not-send="true" href="http://pastebin.com/6Ta4kkBN">http://pastebin.com/6Ta4kkBN</a>)<br>
            <br>
            This happens reliably with the multi-Gluster-node setup.
             Oddly, after creating a test Gluster volume composed of a
            single brick and single node, everything works fine.<br>
            <br>
            Does anyone have any suggestions?<br>
            <br>
            thanks,<br>
            JP<br>
            <br>
            <br>
            _______________________________________________<br>
            Mailing list: <a moz-do-not-send="true" href="https://launchpad.net/%7Eopenstack">https://launchpad.net/~openstack</a><br>
            Post to     : <a moz-do-not-send="true" href="mailto:openstack@lists.launchpad.net">openstack@lists.launchpad.net</a><br>
            Unsubscribe : <a moz-do-not-send="true" href="https://launchpad.net/%7Eopenstack">https://launchpad.net/~openstack</a><br>
            More help   : <a moz-do-not-send="true" href="https://help.launchpad.net/ListHelp">https://help.launchpad.net/ListHelp</a><br>
          </blockquote>
        </div>
        <br>
      </div>
      <br>
      <fieldset class="mimeAttachmentHeader"></fieldset>
      <br>
      <pre wrap="">_______________________________________________
Mailing list: <a class="moz-txt-link-freetext" href="https://launchpad.net/%7Eopenstack">https://launchpad.net/~openstack</a>
Post to     : <a class="moz-txt-link-abbreviated" href="mailto:openstack@lists.launchpad.net">openstack@lists.launchpad.net</a>
Unsubscribe : <a class="moz-txt-link-freetext" href="https://launchpad.net/%7Eopenstack">https://launchpad.net/~openstack</a>
More help   : <a class="moz-txt-link-freetext" href="https://help.launchpad.net/ListHelp">https://help.launchpad.net/ListHelp</a>
</pre>
    </blockquote>
    <br>
  </div>

</blockquote></div><br></body></html>