<div dir="ltr">Hi, Chao and Bob:<div><br></div><div>Thanks for your reply! </div><div>Seems the data is stored in:</div><div>/opt/stack/data/swift/drivers/sdb1/1/sdb1/objects/*</div><div><br></div><div>I just delete everything in that folder and reboot and restack, the disk space is freed now!  :)</div>

<div><br></div><div>Thanks very much!</div><div><br></div><div>Sisu</div><div><br></div><div><br></div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Tue, Jun 17, 2014 at 3:24 AM, Bob Ball <span dir="ltr"><<a href="mailto:bob.ball@citrix.com" target="_blank">bob.ball@citrix.com</a>></span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">





<div lang="EN-GB" link="blue" vlink="purple">
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">Hi Sisu,<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">Sorry – I understand now.  When you upload an image to glance it will get stored in the DevStackOSDomU by default, as that is where Swift is storing it’s data.<u></u><u></u></span></p>


<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">The data is likely in /opt/stack/data/swift but is likely still owned by the glance service account.  Unfortunately by rebooting the machine you caused devstack
 to restart.  It’s very possible that the glance image repository is not maintained between devstack runs – if so, the image could be ‘lost’ within swift.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">We typically only use very small virtual machines for testing (which is the primary purpose of the devstack-setup) which is why we have not seen such space
 used in the DomU.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">Bob<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p>
<div style="border:none;border-left:solid blue 1.5pt;padding:0cm 0cm 0cm 4.0pt">
<div>
<div style="border:none;border-top:solid #b5c4df 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="MsoNormal"><b><span lang="EN-US" style="font-size:10.0pt;font-family:"Tahoma","sans-serif"">From:</span></b><span lang="EN-US" style="font-size:10.0pt;font-family:"Tahoma","sans-serif""> Sisu Xi [mailto:<a href="mailto:xisisu@gmail.com" target="_blank">xisisu@gmail.com</a>]
<br>
<b>Sent:</b> 16 June 2014 16:36<br>
<b>To:</b> <a href="mailto:xs-devel@lists.xenserver.org" target="_blank">xs-devel@lists.xenserver.org</a><br>
<b>Cc:</b> <a href="mailto:openstack@lists.openstack.org" target="_blank">openstack@lists.openstack.org</a><br>
<b>Subject:</b> Re: [Openstack] [xs-devel] Delete the imported VM image to release space -- Sisu<u></u><u></u></span></p>
</div>
</div><div><div class="h5">
<p class="MsoNormal"><u></u> <u></u></p>
<div>
<p class="MsoNormal">Hi, Bob:<u></u><u></u></p>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">But when I port image into nova, I need to get it into DevStackOSDomU, right?<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">I just don't know why the disk is full. Here is the process:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">1. port self-build image using glance image-create;<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">2. shutdown machine<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">3. boot machine up, the disk space is gone, and I don't know how to free it.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Sisu<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
</div>
<div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><u></u> <u></u></p>
<div>
<p class="MsoNormal">On Mon, Jun 16, 2014 at 4:43 AM, Bob Ball <<a href="mailto:bob.ball@citrix.com" target="_blank">bob.ball@citrix.com</a>> wrote:<u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">Nothing should be downloading files to DevStackOSDomU; they get downloaded straight into dom0 when
 you create an image.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">Why do you think the missing disk space is related to mysql, or to /var?</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">Bob</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span lang="EN-US" style="font-size:10.0pt;font-family:"Tahoma","sans-serif"">From:</span></b><span lang="EN-US" style="font-size:10.0pt;font-family:"Tahoma","sans-serif"">
<a href="mailto:xs-devel-request@lists.xenserver.org" target="_blank">xs-devel-request@lists.xenserver.org</a> [mailto:<a href="mailto:xs-devel-request@lists.xenserver.org" target="_blank">xs-devel-request@lists.xenserver.org</a>]
<b>On Behalf Of </b>Sisu Xi<br>
<b>Sent:</b> 14 June 2014 23:19<br>
<b>To:</b> <a href="mailto:xs-devel@lists.xenserver.org" target="_blank">xs-devel@lists.xenserver.org</a>;
<a href="mailto:openstack@lists.openstack.org" target="_blank">openstack@lists.openstack.org</a><br>
<b>Subject:</b> [xs-devel] Delete the imported VM image to release space -- Sisu</span><u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
<div>
<p class="MsoNormal">Hi, all:<u></u><u></u></p>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I am using OpenStack with XenServer. I am using a pre-build image found in:<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><a href="http://downloads.vmd.citrix.com/OpenStack/" target="_blank">http://downloads.vmd.citrix.com/OpenStack/</a><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">The image file is devstack-havana.xva.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">This image has a disk size of 40G, I tried to import a self-build 15G image, it worked just fine.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">When I reboot the machine, the previously imported 15G image is gone (which is expected).<u></u><u></u></p>
</div>
<div>
<div>
<div>
<p class="MsoNormal">stack@DevStackOSDomU:~$ glance image-list<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">+--------------------------------------+---------------------------------+-------------+------------------+----------+--------+<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">| ID                                   | Name                            | Disk Format | Container Format | Size     | Status |<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">+--------------------------------------+---------------------------------+-------------+------------------+----------+--------+<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">| 22bcc4ed-c412-495d-995c-bdfc571e0991 | cirros-0.3.0-x86_64-disk        | vhd         | ovf              | 9220018  | active |<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">| 93aefd5f-3e75-4969-a013-e49e9c85163d | cirros-0.3.1-x86_64-uec         | ami         | ami              | 25165824 | active |<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">| 4d63a0d5-91e0-4fcb-944c-9fa25e7549e8 | cirros-0.3.1-x86_64-uec-kernel  | aki         | aki              | 4955792  | active |<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">| d8c961b7-5fe1-4520-8fa3-8bba97729eeb | cirros-0.3.1-x86_64-uec-ramdisk | ari         | ari              | 3714968  | active |<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">+--------------------------------------+---------------------------------+-------------+------------------+----------+--------+<u></u><u></u></p>
</div>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">However, the disk-space is not released. And I cannot find the previously imported image.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">---------result of df-ah---------<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">root@DevStackOSDomU:/var/lib/mysql# df -ah<u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal">Filesystem      Size  Used Avail Use% Mounted on<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">/dev/xvda1       38G   33G  3.1G  92% /<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">proc               0     0     0    - /proc<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">sysfs              0     0     0    - /sys<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">none               0     0     0    - /sys/fs/fuse/connections<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">none               0     0     0    - /sys/kernel/debug<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">none               0     0     0    - /sys/kernel/security<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">udev            1.5G  4.0K  1.5G   1% /dev<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">devpts             0     0     0    - /dev/pts<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">tmpfs           300M  288K  300M   1% /run<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">none            5.0M     0  5.0M   0% /run/lock<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">none            1.5G     0  1.5G   0% /run/shm<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">none               0     0     0    - /proc/xen<u></u><u></u></p>
</div>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I checked the /var/lib/mysql, and also tried to use "<span style="font-size:9.0pt;font-family:Consolas;color:#111111;background:#eeeeee">du -a /var | sort -n -r | head -n 10</span>"
 to find the top 10 files, but still cannot find any file larger than 1G.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Can anyone help me with this?<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Thanks very much!<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Sisu<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<p class="MsoNormal">--
<u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><img border="0" width="96" height="96" src="https://dl.dropboxusercontent.com/u/268069/Sisu_Contact.jpeg"><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><b>Sisu Xi, PhD Candidate</b><u></u><u></u></p>
</div>
<p class="MsoNormal"><br>
<a href="http://www.cse.wustl.edu/~xis/" target="_blank">http://www.cse.wustl.edu/~xis/</a><br>
Department of Computer Science and Engineering<br>
Campus Box 1045<br>
Washington University in St. Louis<br>
One Brookings Drive<br>
St. Louis, MO 63130<u></u><u></u></p>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<u></u><u></u></p>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<p class="MsoNormal">-- <u></u><u></u></p>
<div>
<div>
<p class="MsoNormal"><img border="0" width="96" height="96" src="https://dl.dropboxusercontent.com/u/268069/Sisu_Contact.jpeg"><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal"><b>Sisu Xi, PhD Candidate</b><u></u><u></u></p>
</div>
<p class="MsoNormal"><br>
<a href="http://www.cse.wustl.edu/~xis/" target="_blank">http://www.cse.wustl.edu/~xis/</a><br>
Department of Computer Science and Engineering<br>
Campus Box 1045<br>
Washington University in St. Louis<br>
One Brookings Drive<br>
St. Louis, MO 63130<u></u><u></u></p>
</div>
</div>
</div></div></div>
</div>
</div>

</blockquote></div><br><br clear="all"><div><br></div>-- <br><div dir="ltr"><div><img src="https://dl.dropboxusercontent.com/u/268069/Sisu_Contact.jpeg" width="96" height="96"><br></div><div><br></div><div><b>Sisu Xi, PhD Candidate</b><br>

</div><br><a href="http://www.cse.wustl.edu/~xis/" target="_blank">http://www.cse.wustl.edu/~xis/</a><br>Department of Computer Science and Engineering<br>Campus Box 1045<br>Washington University in St. Louis<br>One Brookings Drive<br>

St. Louis, MO 63130</div>
</div>