<html>
<head>
<!-- Template generated by Exclaimer Signature Manager Exchange Edition on 09:20:11 Tuesday, 16 June 2020 -->
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<style type="text/css">P.ImprintUniqueID {
        MARGIN: 0cm 0cm 0pt
}
LI.ImprintUniqueID {
        MARGIN: 0cm 0cm 0pt
}
DIV.ImprintUniqueID {
        MARGIN: 0cm 0cm 0pt
}
TABLE.ImprintUniqueIDTable {
        MARGIN: 0cm 0cm 0pt
}
DIV.Section1 {
        page: Section1
}
</style><style type="text/css" style="display:none;"><!-- P {margin-top:0;margin-bottom:0;} --></style>
</head>
<body dir="ltr">
<div id="divtagdefaultwrapper" dir="ltr" style="font-size: 12pt; color: rgb(0, 0, 0); font-family: Calibri, Helvetica, sans-serif, EmojiFont, "Apple Color Emoji", "Segoe UI Emoji", NotoColorEmoji, "Segoe UI Symbol", "Android Emoji", EmojiSymbols;">
<p><br>
</p>
<div style="color:rgb(0,0,0)">
<div id="divRplyFwdMsg" dir="ltr">
<div><span style="font-family:Calibri,Helvetica,sans-serif,serif,EmojiFont"> Hi,</span></div>
</div>
<div>
<div id="divtagdefaultwrapper" dir="ltr" style="font-size: 12pt; color: rgb(0, 0, 0); font-family: Calibri, Helvetica, sans-serif, EmojiFont, "Apple Color Emoji", "Segoe UI Emoji", NotoColorEmoji, "Segoe UI Symbol", "Android Emoji", EmojiSymbols;">
<div id="divRplyFwdMsg" style="font-family:Calibri,Helvetica,sans-serif,serif,EmojiFont; font-size:16px">
<br>
</div>
<div style="font-family:Calibri,Helvetica,sans-serif,serif,EmojiFont; font-size:16px">
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size:12pt">
<div style="margin-top:0px; margin-bottom:0px"><font size="3"><span style="font-size:12pt">I've wanted to use ceph storage as a backend for nova, glance and cinder. I've succeded to use ceph for cinder and glance but I couldn't at nova.</span></font><br>
</div>
<div style="margin-top:0px; margin-bottom:0px"><font size="3"><span style="font-size:12pt"><br>
</span></font></div>
<div><font color="black">
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size:12pt"><font color="black">
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size:12pt"><font color="black">
<div id="divRplyFwdMsg">
<div>I have seen this bug for "Stein" version --->  <a href="https://bugs.launchpad.net/nova/stein/+bug/1860990" class="OWAAutoLink" id="LPlnk695124" previewremoved="true">
https://bugs.launchpad.net/nova/stein/+bug/1860990</a></div>
<div id="LPBorder_GT_15922881412790.033253582813834504" style="margin-bottom:20px; overflow:auto; width:100%; text-indent:0px">
<table id="LPContainer_15922881412770.2846152453497315" cellspacing="0" style="width:90%; background-color:rgb(255,255,255); overflow:auto; padding-top:20px; padding-bottom:20px; margin-top:20px; border-top:1px dotted rgb(200,200,200); border-bottom:1px dotted rgb(200,200,200)">
<tbody>
<tr valign="top" style="border-spacing:0px">
<td id="TextCell_15922881412780.5940572476164825" colspan="2" style="vertical-align: top; padding: 0px; display: table-cell; position: relative;">
<div id="LPRemovePreviewContainer_15922881412780.4493810700994536"></div>
<div id="LPTitle_15922881412780.19284735352361526" style="top:0px; color:rgb(0,120,215); font-weight:400; font-size:21px; font-family:wf_segoe-ui_light,"Segoe UI Light","Segoe WP Light","Segoe UI","Segoe WP",Tahoma,Arial,sans-serif; line-height:21px">
<a id="LPUrlAnchor_15922881412780.6134672012865139" href="https://bugs.launchpad.net/nova/stein/+bug/1860990" target="_blank" style="text-decoration:none">Bug #1860990 “RBD image backend tries to flatten images even if ...” : Series stein : Bugs : OpenStack
 Compute (nova)</a></div>
<div id="LPMetadata_15922881412780.24947101788596004" style="margin:10px 0px 16px; color:rgb(102,102,102); font-weight:400; font-family:wf_segoe-ui_normal,"Segoe UI","Segoe WP",Tahoma,Arial,sans-serif; font-size:14px; line-height:14px">
bugs.launchpad.net</div>
<div id="LPDescription_15922881412780.4454765100300928" style="display:block; color:rgb(102,102,102); font-weight:400; font-family:wf_segoe-ui_normal,"Segoe UI","Segoe WP",Tahoma,Arial,sans-serif; font-size:14px; line-height:20px; max-height:100px; overflow:hidden">
When [DEFAULT]show_multiple_locations option is not set in glance, and both glance and nova use ceph as their backend, with properly configured accesses, nova will fail with the following exception: 2020-01-23 14:36:43.617 8647 ERROR nova.compute.manager [req-8021fd76-d5ab-4a9b-bd17-f5eb4d4faf62
 0e96a04f360644818632b7e46fe8d3e7 ac01daacc7424a40b8b464a163902dcb - default default] [instance: fa9e4118-1bb1-4d52-a2e1-9f61b0e20dc6] Instance failed to spawn: rbd.InvalidArgument: [errno 22] error f...</div>
</td>
</tr>
</tbody>
</table>
</div>
<br>
<div><br>
</div>
<div>After that, I've entered the nova-compute pod and I've run below commands;</div>
<div>apt install python-rbd</div>
<div>apt install python3-rbd</div>
<div>But it didn't work. I've gotten same error.</div>
<div>A solution must be on the K8s side. </div>
<div><br>
</div>
<div> </div>
error;</div>
<div id="divRplyFwdMsg">
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size:16px">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager   File "/var/lib/openstack/lib/python3.6/site-packages/nova/virt/libvirt/driver.py",
 line 1216, in _get_rbd_driver</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size:16px">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager     rbd_user=CONF.libvirt.rbd_user)</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size:16px">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager   File "/var/lib/openstack/lib/python3.6/site-packages/nova/virt/libvirt/storage/rbd_utils.py",
 line 128, in __init__</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size:16px">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager     raise RuntimeError(_('rbd
 python libraries not found'))</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size:16px">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager RuntimeError:
 rbd python libraries not found</span></font></div>
<br>
</div>
<div>
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size:12pt">
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span id="divtagdefaultwrapper" style="font-size:12pt">
<div style="margin-top:0px; margin-bottom:0px"> </div>
<div style="margin-top:0px; margin-bottom:0px"><br>
</div>
<div style="margin-top:0px; margin-bottom:0px">Nova compute image;<span style="color: rgba(0, 0, 0, 0.87); font-family: Roboto, "Helvetica Neue", sans-serif; font-size: 14px; background-color: rgb(242, 242, 242);">openstackhelm/nova:stein-ubuntu_bionic</span></div>
<div style="margin-top:0px; margin-bottom:0px"><span style="font-size:12pt"> </span><br>
</div>
</span></font></div>
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span style="font-size:12pt"><span style="font-family:Calibri,Helvetica,sans-serif,serif,EmojiFont; font-size:16px">Do
 you have any of ideas about that?</span><br>
</span></font></div>
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span style="font-size:12pt"><br>
</span></font></div>
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span id="divtagdefaultwrapper" style="font-size:12pt"><br>
<div style="margin-top:0px; margin-bottom:0px">Best Regards,</div>
<div style="margin-top:0px; margin-bottom:0px"><br>
</div>
</span></font></div>
</span></font></div>
</div>
</font></span></font></div>
</font></span></font></div>
</font></div>
</span></font></div>
</div>
<br>
<p></p>
<p><br>
</p>
<div id="Signature">
<div name="divtagdefaultwrapper" style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:; margin:0">
<table width="600" border="0" cellspacing="0" cellpadding="0" style="color:rgb(33,33,33); font-family:"Segoe UI","Segoe WP","Segoe UI WPC",Tahoma,Arial,sans-serif; font-size:15px; width:600px">
<tbody>
<tr>
<td width="100" style="width:100px"><br>
</td>
<td width="21" valign="bottom" style="width:21px; margin:0px 10px"></td>
<td width="464" valign="bottom" style="width:464px"></td>
</tr>
</tbody>
</table>
<table width="600" border="0" cellspacing="0" cellpadding="0" style="color:rgb(0,0,0); font-size:16px; background-color:rgb(255,255,255); width:600px">
<tbody>
<tr>
<td width="100" style="width:100px"></td>
<td width="21" valign="bottom" style="width:21px; margin:0px 10px">
<table width="600" border="0" cellspacing="0" cellpadding="0" style="color:rgb(0,0,0); font-size:16px; width:600px">
<tbody>
</tbody>
</table>
</td>
<td width="464" valign="bottom" style="width:464px"></td>
</tr>
</tbody>
</table>
<br>
</div>
</div>
</div>
<br>
<br>
<table cellspacing="0" cellpadding="0" width="600" border="0">
<tbody>
<tr>
<td width="100"><a title="" href="http://www.havelsan.com.tr"><img naturalheight="60" naturalwidth="100" alt="" style="user-select: none;" src="cid:image100503.PNG@466e127b.4087c56f"></a></td>
<td valign="bottom" width="21" style="margin:0px 10px"><img naturalheight="50" naturalwidth="1" alt="" style="user-select: none;" src="cid:image9bdac0.JPG@2b00e707.4cb2e69f"></td>
<td valign="bottom" width="464">
<table cellspacing="0" cellpadding="1" border="0">
<tbody>
<tr>
<td style="font-size:10px; font-family:'Trebuchet MS'; color:#3e3d3d"><span><b></b></span>Merve ASLAN<br>
SİSTEM MÜHENDİSİ</td>
</tr>
<tr>
<td style="font-size:10px; font-family:'Trebuchet MS'; white-space:nowrap; color:#3e3d3d">
Mustafa Kemal Mahallesi 2120 Cad. No:39 06510 Çankaya Ankara TÜRKİYE</td>
</tr>
<tr>
<td style="font-size:10px; font-family:'Trebuchet MS'; color:#3e3d3d">
<table>
<tbody>
<tr>
<td style="margin:0px 1px 0px 0px"><img naturalheight="14" naturalwidth="14" alt="" style="user-select: none;" src="cid:imagea7e2da.PNG@49bdc19b.4eabdf05"></td>
<td style="font-size:10px; font-family:'Trebuchet MS'; color:#3e3d3d; margin:4px 0px 0px">
+90 312 219 57 87 </td>
<td style="margin:0px 1px 0px 10px"><img naturalheight="12" naturalwidth="14" alt="" style="user-select: none;" src="cid:imaged072fc.PNG@50ceb928.4cb632fd"></td>
<td style="font-size:10px; font-family:'Trebuchet MS'; color:#3e3d3d; margin:4px 0px 0px">
+90 312 219 57 97 </td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
</td>
</tr>
<tr>
<td colspan="3" style="margin-top:5px"><img naturalheight="70" naturalwidth="400" width="400" height="100" style="border: 0px solid; user-select: none;" src="cid:image987ca6.JPG@943a32e9.4ebc9425"></td>
</tr>
<tr>
<td colspan="3" style="margin-top:5px"><span style="font-size:9px; font-family:'Trebuchet MS'; float:left; color:#ff0000">YASAL UYARI:
</span><a title="" href="https://havelsan.com.tr/sabit-sayfalar/eposta-yasal-uyari" style="font-size:9px; font-family:'Trebuchet MS'; color:#717171; text-decoration:none">Bu elektronik posta işbu linki kullanarak ulaşabileceğiniz Koşul ve Şartlar dokümanına
 tabidir. </a></td>
</tr>
<tr>
<td colspan="3" style="margin-top:1px"><span style="font-size:9px; font-family:'Trebuchet MS'; float:left; color:#ff0000">LEGAL NOTICE:
</span><a title="" href="https://havelsan.com.tr/sabit-sayfalar/eposta-yasal-uyari" style="font-size:9px; font-family:'Trebuchet MS'; color:#717171; text-decoration:none">This e-mail is subject to the Terms and Conditions document which can be accessed with
 this link. </a><br>
</td>
</tr>
<tr>
<td colspan="3">
<table cellspacing="2" cellpadding="0" border="0">
<tbody>
<tr>
<td><span style="font-size:10px; font-family:'Trebuchet MS'; color:#717171">Lütfen gerekmedikçe bu sayfa ve eklerini yazdırmayınız / Please consider the environment before printing this email</span></td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
<br>
</div>
</div>
</div>
<br>
<br>
<table cellspacing="0" cellpadding="0" width="600" border="0">
<tbody>
<tr>
<td width="100"><a title="" href="http://www.havelsan.com.tr"><img alt="" src="cid:image67f865.PNG@dcd7e1b0.4180ba2b"></a></td>
<td style="MARGIN: 0px 10px" valign="bottom" width="21"><img alt="" src="cid:imageb6c961.JPG@7775dc8f.41a1ef2f"></td>
<td valign="bottom" width="464">
<table cellspacing="0" cellpadding="1" border="0">
<tbody>
<tr>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d"><span><b></b></span>Nazan CENGİZ<br>
AR-GE MÜHENDİSİ</td>
</tr>
<tr>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; WHITE-SPACE: nowrap; COLOR: #3e3d3d">
Mustafa Kemal Mahallesi 2120 Cad. No:39 06510 Çankaya Ankara TÜRKİYE</td>
</tr>
<tr>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d">
<table>
<tbody>
<tr>
<td style="MARGIN: 0px 1px 0px 0px"><img alt="" src="cid:imageb768a7.PNG@ee5ec72e.449c6050"></td>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d; MARGIN: 4px 0px 0px">
+90 312 219 57 87 </td>
<td style="MARGIN: 0px 1px 0px 10px"><img alt="" src="cid:image01f028.PNG@9990722a.41b3ecb8"></td>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d; MARGIN: 4px 0px 0px">
+90 312 219 57 97 </td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
</td>
</tr>
<tr>
<td style="MARGIN-TOP: 5px" colspan="3"><img width="400" height="100" style="border: 0px Solid ; " src="cid:image996d9d.JPG@a25c3ae1.4fa7f973"></td>
</tr>
<tr>
<td style="MARGIN-TOP: 5px" colspan="3"><span style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; FLOAT: left; COLOR: #ff0000">YASAL UYARI:
</span><a title="" style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #717171; TEXT-DECORATION: none" href="https://havelsan.com.tr/sabit-sayfalar/eposta-yasal-uyari">Bu elektronik posta işbu linki kullanarak ulaşabileceğiniz Koşul ve Şartlar dokümanına
 tabidir. </a></td>
</tr>
<tr>
<td style="MARGIN-TOP: 1px" colspan="3"><span style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; FLOAT: left; COLOR: #ff0000">LEGAL NOTICE:
</span><a title="" style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #717171; TEXT-DECORATION: none" href="https://havelsan.com.tr/sabit-sayfalar/eposta-yasal-uyari">This e-mail is subject to the Terms and Conditions document which can be accessed
 with this link. </a><br>
</td>
</tr>
<tr>
<td colspan="3">
<table cellspacing="2" cellpadding="0" border="0">
<tbody>
<tr>
<td><span style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #717171">Lütfen gerekmedikçe bu sayfa ve eklerini yazdırmayınız / Please consider the environment before printing this email</span></td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
<br>
</body>
</html>