<html>
<head>
<!-- Template generated by Exclaimer Signature Manager Exchange Edition on 09:16:45 Tuesday, 16 June 2020 -->
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<style type="text/css">P.ImprintUniqueID {
        MARGIN: 0cm 0cm 0pt
}
LI.ImprintUniqueID {
        MARGIN: 0cm 0cm 0pt
}
DIV.ImprintUniqueID {
        MARGIN: 0cm 0cm 0pt
}
TABLE.ImprintUniqueIDTable {
        MARGIN: 0cm 0cm 0pt
}
DIV.Section1 {
        page: Section1
}
</style><style type="text/css" style="display:none;"><!-- P {margin-top:0;margin-bottom:0;} --></style>
</head>
<body dir="ltr">
<div id="divtagdefaultwrapper" style="font-size:12pt;color:#000000;font-family:Calibri,Helvetica,sans-serif;" dir="ltr">
<p></p>
<div id="divRplyFwdMsg" style="font-family: Calibri, Helvetica, sans-serif, serif, EmojiFont; font-size: 16px;">
 Hi,</div>
<div id="divRplyFwdMsg" style="font-family: Calibri, Helvetica, sans-serif, serif, EmojiFont; font-size: 16px;">
<br>
</div>
<div style="font-family: Calibri, Helvetica, sans-serif, serif, EmojiFont; font-size: 16px;">
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size: 12pt;">
<div style="margin-top: 0px; margin-bottom: 0px;"><font size="3"><span style="font-size: 12pt;">I've wanted to use ceph storage as a backend for nova, glance and cinder. I've succeded to use ceph for cinder and glance but I couldn't at nova.</span></font><br>
</div>
<div style="margin-top: 0px; margin-bottom: 0px;"><font size="3"><span style="font-size: 12pt;"><br>
</span></font></div>
<div><font color="black">
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size: 12pt;"><font color="black">
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size: 12pt;"><font color="black">
<div id="divRplyFwdMsg">
<div>I have seen this bug for "Stein" version --->  <a href="https://bugs.launchpad.net/nova/stein/+bug/1860990" class="OWAAutoLink" id="LPlnk695124" previewremoved="true">
https://bugs.launchpad.net/nova/stein/+bug/1860990</a></div>
<div id="LPBorder_GT_15922881412790.033253582813834504" style="margin-bottom: 20px; overflow: auto; width: 100%; text-indent: 0px;">
<table id="LPContainer_15922881412770.2846152453497315" role="presentation" cellspacing="0" style="width: 90%; background-color: rgb(255, 255, 255); position: relative; overflow: auto; padding-top: 20px; padding-bottom: 20px; margin-top: 20px; border-top: 1px dotted rgb(200, 200, 200); border-bottom: 1px dotted rgb(200, 200, 200);">
<tbody>
<tr valign="top" style="border-spacing: 0px;">
<td id="TextCell_15922881412780.5940572476164825" colspan="2" style="vertical-align: top; position: relative; padding: 0px; display: table-cell;">
<div id="LPRemovePreviewContainer_15922881412780.4493810700994536"></div>
<div id="LPTitle_15922881412780.19284735352361526" style="top: 0px; color: rgb(0, 120, 215); font-weight: 400; font-size: 21px; font-family: wf_segoe-ui_light, "Segoe UI Light", "Segoe WP Light", "Segoe UI", "Segoe WP", Tahoma, Arial, sans-serif; line-height: 21px;">
<a id="LPUrlAnchor_15922881412780.6134672012865139" href="https://bugs.launchpad.net/nova/stein/+bug/1860990" target="_blank" style="text-decoration: none;">Bug #1860990 “RBD image backend tries to flatten images even if ...” : Series stein : Bugs : OpenStack
 Compute (nova)</a></div>
<div id="LPMetadata_15922881412780.24947101788596004" style="margin: 10px 0px 16px; color: rgb(102, 102, 102); font-weight: 400; font-family: wf_segoe-ui_normal, "Segoe UI", "Segoe WP", Tahoma, Arial, sans-serif; font-size: 14px; line-height: 14px;">
bugs.launchpad.net</div>
<div id="LPDescription_15922881412780.4454765100300928" style="display: block; color: rgb(102, 102, 102); font-weight: 400; font-family: wf_segoe-ui_normal, "Segoe UI", "Segoe WP", Tahoma, Arial, sans-serif; font-size: 14px; line-height: 20px; max-height: 100px; overflow: hidden;">
When [DEFAULT]show_multiple_locations option is not set in glance, and both glance and nova use ceph as their backend, with properly configured accesses, nova will fail with the following exception: 2020-01-23 14:36:43.617 8647 ERROR nova.compute.manager [req-8021fd76-d5ab-4a9b-bd17-f5eb4d4faf62
 0e96a04f360644818632b7e46fe8d3e7 ac01daacc7424a40b8b464a163902dcb - default default] [instance: fa9e4118-1bb1-4d52-a2e1-9f61b0e20dc6] Instance failed to spawn: rbd.InvalidArgument: [errno 22] error f...</div>
</td>
</tr>
</tbody>
</table>
</div>
<br>
<div><br>
</div>
<div>After that, I've entered the nova-compute pod and I've run below commands;</div>
<div>apt install python-rbd</div>
<div>apt install python3-rbd</div>
<div>But it didn't work. I've gotten same error.</div>
<div>A solution must be on the K8s side. </div>
<div><br>
</div>
<div> </div>
error;</div>
<div id="divRplyFwdMsg">
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size: 16px;">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager   File "/var/lib/openstack/lib/python3.6/site-packages/nova/virt/libvirt/driver.py",
 line 1216, in _get_rbd_driver</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size: 16px;">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager     rbd_user=CONF.libvirt.rbd_user)</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size: 16px;">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager   File "/var/lib/openstack/lib/python3.6/site-packages/nova/virt/libvirt/storage/rbd_utils.py",
 line 128, in __init__</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size: 16px;">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager     raise RuntimeError(_('rbd
 python libraries not found'))</span></font></div>
<div><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="2"><span style="font-size: 16px;">2020-06-15 12:34:23.617 21543 ERROR nova.compute.manager RuntimeError:
 rbd python libraries not found</span></font></div>
<br>
</div>
<div>
<div id="divtagdefaultwrapper"><font size="3" color="black"><span id="divtagdefaultwrapper" style="font-size: 12pt;">
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span id="divtagdefaultwrapper" style="font-size: 12pt;">
<div style="margin-top: 0px; margin-bottom: 0px;"> </div>
<div style="margin-top: 0px; margin-bottom: 0px;"><br>
</div>
<div style="margin-top: 0px; margin-bottom: 0px;">Nova compute image;</div>
<div style="margin-top: 0px; margin-bottom: 0px;"><img data-custom="AAMkADY1OTg0YmI1LTQ1MGYtNGQxZC04OWYzLWVhOWZhODM4ODNlYgBGAAAAAACyOjZETOT%2BSLBOdR8HNL4%2FBwAW9YEQ1XBlSa4MulcnIoanAAAAAAEMAABXseUD7%2FBSQ4v5zJGK3j01AACSj8NyAAABEgAQAJcFzR2LkstBsdmT8JuVsTU%3D" naturalheight="179" naturalwidth="1528" id="img677456" style="max-width: 1528px; max-height: 179px; width: 1083.24px; user-select: none;" src="cid:e78156d8-4edf-4abd-8585-7e346fb1f879"><br>
</div>
<div style="margin-top: 0px; margin-bottom: 0px;"> </div>
</span></font></div>
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span style="font-size: 12pt;"><span style="font-family: Calibri, Helvetica, sans-serif, serif, EmojiFont; font-size: 16px;">Do
 you have any of ideas about that?</span><br>
</span></font></div>
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span style="font-size: 12pt;"><br>
</span></font></div>
<div id="divtagdefaultwrapper"><font face="Calibri,Helvetica,sans-serif,EmojiFont,Apple Color Emoji,Segoe UI Emoji,NotoColorEmoji,Segoe UI Symbol,Android Emoji,EmojiSymbols" size="3" color="black"><span id="divtagdefaultwrapper" style="font-size: 12pt;"><br>
<div style="margin-top: 0px; margin-bottom: 0px;">Best Regards,</div>
<div style="margin-top: 0px; margin-bottom: 0px;"><br>
</div>
</span></font></div>
</span></font></div>
</div>
</font></span></font></div>
</font></span></font></div>
</font></div>
</span></font></div>
</div>
<br>
<p></p>
<p><br>
</p>
<div id="Signature">
<div name="divtagdefaultwrapper" style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:; margin:0">
<table width="600" border="0" cellspacing="0" cellpadding="0" style="color:rgb(33,33,33); font-family:"Segoe UI","Segoe WP","Segoe UI WPC",Tahoma,Arial,sans-serif; font-size:15px; width:600px">
<tbody>
<tr>
<td width="100" style="width:100px"><br>
</td>
<td width="21" valign="bottom" style="width:21px; margin:0px 10px"></td>
<td width="464" valign="bottom" style="width:464px"></td>
</tr>
</tbody>
</table>
<table width="600" border="0" cellspacing="0" cellpadding="0" style="color:rgb(0,0,0); font-size:16px; background-color:rgb(255,255,255); width:600px">
<tbody>
<tr>
<td width="100" style="width:100px"></td>
<td width="21" valign="bottom" style="width:21px; margin:0px 10px">
<table width="600" border="0" cellspacing="0" cellpadding="0" style="color:rgb(0,0,0); font-size:16px; width:600px">
<tbody>
</tbody>
</table>
</td>
<td width="464" valign="bottom" style="width:464px"></td>
</tr>
</tbody>
</table>
<br>
</div>
</div>
</div>
<br>
<br>
<table cellspacing="0" cellpadding="0" width="600" border="0">
<tbody>
<tr>
<td width="100"><a title="" href="http://www.havelsan.com.tr"><img alt="" src="cid:image100503.PNG@466e127b.4087c56f"></a></td>
<td style="MARGIN: 0px 10px" valign="bottom" width="21"><img alt="" src="cid:image9bdac0.JPG@2b00e707.4cb2e69f"></td>
<td valign="bottom" width="464">
<table cellspacing="0" cellpadding="1" border="0">
<tbody>
<tr>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d"><span><b></b></span>Merve ASLAN<br>
SİSTEM MÜHENDİSİ</td>
</tr>
<tr>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; WHITE-SPACE: nowrap; COLOR: #3e3d3d">
Mustafa Kemal Mahallesi 2120 Cad. No:39 06510 Çankaya Ankara TÜRKİYE</td>
</tr>
<tr>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d">
<table>
<tbody>
<tr>
<td style="MARGIN: 0px 1px 0px 0px"><img alt="" src="cid:imagea7e2da.PNG@49bdc19b.4eabdf05"></td>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d; MARGIN: 4px 0px 0px">
+90 312 219 57 87 </td>
<td style="MARGIN: 0px 1px 0px 10px"><img alt="" src="cid:imaged072fc.PNG@50ceb928.4cb632fd"></td>
<td style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #3e3d3d; MARGIN: 4px 0px 0px">
+90 312 219 57 97 </td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
</td>
</tr>
<tr>
<td style="MARGIN-TOP: 5px" colspan="3"><img width="400" height="100" style="border: 0px Solid ; " src="cid:image987ca6.JPG@943a32e9.4ebc9425"></td>
</tr>
<tr>
<td style="MARGIN-TOP: 5px" colspan="3"><span style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; FLOAT: left; COLOR: #ff0000">YASAL UYARI:
</span><a title="" style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #717171; TEXT-DECORATION: none" href="https://havelsan.com.tr/sabit-sayfalar/eposta-yasal-uyari">Bu elektronik posta işbu linki kullanarak ulaşabileceğiniz Koşul ve Şartlar dokümanına
 tabidir. </a></td>
</tr>
<tr>
<td style="MARGIN-TOP: 1px" colspan="3"><span style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; FLOAT: left; COLOR: #ff0000">LEGAL NOTICE:
</span><a title="" style="FONT-SIZE: 9px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #717171; TEXT-DECORATION: none" href="https://havelsan.com.tr/sabit-sayfalar/eposta-yasal-uyari">This e-mail is subject to the Terms and Conditions document which can be accessed
 with this link. </a><br>
</td>
</tr>
<tr>
<td colspan="3">
<table cellspacing="2" cellpadding="0" border="0">
<tbody>
<tr>
<td><span style="FONT-SIZE: 10px; FONT-FAMILY: 'Trebuchet MS'; COLOR: #717171">Lütfen gerekmedikçe bu sayfa ve eklerini yazdırmayınız / Please consider the environment before printing this email</span></td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
<br>
</body>
</html>