<div dir="ltr"><div>Hi,<br></div><div><br></div><div>Firstly, apologies for the cross post from openstack@l.o.o but I think this is a more appropriate mailing list and I'd like to add some more information.</div><div><br></div><div>I have been running tempest full against a Keystone v3 enabled cloud using the stable newton policy.v3cloudsample.json *1 and it is failing for me. I then checked what was happening at Keystone gate *2 and saw that the v3 gate jobs appear to be using the old policy.json *3 which I assume is deprecated for v3 as granting the admin role on anything in-effect gives a user cloud-admin.</div><div><br></div><div>My questions are:</div><div>1) Should gate be using policy.v3cloudsample.json to run v3 tests?</div><div>2) Should I expect a tempest full run to pass against a Newton deployment using policy.v3cloudsample.json ?</div><div><br></div><div>What I'm seeing is that some tests (like tempest.api.compute.admin.test_quotas) fail when they try and list_domains. This seems to be because the test creates:</div><div><br></div><div>1) A new project in the admin domain</div><div>2) A new user in the admin domain</div><div>3) Grants the admin role on the new project to the new user.</div><div><br></div><div>The test then authenticates with the new users credentials and attempts to list_domains. The policy.json, however, has:</div><div><br></div><div><br></div><div>    "cloud_admin": "role:admin and (token.is_admin_project:True or domain_id:363ab68785c24c81a784edca1bceb935)",</div><div>...</div><div>    "identity:list_domains": "rule:cloud_admin",</div><div><br></div><div>From tempest I see:</div><div><br></div><div>======================================================================</div><div>FAIL: tempest.api.compute.admin.test_quotas.QuotasAdminTestJSON.test_delete_quota[id-389d04f0-3a41-405f-9317-e5f86e3c44f0]</div><div>tags: worker-0</div><div>----------------------------------------------------------------------</div><div>Empty attachments:</div><div>  stderr</div><div>  stdout</div><div><br></div><div>pythonlogging:'': {{{2017-01-23 15:57:09,806 2014 INFO     [tempest.lib.common.rest_client] Request (QuotasAdminTestJSON:test_delete_quota): 403 GET <a href="http://10.5.36.109:35357/v3/domains?name=admin_domain">http://10.5.36.109:35357/v3/domains?name=admin_domain</a> 0.066s}}}</div><div><br></div><div>Traceback (most recent call last):</div><div>  File "tempest/api/compute/admin/test_quotas.py", line 128, in test_delete_quota</div><div>    project = self.identity_utils.create_project(name=project_name,</div><div>  File "tempest/test.py", line 470, in identity_utils</div><div>    project_domain_name=domain)</div><div>  File "tempest/lib/common/cred_client.py", line 210, in get_creds_client</div><div>    roles_client, domains_client, project_domain_name)</div><div>  File "tempest/lib/common/cred_client.py", line 142, in __init__</div><div>    name=domain_name)['domains'][0]</div><div>  File "tempest/lib/services/identity/v3/domains_client.py", line 57, in list_domains</div><div>    resp, body = self.get(url)</div><div>  File "tempest/lib/common/rest_client.py", line 290, in get</div><div>    return self.request('GET', url, extra_headers, headers)</div><div>  File "tempest/lib/common/rest_client.py", line 663, in request</div><div>    self._error_checker(resp, resp_body)</div><div>  File "tempest/lib/common/rest_client.py", line 755, in _error_checker</div><div>    raise exceptions.Forbidden(resp_body, resp=resp)</div><div>tempest.lib.exceptions.Forbidden: Forbidden</div><div>Details: {u'message': u'You are not authorized to perform the requested action: identity:list_domains', u'code': 403, u'title': u'Forbidden'}</div><div><br></div><div>In the keystone log I see:</div><div><br></div><div>(keystone.policy.backends.rules): 2017-01-23 15:35:57,198 DEBUG enforce identity:list_domains: {'is_delegated_auth': False, </div><div>'access_token_id': None, </div><div>'user_id': u'3fd9e70825d648d996080d855cf9c181', </div><div>'roles': [u'Admin'], </div><div>'user_domain_id': u'363ab68785c24c81a784edca1bceb935', </div><div>'consumer_id': None, </div><div>'trustee_id': None, </div><div>'is_domain': False, </div><div>'trustor_id': None, </div><div>'token': <KeystoneToken (audit_id=4cQHEfwhSvuvibK4TAjKUw, audit_chain_id=4cQHEfwhSvuvibK4TAjKUw) at 0x7fbcceaa33c8>, </div><div>'project_id': u'b48ba24e96d84de4a48077b9310faac7', </div><div>'trust_id': None, </div><div>'project_domain_id': u'363ab68785c24c81a784edca1bceb935'}</div><div>(keystone.common.wsgi): 2017-01-23 15:35:57,199 WARNING You are not authorized to perform the requested action: identity:list_domains</div><div><br></div><div>This appears to be project scoped. If I update the policy.json to grant cloud_admin if the project is the admin domain then that seems to fix things. The change I'm trying is:</div><div><br></div><div> 3c3,4</div><div><     "cloud_admin": "role:admin and (token.is_admin_project:True or domain_id:admin_domain_id)",</div><div>---</div><div>>     "bob": "project_domain_id:363ab68785c24c81a784edca1bceb935 or domain_id:363ab68785c24c81a784edca1bceb935",</div><div>>     "cloud_admin": "role:admin and (token.is_admin_project:True or rule:bob)",</div><div><br></div><div>I did notice this comment on Bug #1451987 *4:</div><div><br></div><div>If you see following errors for all identity api v3 tests, then please be known that its not a a bug in tempest, rather you need to change keystone v3 policy.json and make it more relaxed so tempest can authorize with users created for each test with separate projects(tenants) because we set tenant_isolation to True in tempest.conf ...</div><div><br></div><div>This suggests to me that it is expected for policy.json to need tweaking.</div><div><br></div><div>Regards</div><div>Liam</div><div><br></div><div>*1 <a href="https://github.com/openstack/keystone/blob/stable/newton/etc/policy.v3cloudsample.json">https://github.com/openstack/keystone/blob/stable/newton/etc/policy.v3cloudsample.json</a></div><div>*2 <a href="http://logs.openstack.org/66/418166/10/check/gate-keystone-dsvm-functional-v3-only-ubuntu-xenial-nv/fc0af39/logs/etc/keystone/policy.json.txt.gz">http://logs.openstack.org/66/418166/10/check/gate-keystone-dsvm-functional-v3-only-ubuntu-xenial-nv/fc0af39/logs/etc/keystone/policy.json.txt.gz</a></div><div>*3 <a href="https://github.com/openstack/keystone/blob/master/etc/policy.json">https://github.com/openstack/keystone/blob/master/etc/policy.json</a></div><div>*4 <a href="https://bugs.launchpad.net/tempest/+bug/1451987/comments/2">https://bugs.launchpad.net/tempest/+bug/1451987/comments/2</a></div></div>