[OpenStack-ru] AMQP server is unreachable / AMQP server closed the connection. Check login credentials

Yura Poltoratskiy yurapoltora на gmail.com
Чт Мар 24 10:24:19 UTC 2016


Приветствую, сообщество.

Столкнулся с непреодолимым препятствием, поэтому прошу помочь.

Собственно, имеем деплой с нуля. Архитектура кратко такая:
2 сервера - computes
3 сервера - controllers
3 сервера - storage
1 сервер - network

На controller'ах запущены контейнеры по одному для каждого сервиса, в итоге
получаем каждого сервиса по три (по одному на физическом сервере) для HA.

Все собрано на ubuntu 14.04 с подключенным cloud-archive:liberty.

Сервер сообщений - rabbitmq.

Собрал по документации
http://docs.openstack.org/ha-guide/controller-ha-rabbitmq.html#rabbitmq-services
кластер rabbitmq.

Дошел до запуска виртуальной машины, обнаружил, что все сервисы имеют
проблемы с коммуникацией с rabbitmq, в логах циклически вижу такое:

nova-compute:

2016-03-24 12:00:06.833 11111 ERROR oslo.messaging._drivers.impl_rabbit
[req-8e5b0e51-ed48-48cf-9182-81b437246bcf - - - - -] AM
QP server on rabbitmq01:5672 is unreachable: [Errno 32] Broken pipe. Trying
again in 1 seconds.
2016-03-24 12:00:07.848 11111 INFO oslo.messaging._drivers.impl_rabbit [-]
Reconnected to AMQP server on rabbitmq01:5672

или такое

2016-03-24 12:05:23.910 11111 ERROR oslo.messaging._drivers.impl_rabbit [-]
AMQP server rabbitmq01:5672 closed the connection.
Check login credentials: Socket closed

Вывод nova service-list
+----+------------------+-----------+----------+---------+-------+----------------------------+-----------------+
| Id | Binary           | Host      | Zone     | Status  | State |
Updated_at                 | Disabled Reason |
+----+------------------+-----------+----------+---------+-------+----------------------------+-----------------+
| 1  | nova-consoleauth | nova02    | internal | enabled | up    |
2016-03-24T10:18:30.000000 | -               |
| 4  | nova-conductor   | nova02    | internal | enabled | up    |
2016-03-24T10:18:24.000000 | -               |
| 6  | nova-cert        | nova02    | internal | enabled | up    |
2016-03-24T10:18:29.000000 | -               |
| 9  | nova-scheduler   | nova02    | internal | enabled | up    |
2016-03-24T10:18:29.000000 | -               |
| 11 | nova-consoleauth | nova03    | internal | enabled | up    |
2016-03-24T10:18:22.000000 | -               |
| 12 | nova-cert        | nova03    | internal | enabled | up    |
2016-03-24T10:18:26.000000 | -               |
| 13 | nova-scheduler   | nova03    | internal | enabled | up    |
2016-03-24T10:18:27.000000 | -               |
| 14 | nova-conductor   | nova03    | internal | enabled | up    |
2016-03-24T10:18:27.000000 | -               |
| 17 | nova-conductor   | nova01    | internal | enabled | up    |
2016-03-24T10:18:22.000000 | -               |
| 20 | nova-scheduler   | nova01    | internal | enabled | up    |
2016-03-24T10:18:25.000000 | -               |
| 21 | nova-cert        | nova01    | internal | enabled | up    |
2016-03-24T10:18:26.000000 | -               |
| 23 | nova-consoleauth | nova01    | internal | enabled | up    |
2016-03-24T10:18:28.000000 | -               |
| 27 | nova-compute     | compute02 | nova     | enabled | down  |
2016-03-24T10:15:41.000000 | -               |
| 29 | nova-compute     | compute01 | nova     | enabled | down  |
2016-03-24T10:15:35.000000 | -               |
+----+------------------+-----------+----------+---------+-------+----------------------------+-----------------+

Переодически nova-compute становиться up.

Я уже пробовал переустанавливать rabbitmq, пробовал без кластеров, пробовал
на отдельном сервере, вместо контейнера, все тщетно.

Подскажите, пожалуйста, в чем проблема может быть и/или как можно отловить
проблему.

Могу предоставить любую информацию дополнительно.

Спасибо.
----------- следущая часть -----------
Вложение в формате HTML было извлечено…
URL: <http://lists.openstack.org/pipermail/openstack-ru/attachments/20160324/b8762fc5/attachment.html>


Подробная информация о списке рассылки OpenStack-ru