Сконфигурируйте datadog-агент для метрик gunicorn

На моем сервере Debian 8 установлен агент datadog. Он уже настроен и хорошо работает для составления отчетов о показателях postgres, nginx, системы и т. Д.

Я хочу контролировать свои демоны Gunicorn (у меня есть 2 сайта Django на этом сервере). Насколько я понимаю, datadog-agent уже интегрирует сервер statsd, поэтому мне не нужно его устанавливать:

# ps ax | grep datadog
18816 ?        Ss     0:00 /opt/datadog-agent/embedded/bin/python /opt/datadog-agent/bin/supervisord -c /etc/dd-agent/supervisor.conf
18822 ?        Sl     0:01 /opt/datadog-agent/embedded/bin/python /opt/datadog-agent/agent/dogstatsd.py --use-local-forwarder
18824 ?        S      0:01 /opt/datadog-agent/embedded/bin/python /opt/datadog-agent/agent/ddagent.py
18825 ?        S      0:01 /opt/datadog-agent/embedded/bin/python /opt/datadog-agent/agent/agent.py foreground --use-local-forwarder

Я думаю, что "dogstatsd.py" является сервером statsd, но, возможно, я ошибаюсь?

Затем я изменил свой сценарий запуска gunicorn для интеграции --name возможность установить имя для моего процесса и --statsd-host to указывает куда отправлять метрики.

# ps ax | grep gunicorn
18588 ?        Ss     0:00 /var/projects/my_project/venv/bin/python3 /var/projects/my_project/venv/bin/gunicorn --name my_project --statsd-host=localhost:8125 --workers 2 --bind unix:/var/tmp/my_project.sock core.wsgi:application
18630 ?        S      0:00 /var/projects/my_project/venv/bin/python3 /var/projects/my_project/venv/bin/gunicorn --name my_project --statsd-host=localhost:8125 --workers 2 --bind unix:/var/tmp/my_project.sock core.wsgi:application
18632 ?        S      0:00 /var/projects/my_project/venv/bin/python3 /var/projects/my_project/venv/bin/gunicorn --name my_project --statsd-host=localhost:8125 --workers 2 --bind unix:/var/tmp/my_project.sock core.wsgi:application

Теперь я создал gunicorn.yaml из примера в /etc/dd-agent/conf.d/ следующим образом

# NB: This check requires the python environment on which gunicorn runs to
# have the `setproctitle` module installed (https://pypi.python.org/pypi/setproctitle/)

init_config:

instances:
  # The name of the gunicorn process. For the following gunicorn server ...
  #
  #    gunicorn --name my_web_app my_web_app_config.ini
  #
  #  ... we'd use the name `my_web_app`.
  #
  - proc_name: my_project

После перезапуска агента я жду несколько секунд и проверяю его статус:

# sudo service datadog-agent info
# [...]
  Checks
  ======

    gunicorn
    --------
      - instance #0 [ERROR]: 'Found no master process with name: gunicorn: master [my_project]'
      - Collected 0 metrics, 0 events & 1 service check
      - Dependencies:
          - psutil: 4.4.1

Я не могу найти, где мне не удается это настроить. Кто-нибудь может мне помочь?

Источник

1 ответ

Решение

После подключения к IRC Datadog кто-то объяснил, что у процесса gunicorn должно быть довольно напечатанное имя. Решение было установить setproctitle используя пип в том же венве, что и оружейный.

Очевидно, ответ был в вопросе, вверху файла "gunicorn.yaml":

Примечание: эта проверка требует, чтобы среда Python, в которой работает gunicorn, имела setproctitle модуль установлен ( https://pypi.python.org/pypi/setproctitle/)

Источник

Вы должны установить setproctitle пакет для вашего приложения:

# ps aux|grep gunicorn
user 919 0.2 0.2 004 672 0:00 gunicorn --name my_app app:app --workers 5 --bind 
127.0.0.1:5000 --log-level info
user 925 0.6 0.6 052 688 0:01 gunicorn --name my_app app:app --workers 5 --bind 
127.0.0.1:5000 --log-level info
user 926 0.7 0.6 308 032 0:01 gunicorn --name my_app app:app --workers 5 --bind                 
127.0.0.1:5000 --log-level info
user 927 0.4 0.6 884 404 0:00 gunicorn --name my_app app:app --workers 5 --bind 
127.0.0.1:5000 --log-level info

# cd my_app
# source ./venv/bin/activate
# pip install setproctitle
# systemctl restart gunicorn

# ps aux|grep gunicorn
user 468 0.1 0.2 068 712 0:00 gunicorn: master [my_app]
user 471 0.4 0.6 376 852 0:00 gunicorn: worker [my_app]
user 472 0.4 0.6 120 844 0:00 gunicorn: worker [my_app]
user 473 0.4 0.6 944 372 0:00 gunicorn: worker [my_app]
user 474 0.5 0.6 384 976 0:01 gunicorn: worker [my_app]
user 475 0.5 0.6 396 992 0:01 gunicorn: worker [my_app]

Вы можете увидеть первый пс, где нет мастера и видны только рабочие. После pip install setproctitle в моей среде приложения процессы gunicorn теперь видны с именами master/worker. Вы можете проверить это с помощью этой команды: sudo -u dd-agent -- datadog-agent check gunicorn

Источник
Другие вопросы по тегам