Как отслеживать метрики Python для планировщика и рабочего потока воздуха?Python

Программы на Python
Anonymous
Как отслеживать метрики Python для планировщика и рабочего потока воздуха?

Сообщение Anonymous »

Вопрос о метриках Python!!! Не о статусе задачи или DAG!
В чем проблема:
< ol>
[*]Существует statsd-exporter, который отображает все метрики воздушного потока и показатели Python. Но метрики воздушного потока экспортируются для воздушного потока, в то время как метрики Python описывают запуск statsd-exporter самостоятельно.
[*]Существуют некоторые библиотеки, такие как airflow-exporter, но они экспортируют метрики в виде веб-страницы, которая " включается», когда работает веб-сервер Airflow. Когда я запускаю планировщик воздушного потока или рабочий процесс без Интернета, метрики не экспортируются.

Есть ли способ экспортировать метрики Python (например, python_gc_collections) ,process_cpu_секунды_total,process_resident_memory_bytes и т. д.) для планировщика и/или рабочего потока воздуха?

Подробнее здесь: https://stackoverflow.com/questions/789 ... and-worker

Вернуться в «Python»