Skip to main content

Internal standardized metrics library

Project description

📊 fast-telemetry

Production-ready Prometheus integration for FastAPI, FastStream, and Python Workers.

fast-telemetry — это "клей", который объединяет метрики вашего микросервиса в единый стандарт. Библиотека навязывает правильные практики (единые метки env, version, service) и предоставляет удобные абстракции для HTTP-сервисов, обработчиков очередей и периодических задач.

🌟 Особенности

  • Единый стандарт: Автоматически добавляет метки service, env, version ко всем метрикам.
  • FastAPI: Автоконфигурация через Instrumentator, исключение служебных ручек (/metrics и других переданных).
  • FastStream: Поддержка RabbitMQ, Kafka, Redis, NATS "из коробки" (автоопределение драйвера).
  • Workers & Cron:
    • Поддержка Long-running процессов (daemon thread server).
    • Поддержка Batch-jobs (Pushgateway) через универсальный контекстный менеджер (sync/async).
  • Декораторы: Удобные @measure_task и @track_exception, которые сами понимают, синхронная функция или асинхронная.
  • Безопасность типов: Полная типизация (mypy strict).

📦 Установка

pip install fast-telemetry

🚀 Quick Start

1. Core Concepts

В основе всего лежит класс PrometheusMetrics (или его наследники). Вы инициализируете его один раз при старте приложения.

from fast_telemetry import PrometheusMetrics

metrics = PrometheusMetrics(
    service_name="payment_service",
    version="1.0.4",
    env="production"
)

# Использование в коде
metrics.inc_error("validation_error")

with metrics.timer("db_query", long_task=False):
    # ... logic ...
    pass

2. FastAPI Integration

Автоматически добавляет эндпоинт /metrics и собирает RED-метрики (Requests, Errors, Duration).

from fastapi import FastAPI
from fast_telemetry import PrometheusMetrics, setup_fastapi_metrics

app = FastAPI()
metrics = PrometheusMetrics(service_name="api_core", env="dev", version="1.2.3")

# Настройка (исключает /docs, /openapi.json + readiness)
setup_fastapi_metrics(app, metrics, excluded_routes=["/readiness"])


@app.get("/")
@metrics.measure_task("root_handler", long_task=False)
async def root():
    return {"status": "ok"}

3. FastStream Integration

Поддерживает автоматическое определение брокера (Rabbit/Kafka/Redis/NATS) и инъекцию middleware.

from faststream.asgi import AsgiFastStream, make_ping_asgi
from faststream.rabbit import RabbitBroker
from fast_telemetry import PrometheusMetrics, setup_faststream_metrics

broker = RabbitBroker("amqp://guest:guest@localhost:5672/")
app = AsgiFastStream(
    broker,
    asgi_routes=[
        ("/health", make_ping_asgi(broker))
    ],
    lifespan=None,
    asyncapi_path="/docs",
)

metrics = PrometheusMetrics(service_name="worker_core", env="dev")
setup_faststream_metrics(app, metrics)

4. Workers & Cron Jobs

Для скриптов без веб-сервера. Поддерживает два режима:

  1. Daemon Server (для бесконечных циклов).
  2. Push Gateway (для скриптов, запускаемых по расписанию).
import asyncio
from fast_telemetry import WorkerMetrics

metrics = WorkerMetrics(service_name="nightly_job", env="prod")


# --- Вариант А: Long-running worker ---
def run_worker():
    # Запускает HTTP сервер в фоновом потоке
    metrics.start_server(port=8000)
    while True:
        process_data()


# --- Вариант Б: Batch Job (Cron) ---
# Универсальный трекер (работает и с with, и с async with)
async def run_batch_job():
    # Автоматически отправит метрики в Pushgateway при выходе из блока
    # Группирует по instance_id, чтобы воркеры не перезатирали друг друга
    async with metrics.track_job(gateway_url="http://pushgateway:9091", timeout=5.0):
        await do_heavy_calculation()
        metrics.inc_error("calc_error")


if __name__ == "__main__":
    asyncio.run(run_batch_job())

🛠 Декораторы

Библиотека предоставляет "умные" декораторы, которые работают с sync и async функциями прозрачно.

@track_exception() Считает количество исключений. Использует имя класса исключения как метку.

@metrics.track_exception
async def dangerous_operation():
    raise ValueError("Oops")
    # Увеличит счетчик fasttelemetry_business_errors_total{error_type="ValueError", ...}

@measure_task("task_name") Замеряет время выполнения функции (Histogram).

@metrics.measure_task("image_processing")
def process_image(img):
    time.sleep(1)

📊 Grafana & Prometheus

Библиотека экспортирует следующие базовые метрики:

  1. fasttelemetry_app_info (Gauge) — всегда 1. Содержит метки version, env, service. Используйте для аннотаций деплоев на графиках.
  2. fasttelemetry_business_errors_total (Counter) — счетчик ошибок бизнес-логики.
  3. fasttelemetry_task_processing_seconds (Histogram) — время выполнения внутренних задач.
  4. http_requests_...fastapi.json (если используется FastAPI).
  5. faststream_...faststream.json (если используется FastStream).

📈 Base Metrics & Grafana Dashboard

Библиотека предоставляет "Ready-to-use" набор метрик

Metric Schema

Metric Name Type Labels Description
fasttelemetry_app_info Gauge env, service, version Информация о запущенном инстансе. Всегда 1.
fasttelemetry_business_errors_total Counter error_type Количество ошибок бизнес-логики (пойманных через track_exception или вручную).
fasttelemetry_task_processing_seconds Histogram task_type Время выполнения задач (обернутых в @measure_task или timer).
fasttelemetry_long_task_processing_seconds Histogram task_type Время выполнения долгих задач (обернутых в @measure_task или timer).

⚙️ Configuration

Вы можете передать параметры явно в __init__ или использовать переменные окружения:

Environment Variable Description Default
APP_ENV Окружение (prod/dev/stage) dev
APP_VERSION Версия приложения unknown

🖥️ Grafana Dashboard JSON

Дашборды можно импортировать из папки

Project details


Download files

Download the file for your platform. If you're not sure which to choose, learn more about installing packages.

Source Distribution

fast_telemetry-0.0.1.tar.gz (91.3 kB view details)

Uploaded Source

Built Distribution

If you're not sure about the file name format, learn more about wheel file names.

fast_telemetry-0.0.1-py3-none-any.whl (11.6 kB view details)

Uploaded Python 3

File details

Details for the file fast_telemetry-0.0.1.tar.gz.

File metadata

  • Download URL: fast_telemetry-0.0.1.tar.gz
  • Upload date:
  • Size: 91.3 kB
  • Tags: Source
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.11.14

File hashes

Hashes for fast_telemetry-0.0.1.tar.gz
Algorithm Hash digest
SHA256 e535e198e896de5bdf190cf9deea054755b2d67b09f5b83ed1e9069943a0904e
MD5 9322199684c39d251bc3c1eaeef2284c
BLAKE2b-256 87a09b57b138d475f4228f9cd9c41c369e459f78f1c0717835cb2c4d207a7ca4

See more details on using hashes here.

File details

Details for the file fast_telemetry-0.0.1-py3-none-any.whl.

File metadata

  • Download URL: fast_telemetry-0.0.1-py3-none-any.whl
  • Upload date:
  • Size: 11.6 kB
  • Tags: Python 3
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.11.14

File hashes

Hashes for fast_telemetry-0.0.1-py3-none-any.whl
Algorithm Hash digest
SHA256 44cc29511a4dfbadc75577a06f7dcfd0263bb6ee7cd10ddf82567ab8fdf541f7
MD5 4202b97a56393ee28e2493c7429df89e
BLAKE2b-256 ee8aaf634d3c46f09454dbcbf2da33798d32e405296cdc19830df61197a9c7a1

See more details on using hashes here.

Supported by

AWS Cloud computing and Security Sponsor Datadog Monitoring Depot Continuous Integration Fastly CDN Google Download Analytics Pingdom Monitoring Sentry Error logging StatusPage Status page