Skip to main content

Internal standardized metrics library

Project description

📊 fast-telemetry

Production-ready Prometheus integration for FastAPI, FastStream, and Python Workers.

fast-telemetry — это "клей", который объединяет метрики вашего микросервиса в единый стандарт. Библиотека навязывает правильные практики (единые метки env, version, service) и предоставляет удобные абстракции для HTTP-сервисов, обработчиков очередей и периодических задач.

🌟 Особенности

  • Единый стандарт: Автоматически добавляет метки service, env, version ко всем метрикам.
  • FastAPI: Автоконфигурация через Instrumentator, исключение служебных ручек (/metrics и других переданных).
  • FastStream: Поддержка RabbitMQ, Kafka, Redis, NATS "из коробки" (автоопределение драйвера).
  • Workers & Cron:
    • Поддержка Long-running процессов (daemon thread server).
    • Поддержка Batch-jobs (Pushgateway) через универсальный контекстный менеджер (sync/async).
  • Декораторы: Удобные @measure_task и @track_exception, которые сами понимают, синхронная функция или асинхронная.
  • Безопасность типов: Полная типизация (mypy strict).

📦 Установка

pip install fast-telemetry

🚀 Quick Start

1. Core Concepts

В основе всего лежит класс PrometheusMetrics (или его наследники). Вы инициализируете его один раз при старте приложения.

from fast_telemetry import PrometheusMetrics

metrics = PrometheusMetrics(
    service_name="payment_service",
    version="1.0.4",
    env="production"
)

# Использование в коде
metrics.inc_error("validation_error")

with metrics.timer("db_query", long_task=False):
    # ... logic ...
    pass

2. FastAPI Integration

Автоматически добавляет эндпоинт /metrics и собирает RED-метрики (Requests, Errors, Duration).

from fastapi import FastAPI
from fast_telemetry import PrometheusMetrics, setup_fastapi_metrics

app = FastAPI()
metrics = PrometheusMetrics(service_name="api_core", env="dev", version="1.2.3")

# Настройка (исключает /docs, /openapi.json + readiness)
setup_fastapi_metrics(app, metrics, excluded_routes=["/readiness"])


@app.get("/")
@metrics.measure_task("root_handler", long_task=False)
async def root():
    return {"status": "ok"}

3. FastStream Integration

Поддерживает автоматическое определение брокера (Rabbit/Kafka/Redis/NATS) и инъекцию middleware.

from faststream.asgi import AsgiFastStream, make_ping_asgi
from faststream.rabbit import RabbitBroker
from fast_telemetry import PrometheusMetrics, setup_faststream_metrics

broker = RabbitBroker("amqp://guest:guest@localhost:5672/")
app = AsgiFastStream(
    broker,
    asgi_routes=[
        ("/health", make_ping_asgi(broker))
    ],
    lifespan=None,
    asyncapi_path="/docs",
)

metrics = PrometheusMetrics(service_name="worker_core", env="dev")
setup_faststream_metrics(app, metrics)

4. Workers & Cron Jobs

Для скриптов без веб-сервера. Поддерживает два режима:

  1. Daemon Server (для бесконечных циклов).
  2. Push Gateway (для скриптов, запускаемых по расписанию).
import asyncio
from fast_telemetry import WorkerMetrics

metrics = WorkerMetrics(service_name="nightly_job", env="prod")


# --- Вариант А: Long-running worker ---
def run_worker():
    # Запускает HTTP сервер в фоновом потоке
    metrics.start_server(port=8000)
    while True:
        process_data()


# --- Вариант Б: Batch Job (Cron) ---
# Универсальный трекер (работает и с with, и с async with)
async def run_batch_job():
    # Автоматически отправит метрики в Pushgateway при выходе из блока
    # Группирует по instance_id, чтобы воркеры не перезатирали друг друга
    async with metrics.track_job(gateway_url="http://pushgateway:9091", timeout=5.0):
        await do_heavy_calculation()
        metrics.inc_error("calc_error")


if __name__ == "__main__":
    asyncio.run(run_batch_job())

🛠 Декораторы

Библиотека предоставляет "умные" декораторы, которые работают с sync и async функциями прозрачно.

@track_exception() Считает количество исключений. Использует имя класса исключения как метку.

@metrics.track_exception
async def dangerous_operation():
    raise ValueError("Oops")
    # Увеличит счетчик fasttelemetry_business_errors_total{error_type="ValueError", ...}

@measure_task("task_name") Замеряет время выполнения функции (Histogram).

@metrics.measure_task("image_processing")
def process_image(img):
    time.sleep(1)

📊 Grafana & Prometheus

Библиотека экспортирует следующие базовые метрики:

  1. fasttelemetry_app_info (Gauge) — всегда 1. Содержит метки version, env, service. Используйте для аннотаций деплоев на графиках.
  2. fasttelemetry_business_errors_total (Counter) — счетчик ошибок бизнес-логики.
  3. fasttelemetry_task_processing_seconds (Histogram) — время выполнения внутренних задач.
  4. http_requests_...fastapi.json (если используется FastAPI).
  5. faststream_...faststream.json (если используется FastStream).

📈 Base Metrics & Grafana Dashboard

Библиотека предоставляет "Ready-to-use" набор метрик

Metric Schema

Metric Name Type Labels Description
fasttelemetry_app_info Gauge env, service, version Информация о запущенном инстансе. Всегда 1.
fasttelemetry_business_errors_total Counter error_type Количество ошибок бизнес-логики (пойманных через track_exception или вручную).
fasttelemetry_task_processing_seconds Histogram task_type Время выполнения задач (обернутых в @measure_task или timer).
fasttelemetry_long_task_processing_seconds Histogram task_type Время выполнения долгих задач (обернутых в @measure_task или timer).

⚙️ Configuration

Вы можете передать параметры явно в __init__ или использовать переменные окружения:

Environment Variable Description Default
APP_ENV Окружение (prod/dev/stage) dev
APP_VERSION Версия приложения unknown

🖥️ Grafana Dashboard JSON

Дашборды можно импортировать из папки

Project details


Download files

Download the file for your platform. If you're not sure which to choose, learn more about installing packages.

Source Distribution

fast_telemetry-1.2.1.tar.gz (106.0 kB view details)

Uploaded Source

Built Distribution

If you're not sure about the file name format, learn more about wheel file names.

fast_telemetry-1.2.1-py3-none-any.whl (12.9 kB view details)

Uploaded Python 3

File details

Details for the file fast_telemetry-1.2.1.tar.gz.

File metadata

  • Download URL: fast_telemetry-1.2.1.tar.gz
  • Upload date:
  • Size: 106.0 kB
  • Tags: Source
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.11.14

File hashes

Hashes for fast_telemetry-1.2.1.tar.gz
Algorithm Hash digest
SHA256 11a27d4062b2963ed616e2b6f3a169e1c60f6b13233dd0a8e2c8a9f722960a37
MD5 ed595e350a17abca9431369f779cb396
BLAKE2b-256 0e47c0b7208fe18baba4e84b8d52911cde49953bb9b5fe41baea30422855d182

See more details on using hashes here.

File details

Details for the file fast_telemetry-1.2.1-py3-none-any.whl.

File metadata

  • Download URL: fast_telemetry-1.2.1-py3-none-any.whl
  • Upload date:
  • Size: 12.9 kB
  • Tags: Python 3
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.11.14

File hashes

Hashes for fast_telemetry-1.2.1-py3-none-any.whl
Algorithm Hash digest
SHA256 7d5211c322d574376ed9e8104946265eb15de4e474d1e303bc80cb533eb62756
MD5 c824569d2a1a01e453faf86b8845cf74
BLAKE2b-256 7b467e7943b534e3e926800982fc31c8fcf8c08eddf7e94d588f4f807d2d62d6

See more details on using hashes here.

Supported by

AWS Cloud computing and Security Sponsor Datadog Monitoring Depot Continuous Integration Fastly CDN Google Download Analytics Pingdom Monitoring Sentry Error logging StatusPage Status page