一个轻量级 Python 工具包,支持 并发执行(带进度条)、延迟调用、链式绑定参数、函数信息获取、模块/函数动态加载。并结合 ylog 提供日志记录能力
Project description
ygo
一个轻量级 Python 工具包,底层基于 joblib 和 tqdm 、loguru 实现,支持
- 并发执行(带进度条)
- 延迟调用
- 链式绑定参数
- 函数信息获取
- 模块/函数动态加载...
- 并结合 ylog 提供日志记录能力
安装
pip install -U ygo
🧰 功能概览
| 模块 | 功能 |
|---|---|
ygo |
支持并发执行(带进度条)、延迟调用、函数信息获取以及模块/函数动态加载等功能 |
ylog |
日志模块,提供统一的日志输出接口 |
示例
├── a
│ ├── __init__.py
│ └── b
│ ├── __init__.py
│ └── c.py
└── test.py
c.py 中定义了目标函数
def test_fn(a, b=2):
return a+b
场景1: 并发执行
import ygo
import ylog
from a.b.c import test_fn
with ygo.pool(n_jobs=5, show_progress=True) as go:
for i in range(10):
go.submit(test_fn)(a=i, b=2*i)
for res in go.do():
ylog.info(res)
✅ ygo.pool 支持的参数
| 参数名 | 类型 | 描述 |
|---|---|---|
| n_jobs | int | 并行任务数(<=1 表示串行) |
| show_progress | bool | 是否显示进度条 |
| backend | str | 执行后端(默认 'threading',可选 'multiprocessing' 或 'loky') |
场景2: 延迟调用
>>> fn = delay(test_fn)(a=1, b=2)
>>> fn()
3
>>> # 逐步传递参数
>>> fn1 = delay(lambda a, b, c: a+b+c)(a=1)
>>> fn2 = delay(fn1)(b=2)
>>> fn2(c=3)
6
>>> # 参数更改
>>> fn1 = delay(lambda a, b, c: a+b+c)(a=1, b=2)
>>> fn2 = delay(fn1)(c=3, b=5)
>>> fn2()
9
场景3: 获取目标函数信息
>>> ygo.fn_info(test_fn)
=============================================================
a.b.c.test_fn(a, b=2)
=============================================================
def test_fn(a, b=2):
return a+b
🔍 其他函数信息工具
| 方法名 | 描述 |
|---|---|
fn_params(fn) |
获取函数实参 |
fn_signature_params(fn) |
获取函数定义的所有参数名 |
fn_code(fn) |
获取函数源码字符串 |
fn_path(fn) |
获取函数所属模块路径 |
fn_from_str(s) |
根据字符串导入函数(如 "a.b.c.test_fn") |
module_from_str(s) |
根据字符串导入模块 |
场景4: 通过字符串解析函数并执行
>>> ygo.fn_from_str("a.b.c.test_fn")(a=1, b=5)
6
📝 日志记录(ylog)
import ylog
ylog.info("这是一个信息日志")
ylog.warning("这是一个警告日志")
ylog.error("这是一个错误日志", exc_info=True)
# 为不同的模块使用不同的logger
logger_app1 = ylog.get_logger("app1", )
logger_app2 = ylog.get_logger("app2", )
🔧 配置管理:update_config
你可以通过 update_config 方法动态修改日志配置,例如设置日志级别、格式、是否启用颜色等。
# 开启调试模式
ylog.update_config(debug_mode=True)
🧩 获取独立的 Logger 实例:get_logger
在大型项目中,你可能希望为不同模块或组件创建独立的 logger 实例以区分日志来源。
logger1 = ylog.get_logger("moduleA")
logger2 = ylog.get_logger("moduleB")
logger1.info("这是来自 moduleA 的日志")
logger2.warning("这是来自 moduleB 的警告")
📌 使用建议
- 生产环境建议关闭
debug_mode,避免产生过多调试日志。 - 对于复杂项目,推荐使用
get_logger创建命名 logger,便于日志分类与分析。 - 使用
exc_info=True参数时,可自动打印异常堆栈信息,适用于错误捕获场景。
Project details
Release history Release notifications | RSS feed
Download files
Download the file for your platform. If you're not sure which to choose, learn more about installing packages.
Source Distribution
ygo-1.1.2.tar.gz
(13.1 kB
view details)
Built Distribution
Filter files by name, interpreter, ABI, and platform.
If you're not sure about the file name format, learn more about wheel file names.
Copy a direct link to the current filters
ygo-1.1.2-py3-none-any.whl
(12.5 kB
view details)
File details
Details for the file ygo-1.1.2.tar.gz.
File metadata
- Download URL: ygo-1.1.2.tar.gz
- Upload date:
- Size: 13.1 kB
- Tags: Source
- Uploaded using Trusted Publishing? No
- Uploaded via: uv/0.7.8
File hashes
| Algorithm | Hash digest | |
|---|---|---|
| SHA256 |
08755d103293a7a530d4c1b4018593fe67e51a08affb7858af2fcdcc3bbd466b
|
|
| MD5 |
bd9f82332022f04ecae5c5249fdb3ec5
|
|
| BLAKE2b-256 |
8a73ce4649b2302e556c1a937ee83973ba6f0738cd8835f1edbea1caafa25bb7
|
File details
Details for the file ygo-1.1.2-py3-none-any.whl.
File metadata
- Download URL: ygo-1.1.2-py3-none-any.whl
- Upload date:
- Size: 12.5 kB
- Tags: Python 3
- Uploaded using Trusted Publishing? No
- Uploaded via: uv/0.7.8
File hashes
| Algorithm | Hash digest | |
|---|---|---|
| SHA256 |
635a3e9410208fddc8599b6cb32acd3b6c80c187982f0f669397e5c288a43081
|
|
| MD5 |
cd554f2214e503471c3c51dc3ccf5ac4
|
|
| BLAKE2b-256 |
d43b9575542c0e9f0f2329590d5010e52a48df0451cd146a4ead6411b1cddd34
|