vines-worker-sdk 0.0.21

Vines Python 训练项目 SDK （供内部使用）

Vines Python 训练项目 SDK （供内部使用）

这个项目希望解决的问题，将开发一个新的训练项目中的很多重复性工作进行统一封装：

1. 每次开一个新训练项目都需要起 HTTP Server
2. 里面有可能会用到很多通用能力，比如上传、下载文件、以及一些基础方法等，这些都应该封装好。
3. 错误日志推送逻辑
4. 运行时日志逻辑
5. api 入参、出参统一格式封装
6. 统一的日志格式、日志收集

安装

pip install vines-worker-sdk

使用示例

作为 conductor 客户端

详情见 exampels/example_conductor.py 文件中的内容。

使用 flask http server

从 lib.server 引入 create_server 方法，初始化 flask app，参数：

• sentry_dsn: sentry dsn, 如果配置，会自动收集异常推送到 sentry
• log_redis_queue_url: 如果配置，在调用 request.logger 方法的时候，会自动推送到消息队列，从而给前端展示。

打印日志的方法：直接使用 request.logger 实例的方法。

详情见 exampels/example_server.py 文件中的内容。