# 通用基础库
版本: v0.1.15 2026/5/8
- 修正yield_texts方法中的语法错误;
- 优化所有代码语法
版本: v0.1.15
- 修正LLM_TASK类的BUG
- 优化所有代码
版本: v0.1.14
- 优化 RedisCache 类
- 优化 TimeCount 类
版本: v0.1.12
- 完善 RedisCache 类,增加密码和数据库参数;
版本: v0.1.11
- 修正LLM_TASK类的BUG
- LLM_TASK类支持qwen3, qwq模型;
- 优化计时器类
版本: v0.1.10
- 增加了LLM_TASK类,用于大模型通用任务
- 修正 RedisCache类中 data_table 无效的bug
- 优化原有代码;
版本: v0.1.9
- 扩展了对json格式文件的读写支持:readjson, readjsonp, savejson, savejsonp
- 增加了MutliTask 多进程任务类
- 优化了计时器类:TimeCount
版本: v0.1.5
- 修改了splitset方法,可用于拆分数据集
- 增加 split_dataframe方法,可对DataFrame进行拆分数据集;
- 增加 分层抽取方法: data_split, save_data_split
版本: v0.1.4
- 修改了TimeCount类
版本: v0.1.1
可对目录下的文件进行以下批量处理:
- 清除空格 空行 按句子分行;
- 删除空文件,找到后改名(改为"原文件名.del") 或者直接删除
- 删除重复的文件: 根据文件的MD5判断文件是否相同,找到后改名(原文件.same)或者直接删除
- 批量重命名: 可按序号进行重命名,默认从1开始,文件名会自动在前面补0,例如"0001.txt"
- 可统计文本文件的行数 [2019/1/18 添加]
- 对数据进行检查;
- 对数据重复数据检查并删除;
- 对数据进行随机抽样;
- 处理参数可以自定义顺序,
Release files for baselibs 0.1.17
For a detailed explanation of source distributions (sdists) and built distributions (wheels), please see the package formats documentation.
Source distribution (sdist)
| File | Size | Uploaded | |
|---|---|---|---|
| baselibs-0.1.17.tar.gz | 35.3 kB | Details |
Built distribution (wheel)
| File | Interpreter | ABI | Platform | Reset |
|---|---|---|---|---|
| baselibs-0.1.17-py3-none-any.whl | Python 3 | none | any | Details |
Total release size: 69.7 kB
Release files / baselibs-0.1.17.tar.gz
| Download URL | baselibs-0.1.17.tar.gz |
|---|---|
| Size | 35.3 kB |
| Tags | Source |
|
SHA-256 checksum How to use checksums |
fbaf657762d10f442d78210b48db580581e7a30ac3128cc87426cdf122830c8d
|
|
BLAKE2b-256 checksum How to use checksums |
1644a49a795c0c41cf13d539ebf9d44aff0db0ba21deac39f059459fc57e24e7
|
| Upload date | |
|
Uploaded using Trusted Publishing? What is trusted publishing? |
No |
| Uploaded via |
twine/5.1.1 CPython/3.8.10
|
Release files / baselibs-0.1.17-py3-none-any.whl
| Download URL | baselibs-0.1.17-py3-none-any.whl |
|---|---|
| Size | 34.4 kB |
| Tags | Python 3 |
|
SHA-256 checksum How to use checksums |
55c649392c21a9084b4fc130b1b9de8c0f904b9f6f012c97ac935585a8664b89
|
|
BLAKE2b-256 checksum How to use checksums |
30a5e081c41f433321379b63822a1744594b798e9d648341a145d90f2e2d7144
|
| Upload date | |
|
Uploaded using Trusted Publishing? What is trusted publishing? |
No |
| Uploaded via |
twine/5.1.1 CPython/3.8.10
|