Skip to main content
Pre-release

This release is a pre-release and may not be stable for production use.

ok-script

简体中文 | English

Vibe Coding 自动化框架

在 Codex、Claude Code 或任何支持 MCP 的编程代理里许个愿,得到一个可部署的自动化程序。

说出你想自动化的事。代理通过 MCP 观察 Windows 应用、游戏或安卓设备,编写 Python 任务,在真实目标上运行并修复失败。ok-script 把完成的任务连同桌面 GUI 打包成可分发的 Windows 安装包。打包后的程序在本地独立完成截图、识别和输入,无需代理保持连接。

ok-script 支持 Windows 应用和游戏、安卓模拟器及 ADB 设备,提供模板匹配、OCR、目标支持时的后台输入、桌面界面和任务打包。

MCP 快速开始 · 编程代理提示词 · MCP 连接说明(英文)

可以这样告诉编程代理

首次安装环境:

在当前项目中安装 ok-script 并配置运行环境。先读取 https://raw.githubusercontent.com/ok-oldking/ok-script/master/docs/agent-setup.md ,按照其中的安装技能操作,保留项目现有的依赖约束。

代理安装指南(英文)提供可添加到应用项目 AGENTS.md 的简短指令,让后续安装请求也能找到这些技能,无需先安装包或启动 MCP。

开发自动化任务:

连接这个项目的 ok-script MCP 服务,读取开发技能。检查已安装的截图、匹配和输入 API,给出准确签名和源码位置。开发可复用 Python 任务:打开设置、启用“显示详情”、保存并验证结果。每次尝试前恢复并验证起始界面,测试重复运行,代码保存到项目中。使用 ok-script API 和 MCP,不使用 Computer Use 工具。最后给出不依赖代理或大模型调用的准确运行命令。

修复已有任务:

连接这个项目的 ok-script MCP 服务,读取 reload-tasks 技能。用 list_tasks 找到出错任务的源码,修改该文件,按任务 ID 重载并等待重载成功。恢复并验证起始界面,重复运行已注册的实现,并给出运行日志和截图中的证据。

MCP 开发流程

代理用自己的工具编辑文件、读取日志;MCP 让它直接操作正在运行的应用:

  1. 学习:list_skills 和 get_skill 返回当前安装版本自带的开发、模板、测试和重载流程;代理从已安装包中读取准确的 Python 签名。
  2. 观察:screenshot 保存已配置窗口或设备的当前画面。
  3. 运行:run_task 在真实目标上执行 Python 任务文件。每次尝试先恢复并验证起始状态,再由 run() 执行并断言自动化结果。
  4. 检查:每次尝试写入 logs/mcp/<run_id>/run.log、status.json 和任务截图。get_run_status 报告进度和错误,stop_task 用于取消。
  5. 修复:list_tasks 返回已注册任务的源码路径;修改后用 reload_tasks 在运行中的进程里替换。无法重置时用 exit_process 结束运行时。
  6. 交付:在项目配置中注册任务,通过 GUI 或 python -m ok run_task 运行,并用 PyAppify 打包成 Windows 安装包。

特性

  • 面向编程代理的 MCP 服务:内置技能、实时截图、任务执行、热重载和逐次运行日志
  • 纯 Python 实现,免费开源,可直接使用 pip 生态中的第三方库
  • 同一套任务代码可支持 Windows 客户端、安卓模拟器和 ADB 设备
  • 支持 OCR、OpenCV 模板匹配以及 YOLO 等视觉方案
  • 基于 COCO 标注管理模板素材,并根据屏幕分辨率自动缩放
  • 内置截图、输入、设备控制和可视化调试工具
  • 支持自动化测试、GitHub Actions 构建和安装包发布
  • 支持多语言国际化和在线增量更新

通过 MCP 连接

使用自动化应用自己的虚拟环境,并保留现有依赖约束。新项目可以从应用模板开始,让代理配置目标。支持 Python 3.11 及以上版本。

python -m venv .venv
.\.venv\Scripts\python.exe -m pip install "ok-script[default]"
.\.venv\Scripts\python.exe -m ok mcp --config src.config:config

启动命令要求应用配置已经存在,请使用实际配置入口或项目已有的开发启动器。MCP 自 2.0.17 起随 ok-script 自动安装,无需额外扩展。OpenCV 需单独选择并安装一个兼容变体;Qt、ADB 和 OCR 按需安装。

让代理的 MCP 客户端通过 Streamable HTTP 连接有效 logs/mcp/connections/<pid>-<port>.json 记录中的 URL,并使用该记录的 Authorization: Bearer <token> 请求头。不要公开凭据。让代理调用 list_skills,通过 get_skill 读取相关技能,再用 screenshot 验证目标。

已有桌面应用也可以在 设置 > 基本设置 > 启用 MCP 服务器 中开启,或使用 python -m ok gui --config src.config:config --mcp 启动。服务只监听本机回环地址,但已连接的代理可以用你的账户权限执行 Python。日常使用请保留单独的、关闭 MCP 的启动器。

MCP 快速开始介绍安装、连接以及脱离代理运行保存的任务。MCP 说明(英文)包含执行和重载细节。

文档

具体 Python API 由代理检查已安装包的源码和签名。MCP 提供开发技能和执行工具,没有单独的 API 查询工具。完成的任务可在无界面模式或桌面 GUI 中运行,详见运行时架构。

界面预览

任务配置 截图与交互
任务配置界面 截图与交互界面
脚本与 API 模板管理
脚本与 API 界面 模板管理界面

查看界面与开发工具完整说明,包括模板识别调试浮层。

使用 ok-script 的项目

开发 ok-script

在本仓库中测试界面改动时,可以用 main.py 中的演示配置直接从源码启动 GUI:

.\.venv\Scripts\python.exe main.py

它以记事本为目标窗口,无需游戏,并注册了一个演示一次性任务和一个触发任务,让任务、计划任务和模板页面都有内容。设置和日志保存在已被 git 忽略的 configs/ 和 logs/ 目录中。需要测试其他选项时,修改 main.py 中的 config 字典或演示任务即可。

社区与发布

致谢

ok-script 的开发离不开以下开源项目:

  • PyAppify:用于应用更新和打包。
  • OnnxOCR:提供支持 Intel NPU 的 OCR, 支持通过 OpenVINO 或 ONNX Runtime 推理,并使用 PaddleOCR v5 模型。
  • PySide6:提供基于 Qt 的桌面界面绑定。
  • PyQt-Fluent-Widgets:Qt 界面使用的 Fluent UI 组件。
  • OpenCV、NumPy 和 Pillow:用于图像处理和计算机视觉。
  • adbutils:用于 Android 设备连接。

上述依赖均受其各自许可证约束,详情请参阅对应项目页面。

许可证

本项目采用 Apache License 2.0 + Commons Clause 及附加条款。

允许的使用方式:

  • 可用于闭源项目或商业项目。
  • 可以 fork、本项目改进,并保持 fork 开源且免费。

限制:

  • 禁止直接出售本项目,或仅改名、稍作修改后将其作为竞争产品出售或推广。
  • 禁止将本项目用于黑客攻击、未授权访问、恶意软件、欺诈或其他违法活动。
  • 任何使用 ok-script 的项目,都必须在项目网站、GitHub 或软件本身至少一处提及并链接 ok-script.com 或 ok-script GitHub。
  • Qt UI 的使用还必须遵守 PyQt-Fluent-Widgets 的许可证。

Metadata

Release files for ok-script 3.0.0b3

For a detailed explanation of source distributions (sdists) and built distributions (wheels), please see the package formats documentation.

Source distribution (sdist)

Source distribution for ok-script 3.0.0b3
File Size Uploaded Provenance Actions
ok_script-3.0.0b3.tar.gz 1.1 MB Without provenance Details for ok_script-3.0.0b3.tar.gz

Built distribution (wheel)

Table of built distributions (wheels) for ok-script 3.0.0b3
File Interpreter ABI Platform Actions
ok_script-3.0.0b3-py3-none-any.whl Python 3 none any Details for ok_script-3.0.0b3-py3-none-any.whl

Total release size: 2.2 MB

Release files / ok_script-3.0.0b3.tar.gz

Download URL ok_script-3.0.0b3.tar.gz
Size 1.1 MB
Tags Source
SHA-256 checksum
How to use checksums
fcf83493d58bdeac4ccc9597dfeae3155175c1fd8b6c3d895570cfb8db150aea
BLAKE2b-256 checksum
How to use checksums
9a3b059abc6c5a2170015737816221724d393d9a658550acf73c20fc3e995f33
Upload date
Uploaded using Trusted Publishing?
What is trusted publishing?
No
Uploaded via twine/7.0.0 CPython/3.13.16

Release files / ok_script-3.0.0b3-py3-none-any.whl

Download URL ok_script-3.0.0b3-py3-none-any.whl
Size 1.1 MB
Tags Python 3
SHA-256 checksum
How to use checksums
8a4b3f8027616fab685f4919bdb337d4f8faf14d96565c6c61163788240363c7
BLAKE2b-256 checksum
How to use checksums
34dff3da5eddf259fb6a5f9682d7dd48c4e8fcdaeebaff8cda5f15187452c1c5
Upload date
Uploaded using Trusted Publishing?
What is trusted publishing?
No
Uploaded via twine/7.0.0 CPython/3.13.16

Security for ok-script 3.0.0b3

Provenance

Provenance describes where a file came from. On PyPI, provenance is shared via attestations, which provide a verifiable record of the build or publishing details. View details, limitations and caveats.

No provenance found

None of the files in this release were uploaded with provenance metadata.

A note on package security

PyPI is a repository for distributing packages, not a service for auditing them. While third-party security researchers and our staff do their best to detect and remove malicious packages, PyPI cannot guarantee the quality, security or suitability of any given package.

To learn more about protecting yourself from malicious actors, visit our package security documentation.

Release history Release notifications | RSS feed

This release
Anthropic, PBC Visionary sponsor Bloomberg Visionary sponsor Hudson River Trading Visionary sponsor Meta Visionary sponsor NVIDIA Visionary sponsor Microsoft Sustainability sponsor Depot Continuous Integration AWS Cloud computing and Security Sponsor Datadog Monitoring Fastly CDN Google Download Analytics Sentry Error logging StatusPage Status page