Skip to main content

A lightweight runtime SDK for executing Python sparkit scripts

Project description

📦 sparkit

O sparkit é uma biblioteca feita com o objetivo de ser um facilitador CLI para permitir que aplicações diversas possam interagir com código python sem precisar rodar, de fato, para saber quais as suas entradas e saídas, além de facilitar a insersão de dados e otimizar a forma como se escreve código, usando a saída padrão como forma de comunicação entre aplicativos diferentes para que outras possam capturar a saída e usar da forma como quiser.

Propósito

Um runtime leve para execução de scripts Python com:

  • 🧠 Geração automática de esquemas de entrada e saída
  • 🖥️ CLI profissional (flags, help, validação)
  • 🔄 Compatível com stdin/stdout (modo pipeline)
  • ⚡ Execução de funções ou classes
  • Uso de @Input / @Output / @Run decoradores

🚀 Instalação

git clone https://github.com/kelwp/sparkit
cd sparkit

Ou instale pelo pip

pip install sparkit

⚡ Uso rápido

🔹 Exemplo com classe

from Sparkit import sparkit, NodeBase

class SampleMonitor(NodeBase):
    ip: str
    device_id: str | None = None

    outputs_def = {
        'meta': {'type': dict[str, str]},
        'main': {'type': dict[str, int]}
    }

    def run(self):
        self.outputs.set_data("main", {"msg": "OK"})
        sparkit.set_stdout({"teste": 1})
        self.outputs.set_data("meta", {"status": 1})

if __name__ == "__main__":
    sparkit.run(SampleMonitor)

🔹 Executando via CLI

python script.py --ip 192.168.0.1

🔹 Saída

{
  "stdout": {
    "status": "ok",
    "ip": "192.168.0.1"
  },
  "stderr": null
}

🧠 Modos de entrada

1. Flags (CLI moderna)

python script.py --ip 123

2. JSON inline

python script.py --input '{"ip":"123"}'

3. Arquivo JSON

python script.py --input-file data.json

4. stdin (modo pipeline)

echo '{"ip":"123"}' | python script.py

👉 Ideal para integração com automações e orquestradores.


📖 Help automático

python script.py --help

Exemplo:

sparkit Script CLI

Inputs:
  --ip (string, required)

Other options:
  --input '<json>'
  --input-file <file>
  --schema
  --help

Outputs:
  status (string)
  ip (string)

🧬 Schema automático

python script.py --schema

Saída:

{
  "schema": {
    "inputs": [{ "name": "ip", "type": "string", "required": true }],
    "outputs": [
      { "name": "status", "type": "string" },
      { "name": "ip", "type": "string" }
    ]
  }
}

⚙️ Tipos suportados

Tipo Exemplo CLI Resultado
string --name John "John"
number --age 25 25
boolean --active true true
array --tags '[1,2,3]' [1,2,3]
json --data '{"a":1}' { "a":1 }

🧪 Execução com função

from runtime import sparkitRuntime

def handler(ip: str):
    return {"status": "ok", "ip": ip}

if __name__ == "__main__":
    sparkitRuntime().run(handler)

🔁 Estrutura de saída

Todo script retorna:

{
  "stdout": {...},
  "stderr": null
}

Ou em caso de erro:

{
  "stdout": null,
  "stderr": {
    "type": "ValueError",
    "message": "Missing required input: ip",
    "traceback": "..."
  }
}

🧩 Integração com sparkit

Esse runtime foi projetado para funcionar diretamente em pipelines:

  • Recebe JSON via stdin
  • Retorna JSON estruturado
  • Possui schema introspectivo

👉 Ideal para:

  • automações
  • workflows
  • agentes
  • execução remota

🏗️ Arquitetura

  • sparkitRuntime
    • parsing CLI
    • leitura de inputs
    • execução
    • geração de schema
    • tratamento de erro

🔒 Validações

  • Campos obrigatórios (required)
  • Tipagem automática
  • Erros estruturados
  • Argumentos desconhecidos são rejeitados

💡 Filosofia

Esse SDK segue 3 princípios:

  1. Zero boilerplate
  2. CLI primeiro
  3. Compatível com pipelines

🚀 Roadmap

  • Autocomplete (bash/zsh)
  • Logs coloridos
  • Plugins
  • Execução assíncrona
  • Cache de execução

🤝 Contribuição

Pull requests são bem-vindos!


📄 Licença

MIT


Novidades

  • Geração de documentação automatizada via CLI: --readme (com -o opcional).
  • Empacotamento inteligente de aplicações via CLI: --zip (com -o opcional), que empacota o script principal, dependências locais, README.md e requirements.txt.
  • Análise de importações baseada em AST para descoberta automática de arquivos/módulos de dependências locais.
  • Corrigida a Geração de esquema para funções e classes.
  • Inferência estática de campos retornados por dicionários (mostra fields em stdout e saídas customizadas quando detectado).
  • Suporte total para decoradores @Input aplicado em classes e métodos @Out/@MainOut.
  • CLI: --schema, --help, --input, --input-file.

Versão atual do pacote: 0.1.5.

Project details


Download files

Download the file for your platform. If you're not sure which to choose, learn more about installing packages.

Source Distribution

sparkit-0.1.5.tar.gz (20.6 kB view details)

Uploaded Source

Built Distribution

If you're not sure about the file name format, learn more about wheel file names.

sparkit-0.1.5-py3-none-any.whl (19.0 kB view details)

Uploaded Python 3

File details

Details for the file sparkit-0.1.5.tar.gz.

File metadata

  • Download URL: sparkit-0.1.5.tar.gz
  • Upload date:
  • Size: 20.6 kB
  • Tags: Source
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.10.20

File hashes

Hashes for sparkit-0.1.5.tar.gz
Algorithm Hash digest
SHA256 ac92b2a3def10680aa1c71f6fd67e218b16f5d014a0edc9c852af657914f3954
MD5 0e934f948e3ff91b190561795435dec7
BLAKE2b-256 eda55b19c588fce5165ef76c96c1741b4e13060d131e1a254152bbb978ce485c

See more details on using hashes here.

File details

Details for the file sparkit-0.1.5-py3-none-any.whl.

File metadata

  • Download URL: sparkit-0.1.5-py3-none-any.whl
  • Upload date:
  • Size: 19.0 kB
  • Tags: Python 3
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.10.20

File hashes

Hashes for sparkit-0.1.5-py3-none-any.whl
Algorithm Hash digest
SHA256 f7fe71f200cc6b4f099e465951ca995c7cb59450f8bf766d1dd5351b9274cae2
MD5 bde92b96ad03a414dace4c5ccd86d2a7
BLAKE2b-256 7834f1e05b93d2a813e1f8ebf1f29ab7b3282d9a91ce2d9a719b106850d5fa5d

See more details on using hashes here.

Supported by

AWS Cloud computing and Security Sponsor Datadog Monitoring Depot Continuous Integration Fastly CDN Google Download Analytics Pingdom Monitoring Sentry Error logging StatusPage Status page