NAV Dataverk
Project description
Dataverk
Get started
Fra scratch - nytt dataverk prosjekt
- Opprett repository på github
- Klon github repository lokalt på din maskin
pip3 install dataverk
dataverk create_settings
- fyll ut den genererte settings.json filen med data
Lage en ny datapakke i eksisterende repository
- Hvis du ikke har en .env fil kjør;
dataverk create_env_file
dataverk create
jupyter notebook
- åpne datapakke-navn/scripts/etl.ipynb
- Implementer data prosesseringen
- push prosjekt endringene til github (
git push orgin master
)
Metoder for tilgang til datasett.
Forbindelser (source & sink med kryptering)
- Fil
- JsonStat
- Oracle
- Google Cloud Storage
- ...
Formater
- Pandas
- Arrow
- CSV
- Excel
- JsonStat
- Vega & Vega Lite
- Semiotic
- ...
Dashboards
Relaterte prosjekter
url | beskrivelse |
---|---|
go-jek feast | Feast - Feature Store for Machine Learning |
ContinuumIO/intake | Intake: A general interface for loading data |
frictionlessdata.io | Frictionless data |
git lfs | Github Large File Storage |
dvc.org | Data Science Version Control |
quilt (github) | Quilt - Version and deploy data |
Python package in S3 | CLI tool for creating a Python Package Repo i S3 |
pypiserver based on bottle | Minimal PyPI server |
Project details
Release history Release notifications | RSS feed
Download files
Download the file for your platform. If you're not sure which to choose, learn more about installing packages.
Source Distribution
dataverk-0.0.17.tar.gz
(40.6 kB
view hashes)