acs-data-collection 1.0.0

ACS Data Collection Service - Professional data collection from marketplaces to ClickHouse

ACS Data Collection Service

AbovyansConsultingServices — сервис сбора данных с маркетплейсов в ClickHouse

Коннекторы загружают данные из API. Проект работает на Docker и пишет в ClickHouse; библиотеку можно использовать и отдельно.

Поддерживаемые платформы

WB, Ozon, МойСклад, Яндекс.Маркет, Яндекс.Директ, VK, Bitrix24, AlfaCRM, Google Sheets.

Быстрый старт

1. Установите Docker.
2. Скачайте docker-compose.yml в папку с настройками.
3. Положите туда же settings.xlsx (структура: лист db — БД и Telegram, остальные листы — платформы).
4. Запуск: docker-compose up -d

Подробнее по Docker: DOCKER.md

При старте контейнер обновляет пакет acs-data-collection с PyPI — клиенты получают актуальную версию без пересборки образа. Как выложить обновление: PUBLISH.md

Конфигурация

• settings.xlsx — лист «db»: host, port, user, password, database, bot_token, chats; листы платформ: токены, отчёты, расписание.
• ClickHouse: порт 8123 (HTTP), логи: docker-compose logs -f

Поддержка

• Issues: https://github.com/abovyanmg/data-collection-service/issues
• Email: [e-mail]

Лицензия

Разработано: AbovyansConsultingServices. Основано на открытых технологиях.

Благодарности

Спасибо за базис: Morinad

Особая благодарность Александру Морину (@alexdirect) — за знания и вдохновение.