Принципы и архитектура
Сбор данных (ETL)
Автоматизированные Python скрипты опрашивают API маркетплейсов по расписанию либо «вручную» с заданными параметрами. Логика системы обрабатывает ошибки HTTP 50x и 429, что гарантирует полную загрузку данных, даже если сервис API временно недоступен. Экспорт в БД через UPSERT позволяет синхронизировать ранее загруженные данные. Через ETL-скрипты также можно брать данные из ваших внутренних источников.
Хранение данных
Данные хранятся в БД Postgres, развернутой в Яндекс.Облаке или на вашем VPS. Это обеспечивает полный контроль над вашей коммерческой информацией. База данных позволяет настраивать любые витрины данных на основе «сырых» данных из API, что значительно повышает быстродействие системы. Своя БД позволяет делать бекапы, а также получать мгновенный доступ к накопленным историческим данным.
Визуализация (BI)
Интерактивные дашборды строятся в BI-системе DataLens или на фреймворке Streamlit. Использование сложных SQL-запросов к базе данных позволяет рассчитывать любые метрики в том числе, которые невозможно получить в стандартных личных кабинетах. Система дает возможность использовать не только данные из API маркетплейсов, но и внутренние данные компании: себестоимость, внешняя реклама, значения плановых показателей и unit-экономики.
Базовые возможности
Wildberries Аналитика
- Динамика заказов, выкупов и возвратов
- ТОП продаж и самых доходных товаров
- Полная воронка продаж: от просмотров до выкупа
- География клиентов на интерактивной карте
Ozon Аналитика
- Анализ по моделям FBO и FBS
- Контроль запасов на складах и расчет поставок
- Когортный анализ: поведение покупателей во времени
- Учет данных из отдельного рекламного кабинета
Финансы и Свод
- Расчет чистой прибыли с учетом налогов и логистики
- ABC/XYZ анализ ассортимента по обоим маркетплейсам
- Постоянная или меняющаяся себестоимость товаров
- Сводная информация по конкретному артикулу
Интерфейс системы
Сводная панель в Datalens: Сквозной мониторинг заказов, запасов и расходов по всем МП и ЛК
Динамика заказов OZ в Streamlit: Основные показатели продаж за период в сумме, в динамике и артикулам / сегментам / магазинам
Рентабельность в Datalens: Детальный разбор прибыльности каждого товара с учетом всех расходов
Все по артикулу в Streamlit: 25 метрик, относящихся к одному конкретному артикулу, в динамике по дням
Мониторинг расходов на рекламу в Datalens: оценка эффективности и контроль ДРР
ТОП продаж OZ в Streamlit: товары, которые имеют самые высокие продажи или дают наибольшую выручку
Работающая демо-версия Datalens
Демо BI на Streamlit с реальными данными
Возможности по кастомизации
Дополнительные источники
Требуется взять данные из ваших внутренних баз и таблиц - например, данные продаж по "оффлайн" отделам - выполнимо. Есть чем обогатить данные из API маркетплейсов - курсы валют или данные о ценах поставщиков - не проблема. Возможен экспорт практически из любых источников данных.
Любые метрики
Надо изменить стандартные метрики - например, рассчитать рентабельность от цен для покупателя или конверсию из просмотров сразу в выкупы - легко. В вашем бизнесе используется своя особая метрика - только напишите формулу. Вычисляемые поля не справляются - перенесем расчеты в SQL или Python.
Эксклюзивные дашборды
Нужен свой индивидуальный дашборд - сформулируйте ТЗ и предоставьте данные для расчетов. Не любой полет фантазии реализуем на используемом технологическом стеке, но мы постараемся сделать все, чтобы превратить ваши задумки в полезный дашборд, которого ни у кого больше нет.
Примеры уникальных дашбордов
Расчет окупаемости лицензии по продажам как через маркетплейс, так и прямые оптовые и розничные продажи
Фактическое исполнение плана по отделам МП, ОПТ, Розница за вчера, последние 7 дней и текущий месяц
Базовая установка и индивидуальные фичи
Система состоит из трех частей: ETL-скрипты опроса API, база данных PostgreSQL и BI на базе DataLens или Streamlit. Возможны разные варианты разворачивания каждой из трех частей системы, а от этого зависит и стоимость инфрастктуры, необходимой для работы системы. Типовые варианты установки описаны ниже в тарифах. Также из меню слева на демо дашбордах можно выбрать те вкладки, которые Вам действительно нужны. Стоимость базовой установки прямо зависит от количества выбранных вкладок.
Система изначально устанавливается в базовой версии. После установки базовой версии обсуждаются необходимые именно Вам особые доработки системы и их стоимость. После установки базовой и/или адаптированной под Вас системы, так как API регулярно меняется, подразумевается платное техническое сопровождение с моей стороны, но возможна и передача этих функций Вашим специалистам
Тарифы установки и поддержки базовой версии
Минимум
5000 рублей в месяц- Полная установка ETL, PostgreSQL и BI на моем VPS
- Дашборды на базе Streamlit
- Договор оферта
Самый простой вариант: от вас только ключи API, все остальное я сделаю сам
Средний
Установка: 1000р за 1 вкладку дашборда - разово.Техподдержка: 3000р в месяц за 1 маркетплейс.
Яндекс.Облако: от 5000р в месяц.
- Установка ETL-скриптов и PostgreSQL на моем VPS
- Дашборды на базе Datalens в вашем Яндекс.Облаке
- Договор оферта
Datalens разворачивается в Яндекс.Облаке, которое надо отдельно оплачивать. ETL-скрипты и PostgreSQL база остаются на моем VPS сервере, оплата которого входит в техподдержку.
Максимум Streamlit
Установка: 2500р за 1 вкладку дашборда - разово.Техподдержка: 2000р в месяц за 1 маркетплейс, либо сами.
Облако/VPS: от 1000р в месяц.
- Установка ETL, PostgreSQL и BI на вашем VPS
- Дашборды на базе Streamlit
- Договор неисключительной бессрочной лицензии
Все части системы разворачиваются на вашем VPS, который надо отдельно оплачивать. В этом варианте программные коды системы передаются вам, поэтому возможна техподдержка вашими специалистами. Моя техподдержка - 2000 р в месяц за 1 маркетплейс, либо сдельная оплата при возникновении необходимости.
Максимум Datalens
Установка: 3000 р за 1 вкладку дашборда - разово.Техподдержка: 2000 р в месяц за 1 маркетплейс, либо сами.
Облако + VPS: от 5000 р в месяц.
- Установка ETL, PostgreSQL и BI на вашем VPS
- Дашборды на базе Datalens в вашем Яндекс.Облаке
- Договор неисключительной бессрочной лицензии
Datalens разворачивается в Яндекс.Облаке, которое надо отдельно оплачивать. ETL-скрипты и PostgreSQL база разворачиваются на вашем VPS сервере или в Яндекс.Облаке. В этом варианте программные коды системы передаются вам, поэтому возможна техподдержка вашими специалистами. Моя техподдержка - 2000 р в месяц за маркетплейс, либо сдельная оплата при возникновении необходимости.