Управление сборами

Автообновление списков чарта ВКЛЮЧЕНО Каждую среду в 18:00 МСК

Каждую среду в 18:00 по Москве сервис проверяет лендинг чарта на изменения. При обнаружении смены сезона, GMV или лидеров автоматически запускается каскадный конвейер и заливается обновленный рейтинг для всех пользователей.

Следующая проверка: Загрузка... ...

Крайняя проверка: —

Результат: —

Автоматическое обновление шопсов ВКЛЮЧЕНО (15 мин) На постоянной основе

Постоянная проверка каждые 15 минут: 1) поиск новых шопсов Ozon у 1745+ авторов топа; 2) проверка самих шопсов в таблицах (живучесть, удаление, динамика роста просмотров) и обновление дашборда.

Следующая проверка: Загрузка... ...

Крайняя проверка: —

Результат: —

1. Еженедельное теневое обновление (Staging Pipeline) Загрузка...

Принцип изоляции: боевой просмотрщик chart_viewer.html работает без пауз и перебоев. Сбор, сопоставление со старой базой, каскадный поиск и парсинг шопсов Ozon ведутся в теневом буфере и переносятся на основной экран только после 100% готовности.

Снимок загружается...

Сбор Landing

Сопоставление

Каскад дельты

Шопсы Ozon

Публикация

Узнано авторов

Дельта новых

Ссылок дельты

Шопсов Ozon

Авто-публикация в боевой режим (Шаги 1–5)

После сбора шопсов Ozon готовый чарт автоматически перенесётся на экран без ожидания клика «Опубликовать».

Контрольные точки: при рестарте продолжит с места остановки

Ручное управление отдельными шагами конвейера...

4. Двухэтапный мониторинг шопсов: новые + динамика и живучесть Остановлен

Строго поочерёдный двухэтапный цикл: 1) поиск новых шопсов у 1745+ авторов чарта (пакеты через VK API execute); 2) проверка живучести (удалений) и динамики роста существующих шопсов (скорость просм/ч, прирост за 24ч, пакеты wall.getById). Время полного цикла: ~40-45 секунд.

Фоновый планировщик: Мониторинг выключен

Каждые мин

2. Трёхуровневый каскад поиска СООБЩЕСТВ (с валидацией шопсов) ТОЛЬКО СООБЩЕСТВА (105 осталось)

Этап 1 Базовый поиск групп: Сверка с базой клипов/шопсов Ozon + Service Token API.

Этап 2 Поиск Playwright: Реальный поиск в браузере VK без лимитов Flood Control со 100% валидацией шопсов.

Этап 3 Добор через токен: Точечный поиск пабликов через groups.search (для оставшихся единиц).

Сессия Playwright в VK: Проверка сессии...

Проверка...

Лимит записей на этап:

записей

Обработать все записи без лимита

Визуальный режим Chrome для Playwright

🔄 С #1 места заново (все 1500)

3. Сбор и разбор шопсов Ozon Парсер постов

Сканирование стены авторов чарта, поиск ссылок на Ozon, извлечение SKU, названий и цен через API Ozon.

Охват участников:

Только незакрытые авторы ...

Авторы с найденными ссылками VK, у которых еще не было сбора по шопсам

Все участники чарта (все авторы со ссылками)

Топ-N мест (только авторы с рангом от 1 до N)

Первые N участников по порядку списка

Глубина поиска (дней):

дней

Шопсы активны 30 дней. Поиск только с текущей даты минус 30 дней.

Начать с позиции (Start From):

Позволяет возобновить прерванный сбор с любого автора.

5. Синхронизация и просмотр данных

Пересчитывает сводные данные, генерирует файл chart_data.js для интерактивной таблицы и актуализирует Excel-файл top_chart_vk_ozon.xlsx.

Панель управления сбором данных ТЕСТ (TEST)