Мультипарсер › Парсинг сайтов по расписанию

Парсинг сайтов по расписанию

Настройте сбор сайта один раз, и наш сервер будет повторять его сам — каждую ночь или раз в неделю. Вам остаётся смотреть, что изменилось: какие товары появились, какие пропали и где поменялась цена. Компьютер и браузер для этого включать не нужно.

Установить расширение Как это работает

Бесплатно и без регистрации: до 50 карточек за запуск.

Изменение	Ссылка	Поле	Было	Стало
изменилось	…/sharp-objects_997/	Цена	47.82	44.90
изменилось	…/a-murder-in-time_877/	Наличие	In stock (16 available)	In stock (3 available)
новая	…/the-dirty-little-secrets_869/	Название		The Dirty Little Secrets of Getting Your Dream Job
пропала	…/boar-island_802/	Название	Boar Island (Anna Pigeon #19)

Как выглядит файл изменений (формат файла из архива; товары учебного сайта books.toscrape.com).

Для чего это нужно

Мониторинг цен конкурентов — утром в почте видно, кто и на сколько поменял цену.
Новые товары и объявления — что появилось в каталоге или выдаче с вашими фильтрами за сутки.
Наличие — какие товары пропали из продажи и какие вернулись.
Каталог поставщика — свежая таблица товаров к началу рабочего дня.

Как включить

Установите расширение и бесплатно зарегистрируйтесь — расписание хранится в вашем аккаунте.
Настройте сайт как для обычного сбора: карточки, поля, страницы. Нажмите «Проверить», чтобы убедиться, что поля читаются.
В строке «Повторять сбор по ночам» выберите частоту — каждую ночь или раз в неделю, отметьте «письмо при изменениях» и нажмите «Сохранить».

Сервер запускает сбор ночью, с 1:00 до 6:00 по Москве, когда он свободен. Результаты и файлы — в кабинете, раздел «Сбор по расписанию». Подробно — в помощи.

Отчёт об изменениях

Каждый запуск сравнивается с прошлым, и рядом с результатом в архиве лежит файл изменений — в Excel, CSV или JSON:

новые карточки — которых не было в прошлый раз;
пропавшие — которые были, а теперь их нет;
изменившиеся — по каждому полю старое и новое значение: цена, наличие, название.

Карточки сравниваются по ссылке, а не по месту в списке, поэтому перестановки на сайте изменениями не считаются. Если запуск упёрся в лимит карточек, отсутствующая карточка помечается «нет в этом запуске», а не «пропала».

Что важно знать

Бесплатно — одно расписание с регистрацией; до 50 карточек за запуск без регистрации, с регистрацией — больше. Хранятся последние 7 запусков с файлами.
Если сайт изменился или перестал открываться и запуски несколько раз подряд не удались, расписание ставится на паузу, и приходит письмо — оно не будет молча присылать пустые файлы.
Чтобы «пропала» значило «пропала», сузьте список фильтрами сайта или выберите устойчивую сортировку (например, «сначала новые»): если карточек больше лимита, состав выборки меняется сам.
Нужно собирать чаще, больше или с выгрузкой в ваш магазин — на заказ.

Частые вопросы

Нужно ли держать компьютер включённым?

Нет. Расписание хранится на сервере и запускается ночью само; браузер и компьютер могут быть выключены.

Как часто можно собирать?

Каждую ночь или раз в неделю. Собирать чаще можно на заказ.

Как я узнаю об изменениях?

Отметьте «письмо при изменениях» — придёт письмо, если что-то поменялось. Файл изменений и результат каждого запуска лежат в кабинете.

Это бесплатно?

Да: одно расписание — бесплатно с регистрацией. Регистрация тоже бесплатная, по e-mail, без пароля.

Что будет, если сайт поменяет вёрстку?

Если запуски несколько раз подряд не удадутся, расписание встанет на паузу и придёт письмо. Достаточно заново выбрать поля в расширении и сохранить расписание.

Попробуйте на своём сайте

Установка — минута, настройка — несколько кликов.

Установить расширение