Парсинг списков товаров

Инструкция по сбору данных из категорий и результатов поиска. Разница между базовым и расширенным режимами работы.

Списки товаров — это страницы категорий, результаты поиска, страницы брендов или витрины продавцов. Market Ninja умеет собирать данные со всех этих страниц.

Как запустить сбор

Перейдите на страницу списка товаров (например, в категорию Женские купальники на Wildberries);
Откройте расширение;
В выпадающем списке выберите режим парсинга (см. ниже);
Нажмите кнопку Собрать данные.

Процесс сбора данных работает, пока открыто окно расширения. Не закрывайте окно расширения до окончания процесса, иначе сбор данных прервется.

Режимы парсинга

1. Основные данные

Расширение проходит по страницам каталога (пагинации) и собирает данные о товарах.

Скорость: Высокая (сотни товаров в минуту);
Данные: только основная информация (см. в разделе Списки товаров);
Ограничения: В этом режиме недоступны детальные характеристики (состав, страна производства и прочие).

2. Расширенные данные

Расширение сначала собирает список товаров, а затем "проваливается" в карточку каждого товара, чтобы собраться полную информацию.

Скорость: Не высокая, так как делается отдельный запрос на каждый товар;
Данные: Всё, что есть в Основных данных, а также детальные характеристики и настроенные кастомные атрибуты;
Рекомендация: Используйте этот режим, когда критически важно собрать максимально полные данные о товарах.

Ограничения

Для защиты от блокировок со стороны маркетплейсов в расширении установлена задержка между запросами, которая имитирует поведение человека.