Market NinjaMarket Ninja
使用扩展

抓取商品列表

如何从类别和搜索结果中收集数据。基本模式和扩展模式之间的区别。

商品列表是指类别页面、搜索结果、品牌页面或卖家橱窗。Market Ninja 可以从所有这些页面收集数据。

如何开始收集

  1. 前往商品列表页面(例如 Wildberries 上的 女士泳衣 类别);
  2. 打开扩展程序;
  3. 在下拉列表中选择抓取模式(见下文);
  4. 点击 收集数据 按钮。
数据收集过程仅在扩展程序窗口打开时运行。在过程结束前请勿关闭扩展程序窗口,否则数据收集将中断。

抓取模式

1. 基本数据

扩展程序会遍历目录页面(分页)并收集商品数据。

  • 速度: 高(每分钟数百个商品);
  • 数据: 仅基本信息(参见商品列表部分);
  • 限制: 此模式下无法获取详细特征(成分、生产国等)。

2. 扩展数据

扩展程序首先收集商品列表,然后"进入"每个商品的详情页以收集完整信息。

  • 速度: 不高,因为需要对每个商品单独发出请求;
  • 数据: 基本数据中的所有内容,以及详细特征和配置的自定义属性
  • 建议: 当收集尽可能完整的商品数据至关重要时,请使用此模式。

限制

为了防止被电商平台屏蔽,扩展程序在请求之间设置了延迟,以模拟人类行为。

本页目录