【创想电商采集助手】采集沃尔玛、沃尔玛加拿大站

| 2023-10-18 06:03:11

By | 2023年10月18日

创想电商采集助手已支持沃尔玛、沃尔玛加拿大站点的数据采集,支持品牌页、搜索结果、详情页采集。

软件下载:ec.cxsup.com

沃尔玛反爬问题说明

沃尔玛采集过快、单个IP一段时间访问次数过多都会屏蔽而弹出验证码,如果弹出验证码,请您手动完成验证再继续采集。如果遇到验证码无法通过、验证码卡住点击这里了解

如果您采集沃尔玛数据量不算高,如果您网络比较好,建议您不要采集过快,可在设置中 设置采集延迟,降低请求速率。

沃尔玛采集需求大

如果您采集数据量比较大,需要更快更多的数据量,目前我们已推出无忧采集沃尔玛的方案,您可以购买“创想采集高匿代理”来采集数据,实测5-10个线程采集不卡不弹验证码,速度稳定,如有需要请联系客服订购。如果您没有代理很难实现非常大量数据的采集,因为沃尔玛屏蔽IP比较严重,普通情况下适合日常数据收集整理之用。(该方案可能存在时效性,不保证代理IP一直都稳定采集)

 

操作方法

复制要采集的网址。

支持采集店铺、单个商品详情、搜索页,直接将网址复制到采集器中即可采集。

 

进入软件,粘贴要采集的网址。(可以是搜索结果、单个商品网址、品牌商品列表页)

点击开始按钮即可采集。也可以点击【开始采集】按钮来添加和管理任务。

 

如下图,正在采集中。

等待采集完成即可。

有关采集变体详情和条码

如果您还需要采集变体的“商品条码”(UPC/EAN),这些需要访问变体的详情页才能获取到。默认用主商品的条码,如果您开启了采集变体详情,才能获取到变体的条码等信息。

如下图,开启变体详情采集:在【设置】【采集设置】【开启采集每个变体详情】勾上即可。

如下图,重新采集获取到了商品条码

提示:开启后由于会访问每个变体的商品页,会降低采集速度、提高被平台屏蔽概率。非必要请不要开启采集变体详情的功能。目前条码必须采集变体详情,没有其他解决办法,请自行根据业务需要取舍。

 

有关验证码屏蔽解决

 

如果采集时被屏蔽,会弹出如下窗口。点击【PLEASE WAIT】按钮直至进度条到底部。

 

等待网页跳转到正常页面后,点击下图按钮继续采集即可。

 

为什么验证码验证完后一直卡住、没反应、一直弹出、提示再试一次?

  1. 验证码卡住没反应、或者输入后一直卡住,基本是单个IP采集太多数据和访问速率过快导致,即使切换了IP,也没有清空缓存而开始采集,仍然会被屏蔽,请按下面提示逐一检查尝试解决。
  2. 经过测试,采集过多或很容易出现验证码屏蔽,基本是IP问题, 因沃尔玛不对中国服务建议用美国IP采集,如果您遇到验证码问题无法手动解决,请用VPN等代理工具切换采集IP,切换IP后,务必记得在【浏览器】【浏览器操作】【重置缓存】重置沃尔玛平台缓存后,再重新采集(一般操作后会再提示验证码,验证一次尝试解决)。
    特别提醒:如果换了IP没有重置缓存,可能会造成原来的信息又被提交会被亚马逊检测关联到,您也可以【设置】里开启自动清空缓存功能,操作完成后再次采集。
  3. 如果单个IP采集过多数据,请您在【浏览器】中,点【重置缓存】,清空掉沃尔玛的缓存再试一次
  4. 降低采集速度,如果爬取速度太快也会被识别到,在【设置】【通用设置】【采集限速】中设置延迟,降低访问速度,建议设置2000-5000之间
  5. 如果用代理更换了IP,请检查设置是否正确、代理是否有效、代理是否和采集器有对接,您可以在【日志】中刷新查看当前采集的IP位置,如果是您代理的位置才代表采集器能够正常访问,如果是您本机的IP代表没有从代理获取采集数据。点击这里了解设置代理说明
  6. 上面方法都不行请先确保IP有效、尝试换一个VPN或代理软件 。推荐代理和有关代理如何设置点击这里了解
  7. 等待几分钟, 在【 浏览器】【浏览器操作】【重置缓存】清空缓存再试。

 

如果您上面方法都试过无法解决,可联系我们订购“高匿名代理”来解决或者您自己自备代理IP来解决(代理的IP用国内国外均可,北美IP更佳~)。如果这些方案您都无法接受,即使您联系我们,也不会有进一步的解决方案。(因为也没其他可以操作的空间了,只能换IP,清空缓存)

如果您认为存在BUG请反馈给我们(若是平台限制原因非BUG,但我们会尽量优化降低采集出错)