【创想电商数据工厂】一键采集(淘宝天猫、阿里巴巴、速卖通等)平台数据

| 2020-07-13 12:18:25

By | 2020年7月13日

采集十分简单,无需配置即可上手,直接将您需要采集的网址复制到软件中即可采集。

注意:由于本产品刚发布,后续可能会调整界面,但大体上都差不多,请您根据情况参考

确定要采集的网址

本软件支持采集的列表页有:各大平台搜索结果、店铺列表页等。如果您有其他需要请联系我们反馈,直接添加网址即可采集,无需配置。

本系统支持各大平台数据采集,当然不支持的站点后续也会支持,您也可以将采集需求反馈给我们,我们技术专员将根据情况增加支持采集。(后续软件会开放傻瓜式自定义数据规则配置)

以速卖通为例,例如我们需要采集iphone 11 case 手机壳,先搜索关键词,然后复制此页面网址即可

开始采集

把网址https://www.aliexpress.com/w/wholesale-iphone-11-case.html?spm=a2g0o.home.100000001.4.650c2145kXqspb&osf=discovery复制到软件主窗口中进行采集。

有两种方法进行采集,第一种直接在“快速开始”中采集,软件会先将网址添加到采集任务中,再进行采集。您也可以手动添加采集。

下面我们介绍一下两种采集方法

第一种

进入软件,点击“采集面板”点击“快速开始”。进入下图界面

 

将网址粘贴后,可以看到下图,会提示已识别此链接并支持采集,并会显示对应站点的LOGO和说明。接下去只需要点击“一键采集”系统便会开始自动采集,将此页面所有数据都采集下来。

 

 

在采集状态中可以看到正在采集数据中:

 

 

第二种

您可以在任务管理中,手动添加采集的网址,支持excel批量导入任务或手动添加。下面以手动添加为例

如下图,点开任务管理界面,点击添加新任务

弹出添加采集任务对话框。将网址粘贴到“采集的网址”一栏中。即可添加到任务管理中,同时你还可以选择要保存的数据仓库,用来保存采集的数据。有关数据仓库请查看后续教程。

 

任务中的链接将永久保存在你的电脑里,下次打开软件也可以查看。

 

 

输入网址后,软件会自动取任务名字,你也可以自己输入任务名字。

软件会自动识别此网址的站点信息,此时就可以配置采集的页数限制、总量限制等信息。后续还会支持更多选项

按自己想法设置完成后。点击“添加”即可保存任务。也可以点击“添加并提交采集”即可开始采集。

本教程就点击“添加”按钮。

添加后在任务管理里,即可查看添加的任务。

 

如上图,勾选需要采集的任务,点击“开始采集选中任务”即可开始采集勾选的任务,支持多选任务排队采集。

采集商品详情页

商品详情页就是商品宝贝的详情页面,如下图

目前提供两种方式采集

第一种:自动采集详情页

第二种:手动添加详情页进行采集,手动添加详情页采集介绍请查看这里

本教程重点介绍一下自动采集详情。

本软件自动会对采集每页商品时采集详情,例如采集教程开头介绍的iphone 11 case 手机壳关键词为例

首先系统会采集商品列表页面:

每采集一页,会自动采集此页每个商品的详情页信息。

当然,您也可以关闭自动采集详情页的功能。如下图即可关闭

点击“系统设置”即可设置是否自动采集详情页,关闭后将不会采集详情页。

本软件暂未提供对已采集的数据采集详情页的功能,后续将会开放。因此建议您有需求先一次性采集。

 

采集结束后,在数据仓库栏目中,刷新表格即可看到采集的数据。

有关采集状态的说明,请看下一节