请输入
菜单

云采集使用方法(含定时云采集)

一、云采集是什么?

 

云采集是指,使用由八爪鱼提供的云服务进行数据采集。八爪拥有5000+云服务器,7*24小时运行云采集服务。

我们在本地电脑上将任务配置完成,测试没有问题以后,就可以选择启动八爪鱼的云采集。

注意,团队版以上用户自带云采集功能。什么是团队版?点击查看 版本套餐 。

 

二、云采集优势

 

与【本地采集】对比,【云采集】具有以下优势:

1、并发多任务同时运行,采集速度更快,单个任务采集速度可提升6-100倍。

2、实现无人值守。可关闭电脑、软件进行数据采集,真正实现无人值守。

3、定时采集。云服务器是7*24小时,可设置任务的定时启动工作。

4、数据自动入库。

5、通过数据导出API接口,实现秒级导出,无缝对接内部系统。

 

云采集并发运行多任务

云采集多任务并发同时运行采集,团队版默认6个节点,最多可支持6个任务同时运行云采集,可叠加云节点,节点越多并发任务数越多;企业版节点套餐不同,如30节点企业版可以并发同时运行30个任务,套餐节点越多并发任务数越多。如下视频所示,账号为企业版100节点,同时启动30+新闻任务,30+新闻任务可以同时运行启动采集,无需排队等待!

 

云采集加速功能介绍

云采集除了并发运行多个任务,针对单个任务满足加速条件的,可实现云采集加速采集,云采集加速条件为:循环网址、循环文本、固定元素,满足其中一个条件的任务云采集的时候就可以实现加速采集,账号节点充足的前提下,单个任务最高可实现100倍加速。

如下图所示的任务,任务为循环网址任务,启动云采集可实现任务拆分成多个子任务,并发运行多个子任务实现加速的效果:

 

通一个任务如果满足加速条件的,云采集加速采集,节点越多,同时运行的子任务数越多,加速的效果就越明显,如下视频所示,同一个任务分别设置6个节点和50节点运行采集,50节点同时运行50个子任务速度比6节点快非常多!

任务加速原理详情可查看教程:云采集原理和规则加速设置

 

本地采集与云采集加速采集对比

同一个任务,任务满足加速采集的,云采集速度会比本地采集速度快很多,如下所示:云采集为6节点加速采集,采集速度是本地采集速度的6倍多!

 

 

三、如何启动云采集

任务配置完成以后,有多种方式启动云采集。

1、在任务配置界面,点击【采集】,选择云采集的【普通模式】或加速模式。

在【启动云采集】后,在【任务】列表中,找到此目标任务,可以看到,此任务正在运行云采集。点击 按钮,可结束本次云采集。

点击,会弹出采集窗口,可查看云采集的采集实况,在任务运行信息点击详情可以查看对应批次任务的运行日志

云采集到的数据会实时更新,本示例【采集到 60条数据】。鼠标移动到【全部】按钮并点击,可查看当前任务采集到的全部数据。采集完成后,点击【导出】按钮,可以根据自己实际需要的格式导出。

 

 

2、也可以直接在【我的任务】中,找到目标任务,点击【启动】按钮,启动云采集。

 

 

四、设置定时云采集

 

可通过设置定时云采集,实时采集各网站更新的数据。

 

1、对特定的任务设置定时云采集

找到任务,点击更多操作按钮,【云采集】-【设置定时】,会弹出一个【定时云采集】的设置弹窗。

支持多种时间方式:【只采集一次】【每周采集】【每月采集】【间隔时间采集】。请根据需要,选择定时方式。

 

 

 本示例选择【间隔时间采集】,设置间隔时间为10分钟。

点击【保存并启动】,此任务将每间隔10分钟,自动启动一次云采集。 

 

定时设置成功后,在该任务的【定时采集】列会出现下一次定时启动的时间

 

2、对任务组设置定时云采集

点击【任务】进入任务列表,点击右上角的按钮,切换任务显示方式为【任务组】。

然后将移动到任务组名称上,出现4个图标。 图标,为任务组设置时间表。

接下来的操作,与单个任务设置定时采集的操作相同,不再赘述。

 

最近修改: 2025-11-21