微信登录
账号登录
扫码立即登录
您输入的账号或密码错误
022-2345 2937
185 2247 0110
business@forenose.com
QQ:2779623375
用户QQ群3:606835039
用户QQ群4:795287153
订阅号
服务号
客服微信:qianxiu0106
ForeSpider
数据采集引擎
任务装载顺序是指在同时采集多个网站时,日志列表中各任务采集的优先顺序。任务装载顺序有如下两种方式:
1.顺序优先
按照采集任务列表的顺序,采集各列表任务的数据。先采完一个任务的所有链接再采集下一个。
【顺序优先采集】
2.负载均衡
打乱任务采集顺序,同时采集各任务的数据链接。优点是可以降低被网站封锁IP的风险,同时可以提高采集效率。如果不是对某些任务有优先采集完毕的需求,建议选择“负载均衡”。
【负载均衡采集】