发表于2018年5月30日10:07最后回复于2018年5月30日10:07

ForeSpider教程之如何进行关键词采集

2372浏览量

0评论

很多人在使用的过程中,需要通过关键词配置来采集所需数据,那么关键词采集功能具体怎么使用呢?今天就带大家一起学习一下ForeSpider数据采集系统中很强大的功能——关键词采集。

关键词采集有两种配置方式,可以通过可视化操作实现,也可以自己通过观察规律得出。

(一)可视化操作

首先填写采集地址(以百度为例,网址为www.baidu.com),再点击“关键词配置”,打开“关键词采集”按钮,点击右侧“开始配置”。

图片1

按照左上方提示“Ctrl 鼠标左键,单击“关键词搜索”输入框”,点击保存,即可得到如下图:

图片2

其次将关键词,填写到右侧的关键词列表中,每组关键词之间用英文“;”或回车换行隔开。每组关键词可包含多个关键词,多个关键词之间用英文“;”隔开。各组的关键词排列顺序必须保持一致。填写好,如下图所示:

1527582967(1)

通过这样简单的可视化操作,关键词就配置完成了。

(二)观察规律,手动填写

ForeSpide除了通过可视化的操作配置关键词外,也可以通过观察链接规律,手动填写参数来配置关键词。

首先打开关键词采集按钮。选定目标网站,以新浪网为例,网址为:

http://www.sina.com.cn/,通过搜索关键词“大数据”得出如下网址:http://www.sina.com.cn/mid/search.shtml?range=all&c=news&q=大数据&from=home&ie=utf-8,可以看出q=大数据,即q=关键词。“?”前为请求地址,等号前面的单词为“参数名称”,等号后为“参数值”,“参数名称”等于“关键词”外,其余参数类型均为“默认值”即可,“关键词”的“参数名称”为“检索关键词”,填写好,如下图所示:

图片4

同样的通过在右侧的关键词列表中填写好关键词,如下图所示:

图片5

这样关键词就配置好了,最后进行正常的模板配置就可以进行数据采集了。

大家有什么问题可以继续留言,或者咨询技术顾问。汇总之后,下次的教程可能就是你们想要问的问题哦~



发布新帖

私信

举报