金融财经类网站采集场景

Collection scene of Financial websites

采集金融财经类网站资讯数据均不需要登录

  • 场景1:通过导航滚动条获取新闻信息
    • 01配置流程

      第一步：大多数资讯信息均可通过网页的资讯滚动条获取，所以我们可以通过滚动条页面进入新闻列表页，下图为采集到的列表链接。

    • 01配置流程

      第二步：由于采集列表页需要翻页，所以需要设置抽取翻页链接，翻页链接的抽取需要脚本实现。翻页链接如下图所示：

    • 01配置流程

      第三步：链接获取到之后需要获取数据：

    • 02获取详情页信息

      可以获取到的数据如图：

  • 场景2:通过栏目页面获取新闻信息
    • 01配置流程

      第一步：我们也可以通过首页的子栏目进入相应子栏目的新闻列表页，下图为采集到的列表链接：

    • 01配置流程

      第二步：由于采集列表页需要翻页，所以需要设置抽取翻页链接，翻页链接的抽取需要脚本实现。翻页链接如下图所示：

    • 01配置流程

      第三步：链接获取到之后需要获取数据：

    • 02获取详情页信息

      可以获取到的数据如图：

股票信息类网站采集场景

Collection scene of Stock Information website
  • 场景1:通过关键词搜索获取股票信息
    • 01配置流程

      第一步：通过关键词搜索，需由用户准备好关键词，关键词即为在网站中搜索的搜索词， 如关键词为股票代码为“601988”的中国银行，通过ForeSpider的关键词采集功能，采集股票信息，如图所示：

    • 01配置流程

      第二步：链接获取到之后需要获取数据，由于数据由js加密，需要破解才能得到， 所以需要先在代码中找到如下数据，在软件中通过代码获取，如下所示：

  • 场景2:通过大盘走势图搜索获取股票信息

    • 通过K线图获取股票信息，采集难度较大，如需采集,

      请联系客服qq：2779623375或微信：qianxiu0106