我的一级网页上有信息要爬,二级网页也要信息要爬,第一个二级网页爬完之后再返回一级网络进入下一个二级网页采集,应该怎么弄?
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2017-12-4 16:07

yangwenge 金牌会员 发表于 2017-12-4 16:05:44 | 显示全部楼层
1,每一个二级网页都有独立网址,可以直接使用层级采集
参考教程《采网址做层级采集》
2,点击进去二级网页网址不变
这就需要用连续动作点击
如果点击后弹出新页面
还需要用到旗舰版的飞掠功能
如果点击后在当前页面打开
要用到旗舰版的回退功能
举报 使用道具
Fuller 管理员 发表于 2017-12-4 16:07:03 | 显示全部楼层
如果进入到下一级页面有独立的网址,那么就用层级抓取,两级抓取可以并行来做的,不用考虑从第二级回退到第一级。第一级只管抓数据和抓下级的网址,不做跳转。具体参看《采集网址做层级采集

如果下一级的页面没有独立的网址,那么就得做连续点击动作,怎么回退到上一级,要看具体情况,要么网页上有专门一个可点击的“返回”按钮,要么要用回退功能(旗舰版功能)。打开教程首页的左栏菜单,高级教程那里有连续动作教程
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-19 05:07