我的一级网页上有信息要爬,二级网页也要信息要爬,第一个二级网页爬完之后再返回一级网络进行下一次迭代,应该怎么弄

举报 使用道具
| 回复

共 6 个关于本帖的回复 最后回复于 2017-4-25 21:36

沙发
HJLing 版主 发表于 2017-4-25 20:46:24 | 只看该作者
本帖最后由 HJLing 于 2017-4-25 20:48 编辑

第一种情况:
每一个二级网页都有独立网址
那就直接做层级规则
参考教程《采网址做层级采集

第二种情况:
点击进去二级网页网址不变
这就需要用连续动作点击
如果点击后弹出新页面
还需要用到旗舰版的飞掠功能
如果点击后在当前页面打开
要用到旗舰版的回退功能
举报 使用道具
板凳
justme 新手上路 发表于 2017-4-25 21:11:30 | 只看该作者
旗舰版在哪儿看
举报 使用道具
地板
HJLing 版主 发表于 2017-4-25 21:14:32 | 只看该作者
举报 使用道具
5#
justme 新手上路 发表于 2017-4-25 21:35:14 | 只看该作者
HJLing 发表于 2017-4-25 21:14
http://www.gooseeker.com/about/charge.html

那除了飞滚这种办法还有其他方法吗

举报 使用道具
6#
justme 新手上路 发表于 2017-4-25 21:35:39 | 只看该作者
HJLing 发表于 2017-4-25 21:14
http://www.gooseeker.com/about/charge.html

那除了飞滚这种模式还有其他方法吗
举报 使用道具
7#
HJLing 版主 发表于 2017-4-25 21:36:39 | 只看该作者
上面说了很多种情况
每种情况都说了方法了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-2 19:09