快捷导航
为什么我最后一页会抓取很多次,爬虫不能自己停止吗?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-7-29 22:04

Fuller 管理员 发表于 2016-7-29 22:04:59 | 显示全部楼层
DS打数机菜单:高级-〉终点标志-〉重复内容,设置上就能停下

不能停下的原因是:有些网页即使到最后一页,“下一页”仍然能点击
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 数据管家和集搜客网络爬虫超出配额是怎么回
  • 用GooSeeker数据管家能采集微博内容吗?
  • 怎样使用GooSeeker数据管家启动采集任务?
  • GooSeeker数据管家软件使用指导
  • 如何使用集搜客分词平台做社会网络图分析?

热门用户

GMT+8, 2020-10-23 14:00