快捷导航
18 14230

翻页

bof_king 于 2017-9-21 10:35 发表 [复制链接]
翻页到了某一个页数,翻不过去,比如说爬到第3页,一直跳转不到第4页,网页浏览第四页进不去,第五园又正常,有什么方法可以跳过第4页,求解
举报 使用道具
| 回复

共 18 个关于本帖的回复 最后回复于 2017-12-10 22:35

bowieD 金牌会员 发表于 2017-9-21 10:53:22 | 显示全部楼层
本帖最后由 bowieD 于 2017-9-21 10:57 编辑

1,如果每一页都有独立的网址,就可以把规则中所有的线索都去活,直接把第五页的网址线索复制出来添加到规则中,启动爬虫就会从第五页开始
2,如果没有独立的网址就需要做连续动作,通过点击或选择第五页的页码去从第五页开始抓起。《连续动作翻页》
3,第四页翻不过去第五页又可以应该是第四页的结构发生了变化。《翻页到中间就失败了怎么解决》

举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:12:52 | 显示全部楼层
没有独立的网址,翻页网址是不会变化的,这要怎么办
举报 使用道具
yangwenge 金牌会员 发表于 2017-9-21 11:16:25 | 显示全部楼层
bof_king 发表于 2017-9-21 11:12
没有独立的网址,翻页网址是不会变化的,这要怎么办

规则名多少
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:17:27 | 显示全部楼层
广东律师
举报 使用道具
bowieD 金牌会员 发表于 2017-9-21 11:18:44 | 显示全部楼层
那就需要用连续动作,通过点击页面选择框去选择第五页。《用连续动作实现翻页点击》,把规则名贴出来,可能是你规则有问题。
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:24:17 | 显示全部楼层
规则应该没什么问题,从第一页开始,爬到第41页都很正常,然后就一直停留在41页,我打开网址翻到42页,结果42页跳转不出来,43页之后还是正常显示
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:24:58 | 显示全部楼层

广东律师
举报 使用道具
bowieD 金牌会员 发表于 2017-9-21 11:33:46 | 显示全部楼层
这个是网页的问题,第42页不能打开所以翻不过去,翻页也没有页码选择框,只能用连续动作做翻页去指定翻页的页码,在连续动作高级设置中设置起点为43,就可以从43页开始抓。
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 14:27:59 | 显示全部楼层
bowieD 发表于 2017-9-21 11:33
这个是网页的问题,第42页不能打开所以翻不过去,翻页也没有页码选择框,只能用连续动作做翻页去指定翻页的 ...

具体怎么操作,我设置从43页开始,爬出来是从第8页开始的
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 对共词关系求协方差矩阵后再用Girvan-Newma
  • 社区发现算法Girvan-Newman(GN)是否能应用
  • 使用GooSeeker分词和Gephi进行中文文本分析
  • Gephi社会网络分析-网络图的统计
  • 范文:亚运短视频对杭州城市形象的建构研究

热门用户

GMT+8, 2023-6-1 20:05