主题名:ihuazhan-ok
创建规则测试数据ok,写爬行线路也按照教程去做了,但是爬数据总是紧紧抓到第一页。然后就直接结束了。
QQ图片20170707111744.png

由于我的翻页列表比较特殊。只显示1-10数字并且后面按钮直接跳转到11页。所以我使用的相对线索

QQ图片20170707111838.png

并且相对线索的设置按照教程去做了。设置如下。可以爬数据还是不报错直接提交成功了。下面是我的规则和爬行线路截图。麻烦给看看哪里的问题。已经困恼很多天了。

QQ图片20170707112006.png
创建规则

QQ图片20170707112213.png
测试ok


QQ图片20170707112303.png
爬虫线路


连续动作没有设置。
就是这样保存点击爬数据后就光采集第一页数据。然后就结束了。也没提示失败。不知道为什么。麻烦管理大大给看看。
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2017-7-7 15:51

shengchengx 金牌会员 发表于 2017-7-7 11:33:34 | 显示全部楼层
QQ截图20170707113252.jpg
做相对线索映射的时候不要用text。用li来做

举报 使用道具
272291900 初级会员 发表于 2017-7-7 12:56:57 | 显示全部楼层
shengchengx 发表于 2017-7-7 11:33
做相对线索映射的时候不要用text。用li来做

现在可以采集到第10页了。但是在往后面不行了。有个>符号。。相对线索不太好用呢。。
举报 使用道具
shengchengx 金牌会员 发表于 2017-7-7 14:18:28 | 显示全部楼层
272291900 发表于 2017-7-7 12:56
现在可以采集到第10页了。但是在往后面不行了。有个>符号。。相对线索不太好用呢。。
...

用连续动作试试

举报 使用道具
272291900 初级会员 发表于 2017-7-7 15:40:38 | 显示全部楼层
能具体说下吗
举报 使用道具
shengchengx 金牌会员 发表于 2017-7-7 15:51:37 | 显示全部楼层
《连续动作让爬虫持续采集数据》
点击>翻页之后继续采集数据就好了,试试这样做

举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 01:24