快捷导航
ym 版主 发表于 2016-11-3 15:48:16 | 显示全部楼层
本帖最后由 ym 于 2016-11-3 15:50 编辑
qiukaibin 发表于 2016-11-3 15:17
这个是我重新设置规则后的输出语句,可以导出第一步数据,之后连续动作的应该是无法输出,它显示的是上 ...

加载你的规则,分析发现,第一次点击年份后,class值就变了,所以爬虫提示定位失败。
QQ截图20161103154403.png

但是id值是不变的,所以,改为用id值来定位就准确了,测试采集也是正常的,还有,感觉网页加载比较慢,建议把滚屏次数调大点,这样爬虫就会延长等待加载网页的时间,可以确保采集完整
QQ截图20161103154603.png

举报 使用道具
qiukaibin 新手上路 发表于 2016-11-3 15:56:11 | 显示全部楼层
ym 发表于 2016-11-3 15:48
加载你的规则,分析发现,第一次点击年份后,class值就变了,所以爬虫提示定位失败。

恩恩 谢谢你!!!终于解决了,感谢你
举报 使用道具
ym 版主 发表于 2016-11-3 15:57:57 | 显示全部楼层
你的规则还有一个大问题,就是乱勾下级线索,不是网址就不要勾下级线索,它的作用是通过网址,找到下级网页来做层级采集,所以,把你规则里的下级线索都取消勾选
QQ截图20161103153329.png
举报 使用道具
qiukaibin 新手上路 发表于 2016-11-3 16:15:12 | 显示全部楼层
好的 谢谢 麻烦你了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 新闻内容分词后在Jupyter Notebook中使用TF
  • Jupyter Notebook使用sklearn的TF-IDF算法
  • 基于TSC 理论的网络社区中知识动员模式研究
  • 网页数据采集使用嵌套整理箱获得有层次的数
  • 我国旅游管理研究的知识来源与结构—基于文

热门用户

GMT+8, 2021-7-31 13:37