5 7915

数据抓取失败

Kellyj103 于 2018-5-21 21:07 发表 [复制链接]
主题名是:baiduly_1,但是页面拉倒最底下不会返回爬数据了,就直接显示采集完成,其实并没有,这是怎么回事呢?求大佬解救
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2018-5-22 14:12

shenzhenwan10 金牌会员 发表于 2018-5-22 08:02:53 | 显示全部楼层
我测试了你的规则, 抓取和翻页都没有问题
你可以把DS打数机的菜单项参数: 滚屏次数 设置成2
举报 使用道具
Kellyj103 初级会员 发表于 2018-5-22 12:04:18 | 显示全部楼层
shenzhenwan10 发表于 2018-5-22 08:02
我测试了你的规则, 抓取和翻页都没有问题
你可以把DS打数机的菜单项参数: 滚屏次数 设置成2 ...

设置了还是不行
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:10:04 | 显示全部楼层
你需要自己检查和测试:
1. 你说的不行,是爬取做规则的那条样本网址就不行,还是样本网址可以,添加的其它网址不行?如果是添加的不行,请检查网址有没有误
2. DS打数机爬取数据有几种方式:爬虫群,单搜,集搜。你目前用哪种方式?可以试试其它方式
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:12:02 | 显示全部楼层

另外爬取的时候,你观察一下DS打数机的窗口有没有加载出来你要爬取的网页,如果没有,请检查网址是否正确及网络是否正常
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:12:58 | 显示全部楼层

可以点开DS打数机下面的日志窗口,看看有没有什么错误信息
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 20:21