快捷导航
5 521

数据抓取失败

Kellyj103 于 2018-5-21 21:07 发表 [复制链接]
主题名是:baiduly_1,但是页面拉倒最底下不会返回爬数据了,就直接显示采集完成,其实并没有,这是怎么回事呢?求大佬解救
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2018-5-22 14:12

shenzhenwan10 金牌会员 发表于 2018-5-22 08:02:53 | 显示全部楼层
我测试了你的规则, 抓取和翻页都没有问题
你可以把DS打数机的菜单项参数: 滚屏次数 设置成2
举报 使用道具
Kellyj103 初级会员 发表于 2018-5-22 12:04:18 | 显示全部楼层
shenzhenwan10 发表于 2018-5-22 08:02
我测试了你的规则, 抓取和翻页都没有问题
你可以把DS打数机的菜单项参数: 滚屏次数 设置成2 ...

设置了还是不行
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:10:04 | 显示全部楼层
你需要自己检查和测试:
1. 你说的不行,是爬取做规则的那条样本网址就不行,还是样本网址可以,添加的其它网址不行?如果是添加的不行,请检查网址有没有误
2. DS打数机爬取数据有几种方式:爬虫群,单搜,集搜。你目前用哪种方式?可以试试其它方式
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:12:02 | 显示全部楼层

另外爬取的时候,你观察一下DS打数机的窗口有没有加载出来你要爬取的网页,如果没有,请检查网址是否正确及网络是否正常
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:12:58 | 显示全部楼层

可以点开DS打数机下面的日志窗口,看看有没有什么错误信息
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 大型百货商场会员画像描绘
  • 自动导入导出数据
  • 批量爬取蘑菇街商品价格、评论信息
  • 微博用户数据分析
  • 批量爬取苏宁商品价格、评论信息

热门用户

集搜客GooSeeker网络爬虫 ( 粤ICP备11065265号-2 )

GMT+8, 2018-10-17 09:20