新浪微博去采集数据,结果就只抓了两页,后面就不抓了。这是怎么回事呢?纯小白求指导
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2016-5-5 09:41

沙发
Fuller 管理员 发表于 2016-5-4 22:31:03 | 只看该作者
使用微博采集工具箱吗? http://www.gooseeker.com/land/weibo.html

要采集微博的什么信息?这是翻页规则适应性不够
举报 使用道具
板凳
phoebeyuting 初级会员 发表于 2016-5-5 08:40:15 | 只看该作者
Fuller 发表于 2016-5-4 22:31
使用微博采集工具箱吗? http://www.gooseeker.com/land/weibo.html

要采集微博的什么信息?这是翻页规则 ...

采集的是微博的博文、发表时间、评论数和转载数。但是现在是翻页不一定。。试了几次,有的是翻了两页就不能再抓数据,有的是翻了五六页不能抓了。。不懂怎么回事。。。
举报 使用道具
地板
Fuller 管理员 发表于 2016-5-5 09:41:04 | 只看该作者
phoebeyuting 发表于 2016-5-5 08:40
采集的是微博的博文、发表时间、评论数和转载数。但是现在是翻页不一定。。试了几次,有的是翻了两页就不 ...

这种现象的话,从以下方面检查:
1,DS打数机的滚屏功能一定要打开,菜单 配置-》滚屏参数,滚屏次数要大于0
2,不要设置定时器触发,也是DS菜单 配置 下面的
3,不要修改超时时长,或者可以改成更长的值
4,网速要好

失败以后有没有看到日志窗口中的信息?可以截个图
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文

热门用户

GMT+8, 2024-12-19 23:01