您好,请问微博关键词爬取过程中报了这两个错是什么意思(抓取失败(超时),抓取规则不合适或者超时时间设置太短;滚屏时间不够,可能需要调高超时时长),应该怎么避免?另外请问旗舰版购买之后是一次性可以爬取和导出的数据量没有限制吗?谢谢!
举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2021-8-12 10:53

沙发
Fuller 管理员 发表于 2021-8-11 22:30:10 | 只看该作者
你是在用微博工具箱吗?采集之前在数据管家登陆微博了吗?旗舰版用户,下载数据不需要积分,数量没有限制

微博工具箱里的微博关键词工具的使用方法案例
举报 使用道具
板凳
Cindybaby 新手上路 发表于 2021-8-12 10:25:34 | 只看该作者
用的是工具箱,也登录微博了,出现这样的错误是因为爬的时候设置的时间太长了吗,我设置了两个月
举报 使用道具
地板
马涌河畔 金牌会员 发表于 2021-8-12 10:50:25 | 只看该作者
Cindybaby 发表于 2021-8-12 10:25
用的是工具箱,也登录微博了,出现这样的错误是因为爬的时候设置的时间太长了吗,我设置了两个月 ...

我刚才测试了下, 抓取和翻页都挺正常的, 你是用的下面这个界面添加任务吗? 抓取的时候观察下微博页面加载是否正常



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
5#
wangyong 版主 发表于 2021-8-12 10:53:07 | 只看该作者
Cindybaby 发表于 2021-8-12 10:25
用的是工具箱,也登录微博了,出现这样的错误是因为爬的时候设置的时间太长了吗,我设置了两个月 ...

采集过程中可能会因为网络原因造成采集失败

有采集失败的就按照上图的操作方式,点击“已停止”按钮,再点击“重采失败线索”

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为

热门用户

GMT+8, 2025-2-6 08:52