311#
wutao2014 新手上路 发表于 2016-12-18 15:40:22 | 只看该作者
微博博主的关注只能爬前5页的
举报 使用道具
312#
Fuller 管理员 发表于 2016-12-18 15:57:14 | 只看该作者
wutao2014 发表于 2016-12-18 15:40
微博博主的关注只能爬前5页的

是的,因为微博网站做了限定,爬虫无法突破网站做的限定
举报 使用道具
313#
jsk1327440 新手上路 发表于 2017-1-10 11:19:13 | 只看该作者
采集完无法打包怎么办??有办法解决吗?
举报 使用道具
314#
xandy 论坛元老 发表于 2017-1-10 11:22:01 | 只看该作者
jsk1327440 发表于 2017-1-10 11:19
采集完无法打包怎么办??有办法解决吗?

采集完后,打包状态是绿色的就是可点击进行打包下载的,打包后在点击“数据下载”就可以将数据下载到本地。
举报 使用道具
315#
jsk1327440 新手上路 发表于 2017-1-10 11:47:29 | 只看该作者
xandy 发表于 2017-1-10 11:22
采集完后,打包状态是绿色的就是可点击进行打包下载的,打包后在点击“数据下载”就可以将数据下载到本地 ...


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
316#
jsk1327440 新手上路 发表于 2017-1-10 13:48:23 | 只看该作者
xandy 发表于 2017-1-10 11:22
采集完后,打包状态是绿色的就是可点击进行打包下载的,打包后在点击“数据下载”就可以将数据下载到本地 ...

能不能帮我解决一下这个问题啊!爬了半天不能打包的心情是很难过的!
举报 使用道具
317#
xandy 论坛元老 发表于 2017-1-10 14:09:42 | 只看该作者
jsk1327440 发表于 2017-1-10 13:48
能不能帮我解决一下这个问题啊!爬了半天不能打包的心情是很难过的!

稍等, 技术人员给你查一下
举报 使用道具
318#
xandy 论坛元老 发表于 2017-1-10 14:51:15 | 只看该作者
xandy 发表于 2017-1-10 14:09
稍等, 技术人员给你查一下

这几个网址的数据是后面又添加了重复的网址覆盖了以前的任务,导致你前面已采集的数据拿不到了。
你删掉全部任务,清下缓存,重新登录,然后重采集一次。

举报 使用道具
319#
gzambrotta 新手上路 发表于 2017-1-17 18:51:58 | 只看该作者
你好,请问下为啥任务运行到一半就是已停止?状态,点击去看原因是timeout。但是DS打数机里显示 “采集完成,等待下一批采集任务”
举报 使用道具
320#
gzambrotta 新手上路 发表于 2017-1-17 18:58:05 | 只看该作者
解决了,原来是没有登录
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-10-19 02:26