991#
Fuller 管理员 发表于 2020-1-9 15:32:35 | 只看该作者
Zendralyn 发表于 2020-1-9 15:08
不管怎样都是未执行采集任务

我看到你的账号很久以前就注册了,以前使用正常吗?可以加入qq群 830157068 ,在那里有技术支持帮你解决一下
举报
992#
2108523618005 新手上路 发表于 2020-1-12 16:33:39 | 只看该作者
为什么同时爬取多个网页有许多网页评论信息根本加载不出来?
举报
993#
Fuller 管理员 发表于 2020-1-12 17:41:03 | 只看该作者
2108523618005 发表于 2020-1-12 16:33
为什么同时爬取多个网页有许多网页评论信息根本加载不出来?

同时运行了几个爬虫窗口?微博对网络速度和电脑性能要求挺高的,如果微博中又有大量图片和视频,就更慢了。一个微博往往有很多评论,只爬一个微博都要很长时间,一个一个地添加微博网址吧。
举报
994#
songsong627 初级会员 发表于 2020-1-13 19:50:50 | 只看该作者
请问微博主页内容的搜集,最近日期的微博为什么抓取不到呢?昨天试了只能得到2019年5月份的微博内容,不能抓取2019年整年的内容嘛?
举报
995#
Fuller 管理员 发表于 2020-1-13 21:11:56 | 只看该作者
songsong627 发表于 2020-1-13 19:50
请问微博主页内容的搜集,最近日期的微博为什么抓取不到呢?昨天试了只能得到2019年5月份的微博内容,不能 ...

你添加的网址是什么?

这个博主是不是有很多微博?如果太多,可以按年甚至按月分开添加网址
举报
996#
songsong627 初级会员 发表于 2020-1-13 22:24:55 | 只看该作者
Fuller 发表于 2020-1-13 21:11
你添加的网址是什么?

这个博主是不是有很多微博?如果太多,可以按年甚至按月分开添加网址

添加的网址就是微博主页,确实有很多微博,2012、3年的微博抓去了很多,可我需要的是2019年的。请问怎样按年添加网址呢?谢谢~

举报
997#
Fuller 管理员 发表于 2020-1-13 23:31:27 | 只看该作者
songsong627 发表于 2020-1-13 22:24
添加的网址就是微博主页,确实有很多微博,2012、3年的微博抓去了很多,可我需要的是2019年的。请问怎样 ...

在博主主页点“全部”,然后把链接添加到采集工具中。估计你没有点击全部,所以爬的都是热门
举报
998#
yexiaozhu 新手上路 发表于 2020-1-28 05:41:14 | 只看该作者
请问,采集评论应该输哪个url地址呢?现在没有单独的页面了
举报
999#
Fuller 管理员 发表于 2020-1-28 09:21:49 | 只看该作者
yexiaozhu 发表于 2020-1-28 05:41
请问,采集评论应该输哪个url地址呢?现在没有单独的页面了


点击这个位置,就能进入到每条微博的网页,这个网址是独立网址。如果你没有发现独立网址,可能你上的手机网站,是没有独立网址的。weibo.cn就是手机网站,应该上weibo.com

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报
1000#
不日远游 初级会员 发表于 2020-2-1 13:28:53 | 只看该作者
怎么一直闪退???
举报
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 360或火绒等杀毒软件导致GooSeeker爬虫软件
  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反

热门用户

GMT+8, 2025-5-5 09:41