1041#
spurs20 新手上路 发表于 2020-3-2 14:25:07 | 只看该作者
粉丝与关注者信息 为什么爬出来的主页链接都是一样的?
举报 使用道具
1042#
Fuller 管理员 发表于 2020-3-2 16:35:15 | 只看该作者
spurs20 发表于 2020-3-2 14:25
粉丝与关注者信息 为什么爬出来的主页链接都是一样的?

同一个微博博主的链接是一样的。

你看到了两个不同的博主爬下来的是同一个网址?
举报 使用道具
1043#
zhaozihan99 新手上路 发表于 2020-3-4 17:19:28 | 只看该作者
爬微博评论,一直显示抓取规则不合适或者超时时间设置太短 怎么办啊
举报 使用道具
1044#
Fuller 管理员 发表于 2020-3-4 18:07:47 | 只看该作者
zhaozihan99 发表于 2020-3-4 17:19
爬微博评论,一直显示抓取规则不合适或者超时时间设置太短 怎么办啊

在DS打数机运行的时候,注意观察有没有评论显示出来,现在新浪微博很慢,经常不显示。

另外,DS打数机窗口不能缩小
举报 使用道具
1045#
Fuller 管理员 发表于 2020-3-4 18:12:26 | 只看该作者
微博采集的常见问题汇总:https://www.gooseeker.com/doc/thread-17343-1-1.html
举报 使用道具
1046#
pypypy 初级会员 发表于 2020-3-6 22:05:50 | 只看该作者
求问爬取微博评论页面一直加载中,无法爬取评论怎么解决?单独用其他浏览器打开是可以看到评论的
举报 使用道具
1047#
maomao 论坛元老 发表于 2020-3-6 22:08:28 | 只看该作者
pypypy 发表于 2020-3-6 22:05
求问爬取微博评论页面一直加载中,无法爬取评论怎么解决?单独用其他浏览器打开是可以看到评论的 ...

按这个帖子一楼的回答清缓存https://www.gooseeker.com/doc/thread-11667-1-1.html
举报 使用道具
1048#
1457806332 新手上路 发表于 2020-3-6 22:08:29 | 只看该作者
采集状态显示已停止,但没有采集到评论内容怎么办?
举报 使用道具
1049#
Fuller 管理员 发表于 2020-3-6 22:20:10 | 只看该作者
1457806332 发表于 2020-3-6 22:08
采集状态显示已停止,但没有采集到评论内容怎么办?

关于微博采集出现的问题,这里有一个总结贴:https://www.gooseeker.com/doc/thread-17343-1-1.html
举报 使用道具
1050#
pypypy 初级会员 发表于 2020-3-6 23:51:10 | 只看该作者
所说的规范都照做了,包括清缓存、登录微博账号、最大化页面等等,可是每次只能爬取一条微博下的评论数据。那我要爬500条要这样操作500次嘛?枯了。。。。感觉冲的299白瞎了嘤
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文

热门用户

GMT+8, 2024-12-23 22:10