571#
mlpokjn 初级会员 发表于 2017-11-26 16:30:28 | 只看该作者
maomao 发表于 2017-11-25 21:15
因为微博限制了看关注者的数量,所以,能找到的共同关注会很少

对对,是的,爬取博主的关注者只能爬取前五页。我知道啦,谢谢!
举报 使用道具
572#
mlpokjn 初级会员 发表于 2017-11-26 21:22:49 | 只看该作者
maomao 发表于 2017-11-25 21:15
因为微博限制了看关注者的数量,所以,能找到的共同关注会很少

但是,比如我就关注了1个账号,那么我与博主的共同关注要么是1,要么是0。博主首页会显示我俩的共同关注。请问,我怎么做,才能爬取下来我与2000个博主的共同关注的内容呢?
我现在是采集了2000个博主的主页,就是想知道他们是不是都与我共同关注了某个账号。
谢谢!

举报 使用道具
573#
umsung 高级会员 发表于 2017-11-27 09:31:29 | 只看该作者
mlpokjn 发表于 2017-11-26 21:22
但是,比如我就关注了1个账号,那么我与博主的共同关注要么是1,要么是0。博主首页会显示我俩的共同关注。 ...

在博主主页点击关注量就可以看到共同关注量,点击共同关注量就可以看到共同关注的内容。因为每一个页面都有独立的网址,可以使用层级采集
1,第一级规则抓取微博博主主页上“关注量”的链接,对应到第二级
2,第二级规则抓取关注量页面上“共同关注量”的链接,对应第三级规则
3,第三级规则抓取“共同关注量”页面上的内容。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
574#
mlpokjn 初级会员 发表于 2017-12-1 11:13:48 | 只看该作者
umsung 发表于 2017-11-27 09:31
在博主主页点击关注量就可以看到共同关注量,点击共同关注量就可以看到共同关注的内容。因为每一个页面都 ...

哇哦!太好了!谢谢!
举报 使用道具
575#
JoshuaJiang 新手上路 发表于 2017-12-3 18:31:37 | 只看该作者
我key入的那一页数据只有45条,系统重复了好几遍给我,变成了600多条,多收了我积分,麻烦退给我好吗
举报 使用道具
576#
shenzhenwan10 金牌会员 发表于 2017-12-3 18:52:53 | 只看该作者
JoshuaJiang 发表于 2017-12-3 18:31
我key入的那一页数据只有45条,系统重复了好几遍给我,变成了600多条,多收了我积分,麻烦退给我好吗 ...

你使用的是哪个工具? 是微博关键词, 博主详细信息还是其它的哪个工具?
我们核查一下
如果确实存在系统原因导致的数据重复, 会把积分返还给你。

举报 使用道具
577#
安安 新手上路 发表于 2017-12-4 10:51:53 | 只看该作者
你好,数据下载的时候显示“下载的文件不存在,任务打包过程可能已经失败”,是什么原因呢,应该要怎么处理?

采集的网址无问题,与平时用的微博一样,是刚刚打包好的,自己也没删除,所有的操作都和平时一样
举报 使用道具
578#
umsung 高级会员 发表于 2017-12-4 11:10:54 | 只看该作者
本帖最后由 umsung 于 2017-12-4 12:09 编辑
安安 发表于 2017-12-4 10:51
你好,数据下载的时候显示“下载的文件不存在,任务打包过程可能已经失败”,是什么原因呢,应该要怎么处理 ...

问题已经修复了,刷新一下页面,重新点击下载就好了

举报 使用道具
579#
louiselana 初级会员 发表于 2017-12-4 11:28:51 | 只看该作者
打包后下载失败怎么回事?
举报 使用道具
580#
umsung 高级会员 发表于 2017-12-4 11:41:36 | 只看该作者
本帖最后由 umsung 于 2017-12-4 12:09 编辑
louiselana 发表于 2017-12-4 11:28
打包后下载失败怎么回事?


问题已经修复了,刷新一下页面,重新点击下载就好了

举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文

热门用户

GMT+8, 2024-12-23 05:40