想用微博工具箱来爬取2年的微博关键词搜索, 微博博主主页,微博博主粉丝, 微博博文, 微博评论数据
我看爬取的速度好像不快, 想问一下旗舰版的爬虫速度是最快的吗?
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2020-12-1 09:28

内容分析应用 金牌会员 发表于 2020-12-1 09:26:05 | 显示全部楼层
微博有反爬, 所以速度不能调得很快
旗舰版可以用多台电脑同时爬取, 速度会比普通版本快


举报 使用道具
马涌河畔 金牌会员 发表于 2020-12-1 09:27:00 | 显示全部楼层
噢这样哇!
那就是说可以在几台电脑上登陆同一个账号
但是爬取数据是不同窗口,同时爬取?
那微博的账号是同一个还是不同的呢
举报 使用道具
内容分析应用 金牌会员 发表于 2020-12-1 09:28:05 | 显示全部楼层
本帖最后由 内容分析应用 于 2020-12-1 09:44 编辑
马涌河畔 发表于 2020-12-1 09:27
噢这样哇!
那就是说可以在几台电脑上登陆同一个账号
但是爬取数据是不同窗口,同时爬取?

在多台电脑上登录同一个爬虫账号, 用不同的微博账号登录微博
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-28 22:19