【集微库】微博采集工具箱使用常见问题

12345wjl · 发表于 2021-11-12 17:12:28

wangyong 发表于 2021-11-12 16:34
在博主主页中选择全部后，在搜索框中进行搜索，搜索完后，把网址输入到博主主页采集工具
https://weibo. ...

好的，谢谢你

18555330731 · 发表于 2021-11-16 16:47:44

请问想要采集某位博主含有某关键词的所有微博，但在博主页面搜索后，网址不变，还是和原状态一样，那这样怎么采集含关键词的微博呢？谢谢

内容分析应用 · 发表于 2021-11-16 17:38:42

18555330731 发表于 2021-11-16 16:47
请问想要采集某位博主含有某关键词的所有微博，但在博主页面搜索后，网址不变，还是和原状态一样，那这样怎 ...

搜索了之后，网址里会出现key_word参数，比如我在博主”头条新闻“搜索关键词”新冠“，网址变成了这样：
https://weibo.com/breakingnews?r ... 6%96%B0%E5%86%A0#_0

elsieanddonut · 发表于 2021-11-28 13:41:16

您好，请问展开全文采集如何提升速度，已经设了两个爬虫，但是太慢了

Fuller · 发表于 2021-11-28 17:06:50

elsieanddonut 发表于 2021-11-28 13:41
您好，请问展开全文采集如何提升速度，已经设了两个爬虫，但是太慢了

单一一个电脑，不能再提升速度了，不然，会被微博封号。应该用多个电脑，登录同一个集搜客账号，但是，各自登录不同的微博账号，这样，他们就能分担采集任务。

旗舰版初始是5台电脑，还可以另外购买电脑配额

HJ740113927 · 发表于 2021-12-9 00:03:43

请问这个采集之后有附带签到地点信息吗

小蜜蜂测试161 · 发表于 2021-12-9 09:05:18

HJ740113927 发表于 2021-12-9 00:03
请问这个采集之后有附带签到地点信息吗

原微博有显示的就会采集下来，没有的采集不到

Anaelle · 发表于 2021-12-9 21:17:54

请问采集数据不全是什么情况呢？我设置了起始时间是2021-04-01，结束时间是2021-06-01，但是打包的数据只有06-01的，甚至只有16：00-23：59的数据

Anaelle · 发表于 2021-12-10 03:29:57

Anaelle 发表于 2021-12-9 21:17
请问采集数据不全是什么情况呢？我设置了起始时间是2021-04-01，结束时间是2021-06-01，但是打包的数据只有 ...

看了一下日志好像是因为“因设置了限制翻页数：50，翻页已中断”，怎么才能取消这个限制呢？

Fuller · 发表于 2021-12-10 09:22:45

Anaelle 发表于 2021-12-9 21:17
请问采集数据不全是什么情况呢？我设置了起始时间是2021-04-01，结束时间是2021-06-01，但是打包的数据只有 ...

如果微博特别热，那么要设置细分时间段，最小一小时。如果一个小时内的微博内容依然超过50页，还可以选择其他细分选项，但是，其他细分选项不是很准确，根据经验，可以先纯粹按照时间细分，然后再采集一遍，按照其他条件加上时间细分，最后，把两次采集的内容合并一下

推荐板块

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页