【集微库】微博采集工具箱使用常见问题

微博主页采集采集一段时间就停止了，该怎么处理？

baixiaopang 发表于 2018-4-12 17:39
微博主页采集采集一段时间就停止了，该怎么处理？

是哪个博主主页， 能否把链接发出来我们测试一下

cluetest21 发表于 2018-4-12 18:12
是哪个博主主页， 能否把链接发出来我们测试一下

我下载的几个企业的官方微博的，试了几个都是下载几条就停了。https://weibo.com/u/5132862451?is_ori=1&is_forward=1&is_text=1&is_pic=1&is_video=1&is_music=1&is_article=1&key_word=&start_time=2014-01-01&end_time=2015-01-13&is_search=1&is_searchadv=1#_0类似这个，我做了时间限制，但是三年的微博2000多条，大概要好几批。

baixiaopang 发表于 2018-4-12 18:33
我下载的几个企业的官方微博的，试了几个都是下载几条就停了。https://weibo.com/u/5132862451?is_ori=1& ...

好的， 我们测试一下。
如果可以用网址里的参数来分多个时间段抓取，这样挺好的，因为即使断了，也可以从断点处接着爬

cluetest21 发表于 2018-4-12 20:58
好的， 我们测试一下。
如果可以用网址里的参数来分多个时间段抓取，这样挺好的，因为即使断了，也可以从 ...

嗯，麻烦了。现在可以找到断点连着抓取，但是就是觉得总是断，有点太麻烦了。

明明已经采集结束，但是还是显示采集中，有什么办法可以把前期的数据先导出来吗

采集中可能是采集失败了，是用的微博哪个工具加的什么链接

微博关键词抓取输入的时间是2016年11月1日到到2016年12月31日，为什么抓取的的数据只有12月份几天的？

mmdou123 发表于 2018-4-20 12:20
微博关键词抓取输入的时间是2016年11月1日到到2016年12月31日，为什么抓取的的数据只有12月份几天的？
...

你手工翻一翻，这个时间段的微博有多少页，不要超过30页，超过了，把时间再分一分

没有登录功能嘛