【集微库】微博采集工具箱使用常见问题

您好，请问我抓取到的内容包括展开原文c，是因为最小化后台的缘故吗？

18521345326 发表于 2021-12-24 12:02
您好，请问我抓取到的内容包括展开原文c，是因为最小化后台的缘故吗？

在集搜客微博采集工具箱中通过微博关键词搜索结果采集工具、微博博主主页采集工具或者其他微博工具采集微博数据时会采集下带有“展开全文”的数据

在采集结果中通过Excel将含有“展开全文”的数据筛选出来后


将其对应的“博文独立网址”添到微博博文展开全部采集中就可以将“展开全文”后的数据完整采集下来


数据展示：

您好，抓取微博评论的时候，显示抓取“失败（超时），抓取规则不合适或者超时时间设置太短”是什么原因呢？该如何解决呢？

mianmian314 发表于 2022-1-8 17:41
您好，抓取微博评论的时候，显示抓取“失败（超时），抓取规则不合适或者超时时间设置太短”是什么原因呢？ ...

你要采集的网址是什么？发出来我看看。我估计你的网址不对

Fuller 发表于 2022-1-8 22:45
你要采集的网址是什么？发出来我看看。我估计你的网址不对

嗯嗯，解决了解决了，靴靴！

为什么两千多条博文只采集到了七十多条呢？如果只选其中一个月，又会显示1条或0条数据……

l947512109 发表于 2022-1-15 15:42
为什么两千多条博文只采集到了七十多条呢？如果只选其中一个月，又会显示1条或0条数据…… ...

采集哪个网址？发出来看看。是关键词搜索还是博主主页？

Fuller 发表于 2022-1-15 16:13
采集哪个网址？发出来看看。是关键词搜索还是博主主页？

https://weibo.com/gugongtmall?profile_ftype=1&is_all=1#_0
是采集博主主页的所有微博，但是利用采集所有历史微博和翻页模式都不行，切成某段时间也不能采集翻页模式的……只能在单页的网址下采集仅第1页

l947512109 发表于 2022-1-15 16:35
https://weibo.com/gugongtmall?profile_ftype=1&is_all=1#_0
是采集博主主页的所有微博，但是利用采集所 ...

我测试了，翻页很正常，微博主页的网页很长，采集的时候，如果屏幕大，所需滚屏数量就少，如果很小的笔记本电脑，就要滚很多屏，增加了失败的机会。

你用的是这个微博博主主页采集工具吗？https://www.gooseeker.com/res/softdetail_3.html

我的输入的网址应该是符合格式的，但是为什么一直现实停止采集，是失败的意思吗？
如果http://weibo.com/u/1556888272?topnav=1&wvr=6&topsug=1&is_all=1#_0这样的格式是错误的吗加了#_0在爬数据的过程中我看爬的主页也是对的，但是采集过程中凡是采集过的都显示停止采集。