【集微库】微博采集工具箱使用常见问题

为什么我要采集三千多条数据，采集时每次只能20条，下载也是每次只有20条？

您好我想问下在博主详细信息里，每次只能采集20条线索吗？能不能直接导出全部的

wanhanwen 发表于 2024-5-12 00:10
您好我想问下在博主详细信息里，每次只能采集20条线索吗？能不能直接导出全部的 ...

爬虫要一批一批地采集，为了防止被封锁，每一批之间会有短暂的停歇。 你可以等所有批次都采集完了再导出

微博采集少了很多条啊

jimjimjim 发表于 2024-6-25 21:44
微博采集少了很多条啊

建议在微博cn端采集博主主页，可以采集全。

为什么最终的数据没有所在地呀？

曾看青春闪烁 发表于 2024-8-7 14:58
为什么最终的数据没有所在地呀？

通过微博搜索或者粉丝工具获取的微博用户资料，不包含用户的IP属地信息，因为搜索页面或者粉丝页面没有显示这个属性，可以进一步采集博主详细资料获取IP属地信息。
把获取到的博主主页网址添加到这个快捷采集：微博博主资料抓取_快捷采集 ，采集完成后，导出的数据会包含IP属地信息

您好，为什么在微博上面看评论有1.5万，结果爬下来只爬到了116条评论呀？

22wangxu10 发表于 2024-8-11 14:55
您好，为什么在微博上面看评论有1.5万，结果爬下来只爬到了116条评论呀？

微博网站上很可能只能看到这么多评论，你可以手工滚动网页试试。