微博评论采集不全面

挺你海陆

微博显示有5000多条评论，爬下来只有528条是什么原因？

xandy · 发表于 2017-3-8 11:26:49

是这样的，微博本身会限制翻页，所以就算是手动翻页也是翻不全的，所以能翻多少页就能采集多少页，全部能翻完的话就能全部采完，能翻一部分的话就只能采集一部分。

Fuller · 发表于 2017-3-8 20:25:01

如果是关键词搜索，可以设置高级搜索选项，设定时间段，最细的时间段是小时，一段时间内的微博条数会少一些，避免达到上限。可以直接用微博搜索抓取工具，有按照时间段设置的功能：http://www.gooseeker.com/land/weibo.html

共 2 个关于本帖的回复最后回复于 2017-3-8 20:25

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页