【集微库】微博采集工具箱使用常见问题

你碰到的应该是当前最新页面没有爬取内容, 任务就终止执行.
这个和微博的反爬策略有关, 每次能爬取的内容多少是不固定的
从微博工具的角度是已经完成了, 因为最新页面已经没有内容了

请问为什么采集完成后一直不能打包

bjcandice 发表于 2017-1-23 20:26
请问为什么采集完成后一直不能打包

哪个微博工具？是一键打包点击不了吗？

微博登录了没有？要先登录再运行爬虫

求教，是我设置哪里不对吗。。。抓［转发］下来的excel打开是［评论］，然后［评论］截了两次，第一次只抓到 94条，第二次 165条，但明明这条微博有 185条评论。。。。客服不在线，明天再问吧呜呜呜。。。。

kiwikeely 发表于 2017-1-25 20:15
求教，是我设置哪里不对吗。。。抓［转发］下来的excel打开是［评论］，然后［评论］截了两次，第一次只抓 ...

要注意分别选择 评论 和 转发，参看上图的红框。你购买专业版返还的积分已经加入你的账号了。现在是春节假期，问题回复稍微慢一些，在qq群里面总是有人值班（群号：481335253），营销qq的客服已经放假了。

抓取微博的时候一定要把DS打数机的窗口放大到满屏，不能最小化。另外，抓取评论和转发很容易受网速的影响，微博这个网站不太稳定，有时候手工翻看评论的时候也会不出内容，如果遇到这种情况，就会翻页中断。所以，如果一个微博的评论特别多，有几百个分页，一般是采集不到底的。

如果是一条新发的热点微博，可以不断抓取最新出现的评论，比如，每隔15分钟抓一次，用这种方式就能抓全

已经是用的［转发］栏啦，但最新一次尝试抓的依然是评论不是转发。窗口要最大化知道了！该条微博不是热门，评论转发才一两百。。。我再试试看。。。。谢谢管理员瞬速回复

kiwikeely 发表于 2017-1-25 22:23
已经是用的［转发］栏啦，但最新一次尝试抓的依然是评论不是转发。窗口要最大化知道了！该条微博不是热门， ...

切换最左侧的 评论 和 转发 两个tab，能够看到分别有各自的采集任务，是否能看到转发的采集任务？刚才我测试了一下，能采集评论。添加任务的时候，会询问采集评论还是转发，要选正确

请问，可以采集到某个微博用户的公开评论吗？

ntyxj2017 发表于 2017-1-26 20:12
请问，可以采集到某个微博用户的公开评论吗？

指定一个微博用户，然后想采集他发的所有评论，是这样吗？

这种采集几乎是不可能的，有点像大海捞针