新浪微博_博主主页

为什么显示抓取规则不合适或者超时时间设置太短

超时时间设置了多少？不要太短了。另外，抓微博一定要登录了微博以后再抓

微博工具箱已经上线两个工具了，这个规则可以不用下载，工具箱更好用：http://www.gooseeker.com/land/weibo.html

总是会超时报错，然后连数据也无法导出，请问可以手动停止吗？

博主，是不是新浪微博的网页结构发生变化了，上周抓的还好好的，今天来抓最后的70多个用户，一套抓下来能用的就10个，其他的都在第一页翻页失败了，完了就超时跳过去了，有时间管理员测试下？

ml1691221 发表于 2016-3-14 11:20
博主，是不是新浪微博的网页结构发生变化了，上周抓的还好好的，今天来抓最后的70多个用户，一套抓下来能用 ...

我们检查一下，昨天晚上还是好的。

我最担心你的账号是不是被封锁了？一个微博账号一天控制在2000个网页以内。要换账号，清cookie

ml1691221 发表于 2016-3-14 11:20
博主，是不是新浪微博的网页结构发生变化了，上周抓的还好好的，今天来抓最后的70多个用户，一套抓下来能用 ...

网页结构没有变化，博主的采集规则也是正常的，你的情况应该是新浪微博反爬虫监测造成的，检查一下微博账号是否被封了，并且要定期清理cookies，定期切换微博账号（1或2天），或者换台电脑采集

ym 发表于 2016-3-14 14:24
网页结构没有变化，博主的采集规则也是正常的，你的情况应该是新浪微博反爬虫监测造成的，检查一下微博账 ...

我换了三个账号同样的问题。。可能是电脑因素吧。。哎。。解决地头好大

ml1691221 发表于 2016-3-14 15:01
我换了三个账号同样的问题。。可能是电脑因素吧。。哎。。解决地头好大 ...

加入QQ群，让GooSeeker的技术支持人员协助一下，比如这个群：GooSeeker网页抓取工具 242144153

爬虫