集搜客GooSeeker网络爬虫

标题: 打开爬虫，一直不抓取数据是怎么回事? [打印本页]

作者: 拯救地球 时间: 2019-11-14 09:54
标题: 打开爬虫，一直不抓取数据是怎么回事?
打开爬虫，一直不抓取数据是怎么回事?

作者: lan_1985 时间: 2019-11-14 10:09
1、检查一下打数机账号和会员中心登录账号是否一致。
[attach]11501[/attach]

点击重选服务器后，一定要填入https://www.gooseeker.com，注意是 https 不是 http
2、也可以考虑是不是已经采集完了，自己的规则采集完了，待采集的线索为0；快捷采集完了显示已采集。
3、可能抓取失败，很快页面就不抓取数据了。比如：规则不合适（调试规则）、页面没加载完就执行采集了（延长超时时间和延迟抓取时间）

4、以上情况都排除的话，也可以重启爬虫试试。

作者: Fuller 时间: 2019-11-14 10:22
好几个地方的校园网很奇怪，如果服务器设置成https的网址，反而不让通过，要改成http://www.gooseeker.com 。目前根据经验来看，很多校园网和特别的局域网对流量做了拦截，所以要在https和http之间尝试一下

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)