目录
- 快捷采集
- 初级教程(新版)
- 初级教程(老版)
- 数据转Excel处理
- 爬虫规则管理
- 高级教程(新版)
- 高级教程(老版)
- 用爬虫群分布式高效采集
- 爬虫关键知识拓展
- 问题集锦
- 实战演练案例
- 爬虫安装说明
- 关于集搜客
集搜客交流群
2000人群:点击加入
遇到反爬机制强的网站,老被封IP。该怎么处理?
基本上爬两分钟就被封了,经过最后判断。就是被封IP了。 各位大神,遇到类似情况是如何处理的?求指点啊。或者有没有好的IP代理池,推荐一下。
携程网站爬取一定数量的页面后,网站被封了加载不出来了
[attach]15824[/attach]爬过多次后,这个页面刷新不出来了
IP被封了能解封吗
请教一下大家,如果IP被屏蔽了,是永久都屏蔽,不会被解封吗?
IP被封锁
采集信息太快导致封锁IP,如何处理?
如何确定自己的IP是被封了、还是网站原因登不进去?
2445406817 于 2016-9-27 19:56 编辑 [/i] [attach]1727[/attach] 如图所示,这个网站我现在登不进去了我不确定是我爬数据爬太快,还是这个网站的原因,连接失败? 这个是突然连接失败的,之前我还在采集数据的。另外,如果是IP被封的话。我在不换电脑的情况下,该如何解决?
对于网站封IP怎么解决的?
还有,关于封锁IP,你们这个对于网站封IP怎么解决的,就是大量抓取后网站封锁你的IP相关
IP被封的问题可以解决吗?
IP被封的问题可以解决吗?
这种情况是IP被封?
[attach]1682[/attach] 上图是在DS打数机中截的。这个网页本身在浏览器中是可以打开的。而且,一开始爬数据的时候,显示出了页面。但爬了一页,就出现这种情况了。 这是IP被封?还是别的原因导致的?我爬取参数设置的也不快,而且没有使用爬虫群,就单窗口爬数据。 对于这种情况,我该怎么处理才能继续抓数据?
抓取信息IP被封,怎么处理?
刚开始还可以抓取,之后发现被封IP了,怎么处理?
每天采集多少才会不被封啊
如题
ip被封?怎么解决使用代理ip
貌似ip被封,请问:如何在软件中使用代理池。[attach]9393[/attach]
样本页面爬取数据,窗口显示空白,是被封IP了吗?
[i=s] 本帖最后由 稀饭客 于 2018-7-13 11:15 编辑 [/i] 头天爬了七麦的数据,今天再爬页面的时候,窗口显示空白,系统提示匹配失败,是被封IP了吗?
爬虫群采集要怎样做才能避免封锁ip?
[i=s] 本帖最后由 ym 于 2016-5-31 11:40 编辑 [/i] [align=left]大家用爬虫群要注意一点:为了避免封锁ip,请控制好爬虫数量(最大允许运行爬虫数) 如果是同一个抓取规则,同一台计算机建议允许2个爬虫窗口,防止被封锁如果同一个规则要在不同计算机上抓取,要给每台计算机起爬虫名字(在DS打数机文件菜单->爬虫名字中修改),这样每台计算机就会分别运行最多2个爬虫窗口;如果名字相同,就当成同一台了,只能运行到2个爬虫窗口。如果遇到限制访问的情况,请参考这篇文章解决[url]http://www.gooseeker.com/doc/thread
集搜客进不去需要爬数据的网站怎么办
之前能进去,现在进不去了,换了ip也不行,在线等 急急急
新人:关于 要爬的网站 无法再GS浏览器里打开
关于 https://q.yizhuan5.com/work.html#1-1 无法再GS浏览器里打开(浏览器默认的和firefox