刚开始还可以抓取,之后发现被封IP了,怎么处理?
举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2017-9-4 16:00

沙发
zhu369 新手上路 发表于 2017-8-30 15:39:10 | 只看该作者
本帖最后由 zhu369 于 2017-8-30 15:41 编辑

如果电脑是通过ADSL或者光线接入的,使用了动态IP地址,可以重启猫,换IP地址,然后清理cookie,重新运行浏览器你的集搜客网络爬虫是火狐插件版还是GS爬虫浏览器版?两个版本的清理方法是不一样的。

举报 使用道具
板凳
shengchengx 金牌会员 发表于 2017-8-30 15:39:32 | 只看该作者
本帖最后由 shengchengx 于 2017-8-30 15:41 编辑

封ip的话只能进行更换ip了,采集数据的时候需要控制采集的速度和采集的频率,经常清理一下浏览器的cookie。
《如何更换ip地址?》这个教程是教怎么更换ip的。
举报 使用道具
地板
炳嘉 新手上路 发表于 2017-9-4 16:00:39 | 只看该作者
一些网站反爬时会封ip,我以前也遇到过,后来我用代理云的IP就好了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-22 17:43