GooSeeker产品资源教程视频教程使用交流资讯
开启辅助访问 切换风格

集搜客GooSeeker网络爬虫

论坛 › 搜客社区 › 使用交流
1 11153

对于网站封IP怎么解决的？

正版额外 于 2015-12-23 10:16 发表 [复制链接] [只看楼主] [打印] [上一主题] [下一主题]
收藏 跳转到指定楼层
还有，关于封锁IP，你们这个对于网站封IP怎么解决的，就是大量抓取后网站封锁你的IP相关
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2015-12-23 11:46
沙发
Anna J 中级会员 发表于 2015-12-23 11:46:46 | 只看该作者
本帖最后由 ym 于 2016-5-31 11:33 编辑

电商网站反爬虫比较严格，爬太快的话就会封ip，但是用gooseeker的爬虫群功能，把速度设置慢点，分多个爬虫来爬，就可以降低封锁ip的风险，还可以爬到更多数据。
封锁了就清cookie，换IP（重启路由器就可以换IP），操作见http://www.gooseeker.com/doc/thread-676-1-1.html
举报 使用道具
回复 支持 反对
返回列表
B Color Image Link Quote Code Smilies
高级模式
您需要登录后才可以回帖 登录 | 立即注册

推荐板块

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门话题

热门用户

旧版
网站
社区
支持
常见问题
视频教程
速查手册
指导书
关于
公司简介
联系方式
友情链接
关注
新浪微博

GMT+8, 2024-4-26 11:48