淘宝抓取过程中弹出登录框

局域网里两台不同电脑运行的爬虫，对服务器来说算是1个还是2个？

we_lol 发表于 2016-10-10 15:41
局域网里两台不同电脑运行的爬虫，对服务器来说算是1个还是2个？

一个IP两台电脑

酱紫 发表于 2016-10-10 15:38
出验证码就是超过容忍范围
如果爬的是生意参谋更小小心
可以视你的行为为攻击行为

爬天猫的商品算吗，比如，搜个女鞋，然后按销量排序，爬数据，大概100页的样子
天猫不是应该是公开网页吗

TonyJiang 发表于 2016-10-10 15:43
爬天猫的商品算吗，比如，搜个女鞋，然后按销量排序，爬数据，大概100页的样子
天猫不是应该是公开网页吗 ...

普通用户怎么会浏览100页呢，淘宝就是不想你爬它的数据

quyixuan 发表于 2016-10-10 15:44
普通用户怎么会浏览100页呢，淘宝就是不想你爬它的数据

那怎么办才好

TonyJiang 发表于 2016-10-10 15:43
爬天猫的商品算吗，比如，搜个女鞋，然后按销量排序，爬数据，大概100页的样子
天猫不是应该是公开网页吗 ...

是公开的数据，但是你频繁的访问，对方可以认为你的是攻击行为
可以用单独的网卡，还有就是专门的账号
我已经有朋友被封账号

酱紫 发表于 2016-10-10 15:44
是公开的数据，但是你频繁的访问，对方可以认为你的是攻击行为
可以用单独的网卡，还有就是专门的账号
我 ...

奥奥，今天没有很频繁，其实之前有一天比较频繁，也没有提示

TonyJiang 发表于 2016-10-10 15:45
奥奥，今天没有很频繁，其实之前有一天比较频繁，也没有提示

如果出验证码的话，就要立刻终止
这个是我的经验

酱紫 发表于 2016-10-10 15:45
如果出验证码的话，就要立刻终止
这个是我的经验

被封账号，要是用的公司网的话，是不是全公司都要断
那登录提示呢

TonyJiang 发表于 2016-10-10 15:46
被封账号，要是用的公司网的话，是不是全公司都要断
那登录提示呢

如果出了验证码，你还强行爬取的话，就会比较麻烦
如果你公司是固定IP会比较麻烦，如果是拨号上网的话，重新拨号一下会换IP的