阿里系现在验证越来越频繁了吗？

最近在抓闲鱼的数据。
第一级就是采集下级链接列表和翻页
可是打数机采集完成之后，统计线索为0.
如果直接运行第二级规则，
直接跳转到验证码页面了。
这个怎么处理啊？

如果想做两级抓取，首先要看抓到的下一级的网址是不是真实网址，如果是javascript代码，或者单独一个#，那样做两级抓取没有意义。必须要当时就做点击抓取，也就是做连续动作规则

Fuller 发表于 2016-8-12 23:23
如果想做两级抓取，首先要看抓到的下一级的网址是不是真实网址，如果是javascript代码，或者单独一个#，那 ...

那么如何分辨是不是JavaScript代码呢？没做过这一块……

Fuller 发表于 2016-8-12 23:23
如果想做两级抓取，首先要看抓到的下一级的网址是不是真实网址，如果是javascript代码，或者单独一个#，那 ...

得到的都是这种形式的地址，应该算是正常地址吧？
但是一旦使用的话，浏览器地址栏就变成好长好长的地址。

redwindy 发表于 2016-8-13 12:14
那么如何分辨是不是JavaScript代码呢？没做过这一块……

不用看有没有javascript代码，因为这些代码分散在各处，只需看href中有没有网址就行

redwindy 发表于 2016-8-13 12:17
得到的都是这种形式的地址，应该算是正常地址吧？
但是一旦使用的话，浏览器地址栏就变成好长好长的地址 ...

这是正常的网址，先不用关心地址栏会不会是好长好长，而是重点看网页能否显示出来。

地址栏变长有很多原因，比如，自动跳转

Fuller 发表于 2016-8-13 15:27
这是正常的网址，先不用关心地址栏会不会是好长好长，而是重点看网页能否显示出来。

地址栏变长有很多原 ...

好的，我试试看先。