爬不了第一页数据

一级任务：证券从业人员基本信息公示第11级；二级任务券从业人员基本信息公示第12级。为什么第一个公司的信息爬不了，后面的可以。使用爬虫群的时候

这个网站不能用连续动作的点击，得用层级抓取
这个onclick就是每个公司详情页网址的变量id：https://exam.sac.net.cn/pages/re ... .html?aoiId=1999082先做列表规则把onlick抓取下来，然后放到Excel里构成出网址来，添加到二级规则

小蜜蜂测试162 发表于 2020-11-18 11:03
这个网站不能用连续动作的点击，得用层级抓取
这个onclick就是每个公司详情页网址的变量id：https://exam.s ...

如果这样做的话，有什么办法吗，因为我后面的全部能爬，就第一页不能爬

Easec888 发表于 2020-11-18 13:36
如果这样做的话，有什么办法吗，因为我后面的全部能爬，就第一页不能爬
...

这个网站一共也就一页吧？

wangyong 发表于 2020-11-18 16:15
这个网站一共也就一页吧？

不是，这个是从一级界面点进二级界面采集数据，然后返回一级页面，这样循环

Easec888 发表于 2020-11-18 13:36
如果这样做的话，有什么办法吗，因为我后面的全部能爬，就第一页不能爬
...

你是指第一个公司失败是吧？

其他都成功了的话，就单独把失败的这个公司网址添加到二级规则里单独采集就行了

https://exam.sac.net.cn/pages/re ... .html?aoiId=1999082