求助贴：抓不到想要的信息

ayaya1212 · 2016-12-22 16:22 上传

我想抓取的是这个网址http://career.huawei.com/socRecruitment/joinUs.html华为招聘信息，这个网址它是需要点击才能进入到我要的页面（发现点击后网址不变），而且在MS上输入网址直接变成英文页面，请问这样怎么解决啊？

ayaya1212 · 发表于 2016-12-22 16:28:44

一级页规则名是：华为招聘
二级页规则名是华为招聘具体

ym · 发表于 2016-12-22 16:55:21

这种没有独立网址的网页，应该在“华为招聘”前面再做一个规则，用来设置连续动作，这样运行爬虫时才可以进入到列表页面。如果是要输入关键词然后搜索的话，就要设置输入动作、点击动作两个，操作参考教程《连续动作实战：自动输入搜索条件抓取微信公众号》

Fuller · 发表于 2016-12-22 17:46:31

ayaya1212 发表于 2016-12-22 16:28
一级页规则名是：华为招聘
二级页规则名是华为招聘具体

第一级加载不了，是不是先要做什么动作才能后续分析？

Fuller · 发表于 2016-12-22 17:49:36

像@ym说的，前面应该多加一级规则，做点击动作

ayaya1212 · 发表于 2016-12-22 19:02:54

ym 发表于 2016-12-22 16:55
这种没有独立网址的网页，应该在“华为招聘”前面再做一个规则，用来设置连续动作，这样运行爬虫时才可以进 ...

不需要输入，只需要点击4次，有参考教程吗？

ayaya1212 · 发表于 2016-12-22 19:19:18

ym 发表于 2016-12-22 16:55
这种没有独立网址的网页，应该在“华为招聘”前面再做一个规则，用来设置连续动作，这样运行爬虫时才可以进 ...

这是四次点击，网页结构不同，这样可以采集结果嘛？

Fuller · 发表于 2016-12-22 20:17:33

ayaya1212 发表于 2016-12-22 19:19
这是四次点击，网页结构不同，这样可以采集结果嘛？

你用的是火狐？还是GS爬虫浏览器？我测试的时候没有看到英文界面

ayaya1212 · 发表于 2016-12-22 20:26:01

Fuller 发表于 2016-12-22 20:17
你用的是火狐？还是GS爬虫浏览器？我测试的时候没有看到英文界面

是GS爬虫浏览器，一打开网址就是英文的

Fuller · 发表于 2016-12-22 21:29:20

ayaya1212 发表于 2016-12-22 20:26
是GS爬虫浏览器，一打开网址就是英文的

就是最顶上你发的那个网址吗？我测试的都不是英文。你翻墙了？

共 16 个关于本帖的回复最后回复于 2016-12-23 16:35

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页