我想抓智联招聘的所有具体招聘信息,实例网页是要打开具体的岗位网页的,我不能在上一级页面把他们全部抓下来吗?如果要一个一个具体岗位打开网页不如直接复制粘贴了?而且我查看日志显示这样是什么意思呀?

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2019-7-3 17:22

沙发
wangyong 版主 发表于 2019-7-2 17:14:01 | 只看该作者
要抓取具体的招聘信息,首先要通过智联招聘的列表页入口统一把详情页的链接采集下来,再通过详情页抓取

抓取智联数据的快捷采集入口:https://www.gooseeker.com/res/datadiy.html?category=%E6%8B%9B%E8%81%98&web=%E6%99%BA%E8%81%94%E6%8B%9B%E8%81%98&rule=%E6%99%BA%E8%81%94%E6%8B%9B%E8%81%98_%E5%B2%97%E4%BD%8D%E5%85%B3%E9%94%AE%E8%AF%8D%E6%90%9C%E7%B4%A2%E5%88%97%E8%A1%A8

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
板凳
18174010430 初级会员 发表于 2019-7-3 16:21:37 | 只看该作者
wangyong 发表于 2019-7-2 17:14
要抓取具体的招聘信息,首先要通过智联招聘的列表页入口统一把详情页的链接采集下来,再通过详情页抓取

抓 ...


我试了十个,它都显示出错,抓不出来呢,为什么呀?一直显示状态是出错然后就停止了

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
地板
何波波 金牌会员 发表于 2019-7-3 17:22:55 | 只看该作者
18174010430 发表于 2019-7-3 16:21
我试了十个,它都显示出错,抓不出来呢,为什么呀?一直显示状态是出错然后就停止了

...

是网页改版了,现在修改了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-22 05:07