3 10431

样例复制链接问题

Flaviawoolf 于 2019-3-9 20:32 发表 [复制链接]
规则名称为“新疆一级”
只爬取名称的时候样例可以用:
1.png
加一项内容链接的时候样例就不能用了
无论我先添加链接内容还是先设置样例
2.png
求帮忙啊!是不是政府网站的问题???
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2019-3-10 08:52

Fuller 管理员 发表于 2019-3-9 23:20:19 | 显示全部楼层
这个网页结构好奇怪,第一行和后面的行不一样
结构20190309231830.png
上面两个红色箭头,和下面两个红色箭头,不一样,生成的规则就适应不了了,我想想怎样解决。主要是要找到共同的部分来做映射
举报 使用道具
Fuller 管理员 发表于 2019-3-9 23:26:37 | 显示全部楼层
第二个20190309232117.png
这是自动生成的规则,可以看出来,规则中规定是从第二个a节点抓取内容,除了第一行外,其他行都不是第二个a节点。

但是,他们都有一个共性,就是这个a节点的下一个span节点含有@class=‘time’,可以利用这一点自定义xpath
自定义20190309232510.png
如上图,做高级设置,选择自定义xpath,输入
  1. a[following-sibling::span/@class='time']/@href
复制代码

举报 使用道具
Flaviawoolf 初级会员 发表于 2019-3-10 08:52:44 | 显示全部楼层
谢谢!!!
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 08:08