本帖最后由 王建国 于 2021-10-9 14:45 编辑

集搜客要采集下级点开后网页的页面,该怎样操作
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2021-10-9 15:16

沙发
wangyong 版主 发表于 2021-10-9 15:16:58 | 只看该作者

1,在集搜客爬虫软件里可以看到网页结构,下级页面的网址都是存在A节点下的href中

2,找到href,右击做内容映射到商品网址,这样就可以把下级网址采集到了

3,在“商品网址”中点击设置按钮,勾选下级网址后,输入下级任务名,就是采集详情页面的任务名称

具体的下级线索采集流程可以参考教程:《爬网址做层级采集——以京东商品爬虫为例
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-20 13:30