GooSeeker产品资源教程视频教程使用交流资讯
开启辅助访问 切换风格

集搜客GooSeeker网络爬虫

论坛 › 搜客社区 › 常见问题
5 6216

多级标题怎么爬取？

nanwangni 于 2021-4-26 11:01 发表 [复制链接] [只看楼主] [打印] [上一主题] [下一主题]
收藏 跳转到指定楼层
请教各位大神多级标题怎么爬取？
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2021-4-26 15:13
沙发
内容分析应用 金牌会员 发表于 2021-4-26 11:21:54 | 只看该作者
多级标题是指什么？ 是同一个页面有多级标题， 还是多个不同层级的页面， 比如京东的商品搜索页和商品详情页
可以举个例， 截图或者给出网站的网址
举报 使用道具
回复 支持 反对
板凳
nanwangni 新手上路 发表于 2021-4-26 11:37:08 | 只看该作者
https://zwfw.pingliang.gov.cn/gszw/ssqd/bmsx/bmsxlist.do?webid=12
https://zwfw.pingliang.gov.cn/art/2020/3/11/art_412338_37298.html
您好，想要每个事项的信息
举报 使用道具
回复 支持 反对
地板
内容分析应用 金牌会员 发表于 2021-4-26 12:13:00 | 只看该作者
你这个属于层级采集，就是从一个列表获取多个网址， 然后去采集详情页， 可以看这2个教程：
网络爬虫采集列表数据
爬网址做层级采集——以京东商品爬虫为例

同时你这个列表页不能直接获取详情页的网址， 需要采集下来后， 在excel里拼接得到网址
观察下面的详情网址：
https://zwfw.pingliang.gov.cn/art/2020/3/11/art_412338_37298.html
网址中可变的几个部分：2020, 3, 11,  412338, 37298
都可以从列表中采集到， 然后拼接得出完整的网址




本帖子中包含更多资源

您需要 登录 才可以下载或查看，没有帐号？立即注册

x
举报 使用道具
回复 支持 反对
5#
内容分析应用 金牌会员 发表于 2021-4-26 12:14:24 | 只看该作者
也可以委托给集搜客官方定制服务来帮你做
举报 使用道具
回复 支持 反对
6#
nanwangni 新手上路 发表于 2021-4-26 15:13:31 | 只看该作者
好的谢谢
举报 使用道具
回复 支持 反对
返回列表
B Color Image Link Quote Code Smilies
高级模式
您需要登录后才可以回帖 登录 | 立即注册

推荐板块

精彩推荐

  • 利用AI阅读和分析文本：扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本：使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门话题

热门用户

旧版
网站
社区
支持
常见问题
视频教程
速查手册
指导书
关于
公司简介
联系方式
友情链接
关注
新浪微博

GMT+8, 2024-12-4 01:19