【第19期】 翻页及层级抓取

2016-6-24 14:44| 发布者: ym| 查看: 9178| 评论: 0

摘要: 如果您的采集入口是搜索后的页面,但想要自动点击每条搜索结果,进入到详情页面采数据,这就要用层级采集(对链接设置下级线索),通过链接深入到下一层网页进行采集。如果搜索结果有多页,规则里也可以同时设置上翻 ...

如果您的采集入口是搜索后的页面,但想要自动点击每条搜索结果,进入到详情页面采数据,这就要用层级采集(对链接设置下级线索),通过链接深入到下一层网页进行采集。如果搜索结果有多页,规则里也可以同时设置上翻页,因为下级线索和翻页是互不影响的,集搜客网络爬虫在采集数据时会自动把采到的网址导入到下级规则中,并且翻页采集。

点击观看培训视频




若有疑问可以集搜客网络爬虫

鲜花

握手

雷人

路过

鸡蛋

相关阅读

最新评论

GMT+8, 2024-12-22 00:02