翻页抓取数据问题

洪城县令

本帖最后由洪城县令于 2019-10-25 18:30 编辑

网页点击翻页按钮翻了10页，直接到了11页

，这种网页的翻页该如何去设置翻页采集全部数据呢？

czj19961023 · 发表于 2019-10-25 14:25:30

本帖最后由 czj19961023 于 2019-10-25 18:32 编辑

1.主题一：只翻页抓取1-10，用相对线索做翻页规则
主题二：做一个点击动作，点击翻页按钮，目标主题是主题三，主题三做翻页抓取11-20，以及21-30等等
主题一独立成一套，主题二+主题三组成一套，这两套分别运行就可采到全部数据；
2.也可以单独看每页可不可以构造网址，这样就可以构造出所有页的网址，不用翻页了

翻页抓取数据问题

共 1 个关于本帖的回复最后回复于 2019-10-25 14:25

推荐板块

精彩推荐

热门话题

热门用户

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页

翻页抓取数据问题

共 1 个关于本帖的回复 最后回复于 2019-10-25 14:25

推荐板块

精彩推荐

热门话题

热门用户

共 1 个关于本帖的回复最后回复于 2019-10-25 14:25