Etsy的评论翻页抓取问题

Zekkkkk

为什么翻页抓取都是按照别的教程来的要么就是翻不了页要么就是一直重复同一页面无限抓取是不是我映射的节点不对啊求大佬来一个详细的手把手的傻瓜式教程挺急的
https://www.etsy.com/shop/OrganicIngredients?ref=simple-shop-header-name&listing_id=681343769&page=2#items

微舆情 · 发表于 2020-4-3 09:28:53

你提供的这条网址我这里加载不出来
不过，我看网址里有页码page=2
你可以在excel里构造好每页的网址，这样就不用在规则里翻页了

maomao · 发表于 2020-4-3 09:38:09

因为要抓网页中间一部分的内容，所以最好先给这块内容做一个整体定位，告诉爬虫到网页的这块区域来抓取数据。所以要做个两层整理箱，最外边的整理箱给整块内容做定位。里面的整理箱来做样例复制。

maomao · 发表于 2020-4-3 09:39:33

Zekkkkk · 发表于 2020-4-3 09:41:39

微舆情发表于 2020-4-3 09:28
你提供的这条网址我这里加载不出来
不过，我看网址里有页码page=2
你可以在excel里构造好每页的网址，这样 ...

他是产品的page 下面的Reviews没有单独的页面

maomao · 发表于 2020-4-3 09:43:32

本帖最后由 maomao 于 2020-4-3 09:44 编辑

按下面的图片来。顺序从下往上

Zekkkkk · 发表于 2020-4-3 10:06:24

maomao 发表于 2020-4-3 09:43
按下面的图片来。顺序从下往上

嗯呐！麻烦您啦，非常感谢！！已解决

Etsy的评论翻页抓取问题

共 6 个关于本帖的回复最后回复于 2020-4-3 10:06

推荐板块

精彩推荐

热门话题

热门用户

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页

Etsy的评论翻页抓取问题

共 6 个关于本帖的回复 最后回复于 2020-4-3 10:06

推荐板块

精彩推荐

热门话题

热门用户

共 6 个关于本帖的回复最后回复于 2020-4-3 10:06