https://www.zhihu.com/question/280199923/answer/581849317
此链接 知乎回答的评论一直无法抓取

https://www.toutiao.com/article/6830018252786106891/?channel=&source=search_tab
还有此链接的头条文章的评论也一直无法抓取


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2023-3-13 20:35

沙发
Fuller 管理员 发表于 2023-3-13 11:12:39 | 只看该作者
这两个链接,我们都测试了,可以采集。这两个网页都是瀑布流网页,采集的时候,要把采集窗口开到最大。而且网络要好。
举报 使用道具
板凳
a313779227 新手上路 发表于 2023-3-13 20:35:41 | 只看该作者
开到最大了啊,每次都是“第 0个动作没有定位到DOM节点://*[@class='load-more-btn']”

看着页面点开了头条的评论区,但是评论区没有往下滚动采集内容
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的
  • 下载支持win7的集搜客网络爬虫软件
  • 遇到“无法识别的应用”告警怎么办?

热门用户

GMT+8, 2024-9-8 10:53