小弟刚入门爬虫,向大家请教:
使用selenium爬虫,点击下一页进行翻页,碰到javascript:void(0);
尝试过driver.find_element_by_link_text("下一页").click()等,都不能成功翻页
请问有什么办法可以翻页成功? 先行拜过~
这是要翻页的URL链接 http://q.10jqka.com.cn/gn/detail/code/300800/


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2021-7-5 16:54

沙发
内容分析应用 金牌会员 发表于 2021-7-5 16:48:13 | 只看该作者
你可以试试通过selenium驱动浏览器来点击, 论坛的python交流版块,有一些这方面的案例, 可以参考。

举报 使用道具
板凳
wangyong 版主 发表于 2021-7-5 16:53:08 | 只看该作者

集搜客数据管家采集数据,这种翻页将“下一页”做为翻页记号,爬虫采集的时候就会自动翻页

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
地板
byrand2001 新手上路 发表于 2021-7-5 16:54:24 | 只看该作者
内容分析应用 发表于 2021-7-5 16:48
你可以试试通过selenium驱动浏览器来点击, 论坛的python交流版块,有一些这方面的案例, 可以参考。

...

小弟目前是使用webdriver.Chrome()模拟网页点击操作的,我有在网站搜索,一直没找到相关案例

举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为

热门用户

GMT+8, 2025-2-6 12:02