本帖最后由 scraper 于 2016-12-6 11:47 编辑


【启动采集前的配置】
  • 预先登陆网站:否
  • 配置打码平台:否

【运行方法】— 详见数据DIY图文教程

  • 用GS爬虫浏览器或者是安装了爬虫软件的火狐浏览器访问百度新闻搜索列表页面;
  • 输入一条网址,或者点击“输入多条网址”,然后点击“获取数据”;
  • 点击“启动采集”按钮,采集完成后点击“打包”按钮,就可以下载数据了。

【常见问题】— 欢迎跟帖留言
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2022-2-10 22:56

沙发
lxs111_ 新手上路 发表于 2022-2-10 20:52:19 | 只看该作者
请问怎么样才能把关于某个关键词的新闻资讯全部抓取,而不是一页一页的复制网址
举报 使用道具
板凳
Fuller 管理员 发表于 2022-2-10 22:56:47 | 只看该作者
lxs111_ 发表于 2022-2-10 20:52
请问怎么样才能把关于某个关键词的新闻资讯全部抓取,而不是一页一页的复制网址 ...

不用一页页复制,把搜索某个关键词的网址放到这个快捷采集工具上,爬虫会自动翻页采集:https://www.gooseeker.com/res/rule_667.html
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-22 04:09