请问一下  工具是否支持输入主网网址和关键词  然后工具根据关键词检索的结果来爬数据
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2017-1-3 17:23

沙发
scraper 论坛元老 发表于 2017-1-3 17:12:50 | 只看该作者
可以
需要旗舰版的连发弹仓功能
http://www.gooseeker.com/about/charge.html
举报 使用道具
板凳
远大贾丽 初级会员 发表于 2017-1-3 17:13:54 | 只看该作者
scraper 发表于 2017-1-3 17:12
可以
需要旗舰版的连发弹仓功能
http://www.gooseeker.com/about/charge.html

好的谢谢
因为我要采集数据的网站会对反复搜索的IP 要求输入验证码   不知道你们软件能否解决这个问题
举报 使用道具
地板
scraper 论坛元老 发表于 2017-1-3 17:14:20 | 只看该作者
远大贾丽 发表于 2017-1-3 17:13
好的谢谢
因为我要采集数据的网站会对反复搜索的IP 要求输入验证码   不知道你们软件能否解决这个问题
...

有自动打码功能
抓取过程中出现的验证码,送到打码平台, 整个过程是自动的

举报 使用道具
5#
scraper 论坛元老 发表于 2017-1-3 17:14:45 | 只看该作者
本帖最后由 scraper 于 2017-1-3 17:18 编辑
远大贾丽 发表于 2017-1-3 17:13
好的谢谢
因为我要采集数据的网站会对反复搜索的IP 要求输入验证码   不知道你们软件能否解决这个问题
...

这个“连续打码”,就是针对抓取过程中出现的验证码

举报 使用道具
6#
远大贾丽 初级会员 发表于 2017-1-3 17:19:50 | 只看该作者
scraper 发表于 2017-1-3 17:14
这个“连续打码”,就是针对抓取过程中出现的验证码

还有一个情况是   反复搜索这个网页   他会要求登录账号才能搜索
如果我在火狐中登录这个网站的账号之后  软件是否支持打开的网页默认就是登录状态
举报 使用道具
7#
scraper 论坛元老 发表于 2017-1-3 17:23:22 | 只看该作者
远大贾丽 发表于 2017-1-3 17:19
还有一个情况是   反复搜索这个网页   他会要求登录账号才能搜索
如果我在火狐中登录这个网站的账号之后  ...

登录有几种方式,最常用的是先登录好,浏览器会记住登录状态
举报 使用道具
8#
远大贾丽 初级会员 发表于 2017-1-3 17:23:32 | 只看该作者
scraper 发表于 2017-1-3 17:23
登录有几种方式,最常用的是先登录好,浏览器会记住登录状态

好的
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-3 19:44