http://www.syepb.gov.cn/data/2016_05_11/201651182750.html
举报 使用道具
| 回复

共 11 个关于本帖的回复 最后回复于 2017-11-1 15:46

沙发
嘉兴 新手上路 发表于 2017-11-1 09:14:55 | 只看该作者
1,如果下载的文件有链接,和层级抓取一样的操作就能下载。参考《用集搜客实现自动下载批量文件 》
2,如果下载的文件没有链接,就需要用连续动作去点击文件下载。参考《连续点击动作》
举报 使用道具
板凳
amilyxinxin 初级会员 发表于 2017-11-1 11:39:32 | 只看该作者
好的。我去实践一下
举报 使用道具
地板
amilyxinxin 初级会员 发表于 2017-11-1 13:02:07 | 只看该作者
请教一下,每日做多能爬出多少条数据。有限制吗?
举报 使用道具
5#
数据集 高级会员 发表于 2017-11-1 14:25:25 | 只看该作者
amilyxinxin 发表于 2017-11-1 13:02
请教一下,每日做多能爬出多少条数据。有限制吗?

免费版每条规则只能导出一万条数据
举报 使用道具
6#
amilyxinxin 初级会员 发表于 2017-11-1 14:52:33 | 只看该作者
要是不同规则呢
举报 使用道具
7#
amilyxinxin 初级会员 发表于 2017-11-1 14:54:13 | 只看该作者
比如不同主题名的规则,可以理解为:两条不同规则,上限是2万。对吗?
举报 使用道具
8#
amilyxinxin 初级会员 发表于 2017-11-1 14:59:01 | 只看该作者
第二个问题:为什么二级主题名的规则,总是跑失败。一般跑到几十条,就失败了。第三个问题,第一级和第二级主题名,是啥关系,要想把这两级的内容都跑出来,需要分别跑,然后自己合并两张表,还是单独跑第一级就能都带出来
举报 使用道具
9#
数据集 高级会员 发表于 2017-11-1 15:10:19 | 只看该作者
对的
举报 使用道具
10#
数据集 高级会员 发表于 2017-11-1 15:14:08 | 只看该作者
1,第二级规则总是失败,说明规则有问题,不能适应所有的页面
2,两级规则是通过下级线索的主题名或连续动作的主题名建立关系的,要把两级规则的内容抓出来,那就两级规则都要跑,只是如果做的是层级抓取,第二级规则需要手动运行;如果是连续动作,运行第一级规则就会自动运行第二级规则。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-23 23:33