网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	20125 如何设置第二级翻页抓取 7 vbnmhnj 于 2015-12-27 发表最后回复 2016-1-11 16:14
	10226 如何制定搜索结果翻页及二级页面详情内容抓取策略 1 65801266 于 2016-1-11 发表最后回复 2016-1-11 15:57
	15524 增量采集数据！ 1 张何林于 2016-1-10 发表最后回复 2016-1-10 16:51
	14266 请问版主，点击一些元素后抓取后翻页数据，该怎么做？ 4 myz8110 于 2016-1-8 发表最后回复 2016-1-9 21:43
	11564 求助怎么同时实现能翻页并且还能深入下一级的功能啊 2 wangyong 于 2016-1-8 发表最后回复 2016-1-8 22:28
	10417 这个线锁是指一个网站的样本，还是所有链接的url？规则不能保存在本地吗？既然结果是在本地，我每天采集一万条以下，是否需要付费？ 1 wangyong 于 2016-1-8 发表最后回复 2016-1-8 20:08
	10700 那即然本地爬取，数据存在本地，那网站后台激活10万条线锁是什么回事？ 1 wangyong 于 2016-1-8 发表最后回复 2016-1-8 20:04
	9718 设置规则之后，是在网站后台爬取，还是在本地爬取？ 1 wangyong 于 2016-1-8 发表最后回复 2016-1-8 19:59
	9996 翻页失败：有三级规则，第二级要抓到第三极的链接，而且要翻页抓取。 1 hehanbo 于 2016-1-8 发表最后回复 2016-1-8 09:33
	9971 菜鸟山鹰 1 山鹰于 2016-1-7 发表最后回复 2016-1-7 19:01
	10270 GooSeeker能采集直接的json么？ 1 gooseeker_info 于 2016-1-7 发表最后回复 2016-1-7 09:44
	11368 请问怎么采集网站上看不到的数据呢？ 3 gooseeker_info 于 2016-1-7 发表最后回复 2016-1-7 09:38
	14358 请问，这个网址里的数据怎么抓？ 4 驻在冰箱的企鹅菌于 2016-1-6 发表最后回复 2016-1-6 22:58
	12685 我想用position选定一个开区间，搜索能找到，但是不能保存，什么鬼。。。 1 hehanbo 于 2016-1-6 发表最后回复 2016-1-6 22:41
	14270 自定义xpath，为什么只能找到一个 7 驻在冰箱的企鹅菌于 2016-1-6 发表最后回复 2016-1-6 16:39
	11909 求助，网页样式一样，但抓取内容不是都有，怎么抓取？ 3 驻在冰箱的企鹅菌于 2016-1-6 发表最后回复 2016-1-6 16:30
	10182 请教一个xpath问题，保存或测试后，修改结果回到原样 1 驻在冰箱的企鹅菌于 2016-1-6 发表最后回复 2016-1-6 16:25
	9596 求教，在该页面不抓取内容，点击标题链接才抓取 1 驻在冰箱的企鹅菌于 2016-1-6 发表最后回复 2016-1-6 16:24
	9794 你好想问一下怎样才能自动输入多个查询条件呢？ 1 驻在冰箱的企鹅菌于 2016-1-6 发表最后回复 2016-1-6 16:23
	9728 采集问题咨询 1 驻在冰箱的企鹅菌于 2016-1-6 发表最后回复 2016-1-6 16:23

使用交流

今日：0 | 主题： 7251

精彩推荐

话题分析（NMF模型和LDA模型）软件的安装和
运行Apple无法验证的程序的方法
文本聚类分析软件的安装和使用方法
利用AI阅读和分析文本：扣子COZE记录用户反
在网页片段内直观标注——以B站评论采集为
利用AI阅读和分析文本：使用COZE建设游记文
使用AI工具Kimi生成python代码为文本分析结
苹果mac电脑安装集搜客网络爬虫软件失败的

热门版块

精彩推荐

热门用户