网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	8017 请问如果抓取过程中过几分钟就需要重新登录，而且登录页面是另外一页？ 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 17:35
	9884 请问通过写xpath可以判断抓取的数值大于某一值时或者等于某一个值时再执行抓取吗？比如说只抓样例复制中判断数值大于5000的，再执行抓取，否则跳过。 2 huzhongshun11 于 2017-8-17 发表最后回复 2017-8-17 17:11
	8180 这软件能抓取链家网房源吗？ 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 17:09
	9643 详情页结构不一样是不是不能套用规则爬数据？ 3 rainbow7525 于 2017-8-17 发表最后回复 2017-8-17 17:03
	10746 显示没有线索了 3 a798234780 于 2017-8-17 发表最后回复 2017-8-17 16:45
	7993 数据无法导出？？ 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 16:34
	10895 抓取数据部分缺失 5 collar 于 2017-8-17 发表最后回复 2017-8-17 15:04
	7768 详细资料不是同一个页面怎么办？ 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 14:33
	7754 加载的页面已经发生变化，工作台操作没有意义? 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 14:22
	7902 翻页抓取无效 1 collar 于 2017-8-16 发表最后回复 2017-8-16 22:05
	8085 对于定时爬取数据，比如每天一次，有没有方法对历史爬过的线索不再爬去，只爬取新增的线索？ 1 a798234780 于 2017-8-16 发表最后回复 2017-8-16 18:26
	8820 百度地图里我想搜索某点附近1000米内商家，标注不固定，我用采集列表和翻页的方式做不了，这种该怎么处理？ 1 oliver7629837 于 2017-8-16 发表最后回复 2017-8-16 18:04
	8221 调度的滚屏这样设置对吗？ 1 umsung 于 2017-8-16 发表最后回复 2017-8-16 17:25
	8664 对于定时爬取数据，比如每天一次，有没有方法对历史爬过的线索不再爬去，只爬取新增的线索？ 1 bowieD 于 2017-8-16 发表最后回复 2017-8-16 17:18
	9572 设置class偏好后，报错Cannot find theParent，这个要怎么处理呢 2 umsung 于 2017-8-16 发表最后回复 2017-8-16 17:16
	10425 怎么拆分嵌套整理箱 5 Shuquan 于 2017-8-16 发表最后回复 2017-8-16 17:12
	10244 翻页设置不成功，DS不滚动 2 collar 于 2017-8-16 发表最后回复 2017-8-16 16:16
	8898 翻页数据抓取不到 5 李小姐于 2017-8-16 发表最后回复 2017-8-16 15:31
	9086 求助抓取内容偏移和列表不统一，如何样式复例 3 wql963cs 于 2017-8-15 发表最后回复 2017-8-15 23:30
	7864 同一页面需要点选的标签信息采集 2 yoyo_zyxx 于 2017-8-15 发表最后回复 2017-8-15 22:53