网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	14660 如何抓取网页源代码信息 1 xandy 于 2016-9-2 发表最后回复 2016-9-2 11:40
	11629 自定义xpath和嵌套样例复制均无效 2 xandy 于 2016-9-1 发表最后回复 2016-9-1 22:42
	14000 GS提示不能正确的重定向 3 mz2358639 于 2016-8-31 发表最后回复 2016-9-1 14:40
	12013 这个食品药品监督管理局的网页有框架，用集搜客怎样采集数据？ 1 gooseeker_info 于 2016-9-1 发表最后回复 2016-9-1 11:55
	12588 用的是GS的浏览器，想多个爬虫一起爬不同的网页，怎么实现呢？ 5 有正事的小青年于 2016-9-1 发表最后回复 2016-9-1 10:06
	13825 【已解决，结贴】某网站爬取碰到（翻页或双爬虫线路问题），求指导 2 maxno100 于 2016-8-31 发表最后回复 2016-8-31 18:27
	15787 附件的个数不同怎么办 3 有正事的小青年于 2016-8-31 发表最后回复 2016-8-31 18:26
	14080 同一个主题名，想再建立一个规则，采集不同结构网页，结果提示我找不到页面结构 4 有正事的小青年于 2016-8-31 发表最后回复 2016-8-31 17:59
	13647 新增评论 1 2445406817 于 2016-8-31 发表最后回复 2016-8-31 15:12
	12499 求助：怎么同时抓取多列数据 3 mumian 于 2016-8-31 发表最后回复 2016-8-31 12:09
	11930 同一级节点内能作样例复制吗 4 guxinyue 于 2016-8-31 发表最后回复 2016-8-31 11:00
	16832 怎么抓取类似爱奇艺这种视频网站的信息？ 2 AnswerDSL 于 2016-8-30 发表最后回复 2016-8-30 18:43
	28099 翻頁中斷、爬蟲路線、連續點擊、同時有頁數(1,2,3,...)和下一頁(Next)兩種形式, 並且Next是以image方式呈現 5 ShelleyWu 于 2016-8-30 发表最后回复 2016-8-30 17:33
	8871 想要采集聚美优品网站上商品的信息，但是需要连续的滚动才能加载出内容，怎么采集？ 1 何波波于 2016-8-30 发表最后回复 2016-8-30 17:25
	9649 需要登录才能采集怎么解决？ 1 何波波于 2016-8-30 发表最后回复 2016-8-30 16:57
	14840 翻页，只能翻一页的问题 2 famelove 于 2016-8-30 发表最后回复 2016-8-30 16:31
	11738 在抓取雪球网页内容时，有个更多选项，点开才能看见完整的内容，请问应该怎么做？ 1 gooseeker_info 于 2016-8-30 发表最后回复 2016-8-30 16:15
	8530 想要采集网页信息，只有一个网页，需要不断下拉滚动条才能使信息加载出来，要如何设置信息采集？ 1 AnswerDSL 于 2016-8-30 发表最后回复 2016-8-30 11:14
	12740 请问在层级抓取中对层级页面做连续动作是做几个规则？ 2 何波波于 2016-8-30 发表最后回复 2016-8-30 10:56
	8879 淘宝网的商品评论怎么抓取，有没有什么比较稳定的方法？ 1 何波波于 2016-8-29 发表最后回复 2016-8-29 18:02