网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	14131 附件链接有多个地址为什么下载附件只下载一个 5 pay123456 于 2018-4-14 发表最后回复 2018-4-14 15:27
	10546 如何抓取关键词的联想词？ 1 yanyan0427 于 2018-4-14 发表最后回复 2018-4-14 10:30
	7895 页面结构的附件不一样怎么处理 1 pay123456 于 2018-4-13 发表最后回复 2018-4-13 16:20
	8513 如何过滤掉没用的数据 3 pay123456 于 2018-4-13 发表最后回复 2018-4-13 16:05
	9449 层级抓取附件内容 4 pay123456 于 2018-4-13 发表最后回复 2018-4-13 14:26
	31480 我要抓取页面的整篇文章内容 15 pay123456 于 2018-4-13 发表最后回复 2018-4-13 14:15
	12136 爬取问题 9 maia_2017 于 2018-4-12 发表最后回复 2018-4-13 09:25
	10068 网页打开之后需要点击一下到其他分页才可以开始采集 1 LPG123 于 2018-4-12 发表最后回复 2018-4-12 20:11
	8987 抓取评论和产品信息，测试可以，但是采集时就不行了 3 LPG123 于 2018-4-12 发表最后回复 2018-4-12 16:58
	8657 怎么跳转错误信息的网页？ 1 w228258549 于 2018-4-12 发表最后回复 2018-4-12 16:30
	9044 采集数据时，中间的不带链接，结构有点不同，采集中止，怎么跳过去 4 LPG123 于 2018-4-12 发表最后回复 2018-4-12 16:29
	9706 URL在不同X详情页的位置不同改如何处理 5 weier_2016 于 2018-4-12 发表最后回复 2018-4-12 16:11
	7979 想统计一下网页里面的图片个数，不需要下载，怎么设置规则? 1 大帝烦人于 2018-4-12 发表最后回复 2018-4-12 16:09
	8163 同一类网页有小不同怎么自动区别着抓取？ 1 淼淼于 2018-4-12 发表最后回复 2018-4-12 15:19
	9873 采集这个网页的测试的时候数据是完整的，但是正式爬取的时候只能采集到排行榜的一部分数据 1 月球漫步于 2018-4-12 发表最后回复 2018-4-12 14:08
	13900 抓取多个套餐价格问题，只能抓到第一个 9 bsh331400 于 2018-4-11 发表最后回复 2018-4-12 12:45
	17633 请问抓下来的内容有 &nbsp 的空格，怎么去掉啊？ 1 数据集于 2018-4-12 发表最后回复 2018-4-12 11:46
	27395 急问！！评论怎么抓并且得出数量？ 14 淼淼于 2018-3-10 发表最后回复 2018-4-12 10:25
	15047 裁判文书 1 ovna123 于 2018-4-11 发表最后回复 2018-4-11 22:18
	10037 样例一竟然抓取了样例二才有的模块，求解 5 npcayu 于 2018-4-11 发表最后回复 2018-4-11 16:59