目录
- 快捷采集
- 初级教程(新版)
- 初级教程(老版)
- 数据转Excel处理
- 爬虫规则管理
- 高级教程(新版)
- 高级教程(老版)
- 用爬虫群分布式高效采集
- 爬虫关键知识拓展
- 问题集锦
- 实战演练案例
- 爬虫安装说明
- 关于集搜客
集搜客交流群
2000人群:点击加入
如何设置,先做翻页后做连续动作
第二级规则,第一行,连续翻页采集完毕后,需要关闭窗口之后,才能采集第二行(连续翻页),不关闭窗口,就会挡住第二采集,增加连续动作:关闭x窗口,第二级规则就不会做连续翻页了[attach]11600[/attach][attach]11601[/attach
先鼠标悬浮,再采集数据,然后还要翻页,这种有没有办法
[i=s] 本帖最后由 七月等 于 2016-11-14 18:04 编辑 [/i] [attach]2546[/attach] 这种先鼠标悬浮,再采集数据,再翻页的,可以做吗?
爬虫线索实现翻页后能否设置翻页后等待N秒后抓取数据?
用爬虫线索来实现翻页能设置翻页后的等待时间么?有时候页面刷新出来比较慢,结果重复抓取3个一样的数据后就终止了。
连续操作翻页后,数据采集不翻页
通过 连续 操作使页面跳转至第n页了,接下来打算进行 翻页数据采集(还有一个下级数据挖掘)。但每次都是跳转至第n页,而且只采集第n页的数据 不翻页是怎么回事?任务名:成果转移之可供转化成果数据爬取下跳页 出现的问题: 数据采集(跳转至第n页后数据采集)任务名:成果转移之可供转化成果数据爬取下跳页后续 ——————————————————现在的问题是不翻页,只在第n页采集数据数据采集(跳转至第n页后接着下挖网页数据采集) 任务名:成果转移之可供转化成果数据爬取下跳页后续下挖内容
请问:两个主题自动先后抓取
请教:是否能实现两个主题自动依次抓取,即先运行主题A,运行完后再运行主题B。
数据抓取不翻页
在抓取艺龙网酒店数据时,爬虫路线里 用了2个记号线索, 第一个用来点击选择,第二个用来翻页, 不知为何不能完成翻页呢?爬虫只抓取第一页后就停止了, 请帮忙分析下,多谢!
爬虫只采集了第一页,后面只翻页但抓不到数据
[i=s] 本帖最后由 稀饭客 于 2018-9-30 15:09 编辑 [/i] 规则:帮贴发帖数据 规则设置了翻页,爬虫只采集到了第一页,后面的只翻页却没有采到数据怎么回事?
爬虫只采集了第一页,后面只翻页但抓不到数据
爬虫只采集了第一页,后面只翻页但抓不到数据
请问版主,点击一些元素后抓取后翻页数据,该怎么做?
[url]http://fund.jrj.com.cn/jjsxq/[/url] 这是我要抓取数据的地址,过程是点击lof按钮,点击股票型按钮,点击筛选按钮,可以得到37个基金,然后翻页抓取基金简称,基金代码。就这样,我看过你们的一些教程,我发现做不来,我先是做3个点击的连续动作,但是没有下级线索,那我怎么抓取这37个基金的数据呢先写过了
设置翻页后只能抓取两页
spm=0.0.0.0.WUmoOD阿里巴巴的官网上招聘信息设置翻页只能抓取两页的信息,群里问过,说是可能要改规则,想问问怎么改规则呀
关于瀑布流翻页,可不可以先加载完成 然后再直接采集呢
关于瀑布流翻页 这里看到的解答是这样的 [attach]1286[/attach] 意思就是取最后一个xml的文件就是包含全部的了 那么可不可以先加载完成 然后再直接采集呢
翻页数据抓取不到
QQ\WinTemp\RichOle\KKFYPTN2IKN0S[`608(%]5M.png[/img]做了如上设置还是只抓每一页,后面的数据全抓不到
翻页抓取数据问题
[i=s] 本帖最后由 洪城县令 于 2019-10-25 18:30 编辑 [/i] 网页点击翻页按钮翻了10页,直接到了11页[attach]11419[/attach],这种网页的翻页该如何去设置翻页采集全部数据呢?
翻页抓取微博数据抓不全
翻页抓取时,有的页面抓取数据不全,会漏掉好多。 是网的问题还是打数机配置?我打数机设置的滚屏次数是16,速度是2. 规则名是 微博搜索界面