集搜客GooSeeker网络爬虫

标题: 按照教程翻页翻不了 [打印本页]

作者: vbnmhnj    时间: 2015-12-16 22:54
标题: 按照教程翻页翻不了
按照教程设置完抓取规则后,在爬虫线索哪里用记号线索设置翻页。不过设置好了之后用DS大数机搜,发现翻不了页
作者: xandy    时间: 2015-12-16 23:13
可能是规则不适用,原因可能是映射做的不好等等,测试数据有翻页的结果吗?
作者: Fuller    时间: 2015-12-16 23:26
不能翻页的原因后很多,最好把主题名告诉我,有针对性地进行检查。这里有一组关于翻页的文档,应该都阅读一下:http://www.gooseeker.com/doc/thread-698-1-1.html
作者: vbnmhnj    时间: 2015-12-17 10:09
Fuller 发表于 2015-12-16 23:26
不能翻页的原因后很多,最好把主题名告诉我,有针对性地进行检查。这里有一组关于翻页的文档,应该都阅读一 ...

当时就是按照这个教程在弄的主题名:创业板
作者: vbnmhnj    时间: 2015-12-17 10:10
xandy 发表于 2015-12-16 23:13
可能是规则不适用,原因可能是映射做的不好等等,测试数据有翻页的结果吗? ...

测试哪里好像有
作者: Fuller    时间: 2015-12-17 11:17
vbnmhnj 发表于 2015-12-17 10:10
测试哪里好像有

稍等一下,我们正在检查这个抓取规则
作者: wangyong    时间: 2015-12-17 11:33
Fuller 发表于 2015-12-17 11:17
稍等一下,我们正在检查这个抓取规则

你把滚屏打开再试试
作者: vbnmhnj    时间: 2015-12-17 12:47
wangyong 发表于 2015-12-17 11:33
你把滚屏打开再试试

怎么打开?
作者: ym    时间: 2015-12-17 14:02
在MS谋数台配置菜单里勾上自动滚屏模式就是打开滚屏功能了
作者: wangyong    时间: 2015-12-17 14:17
vbnmhnj 发表于 2015-12-17 12:47
怎么打开?

DS打数机配置菜单栏→滚屏参数,滚屏次数设置2,滚屏速度-1
作者: Fuller    时间: 2015-12-17 15:00
9楼和10楼的要合在一起,MS谋数台上勾选自动滚屏模式是做好了准备(其实这个缺省就勾的),DS打数机上的设置是真正启用
作者: vbnmhnj    时间: 2015-12-17 15:30
Fuller 发表于 2015-12-17 15:00
9楼和10楼的要合在一起,MS谋数台上勾选自动滚屏模式是做好了准备(其实这个缺省就勾的),DS打数机上的设 ...

勾选了自动滚屏和设置了参数,还是不能翻页抓取
作者: vbnmhnj    时间: 2015-12-17 15:35
vbnmhnj 发表于 2015-12-17 15:30
勾选了自动滚屏和设置了参数,还是不能翻页抓取

翻页规则的设置

作者: Fuller    时间: 2015-12-17 16:44
vbnmhnj 发表于 2015-12-17 15:35
翻页规则的设置

刚才我们测试过能翻页,现在我发现你的问题了:
你的规则名是 创业版,那么在目标主题名那里应该还是 创业版,而不是 创业版翻页 。
你可以这样想:无论翻到哪一页,看到的内容结构是一样的,所以就应该保持规则名不变。
当时我们测试的时候可能重新勾选了 连贯抓取,每次重新勾选,目标主题名会自动填写成当前主题名,所以,测试翻页没有问题。




欢迎光临 集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/) Powered by Discuz! X3.2