【求助】知网搜索，第一级规则就出现了问题，输出信息如下

加载抓取规则遇到的错误：
无法定位网页内容，基于XPath：//*[@class='resultMaincont']/iframe
无法定位上下文
无法定位容器 No.0
无法定位抓取内容 No.1 (情景2)；XPath是.//*[@class='fz14']/@href
无法定位抓取内容 No.2
无法定位抓取内容 No.3
无法定位抓取内容 No.4 (情景2)；XPath是td[position()=4]/a/text()
无法定位抓取内容 No.5 (情景2)；XPath是td[position()=5]/text()
无法定位抓取内容 No.6 (情景2)；XPath是.//*[@class='downloadCount']/a/text()

把主题名贴出来

一级是：知网搜索_游戏；二级主题：知网_游戏_行业指导

Fuller 发表于 2017-5-2 09:39
把主题名贴出来

本帖最后由 hwq5720 于 2017-5-3 10:00 编辑 一级是：知网搜索_游戏； 二级主题：知网_游戏_行业指导

hwq5720 发表于 2017-5-3 10:01

我看到你的一级规则中只映射了一个。
然后二级规则我看不到网址，你把样本网址贴一下、

shengchengx 发表于 2017-5-3 11:27
我看到你的一级规则中只映射了一个。
然后二级规则我看不到网址，你把样本网址贴一下、

我重新改了一下我的规则
一级规则：知网搜索-游戏
二级规则：知网搜索结果-游戏
三级规则：知网搜索结果-游戏-具体信息
第一级网址：http://kns.cnki.net/kns/brief/result.aspx?dbprefix=CCND
第二级网址：http://kns.cnki.net/kns/brief/result.aspx?dbprefix=CCND



我发现二级网址网址是一样的

我现在运行的结果是，只能抓到一页的搜索结果
也就是说运行到二级规则就结束了

加载抓取规则遇到的错误：
无法定位网页内容，基于XPath：//*[@id='iframeResult']
无法定位上下文

加载爬虫路线遇到的错误：
无法定位网页内容（情形2），基于XPath：//*[@id='iframeResult']
无法定位线索1；定位用XPath:<context>//*[@id='iframeResult']</context><context>//*[.//a//text()="下一页" and @class='TitleLeftCell']</context>。跳过！
无法定位网页内容（情形2），基于XPath：//*[@id='iframeResult']
无法定位网页内容（情形2），基于XPath：//*[@id='iframeResult']

hwq5720 发表于 2017-5-3 17:12
加载抓取规则遇到的错误：
无法定位网页内容，基于XPath：//*[@id='iframeResult']
无法定位上下文

根据你贴出来的内容，这一句可以判断你做规则的时候使用的网页有iframe，但是，你再次加载规则做分析的时候，那个网页没有iframe了。

1. <context>//*[@id='iframeResult']</context><context>//*[.//a//text()="下一页" and @class='TitleLeftCell']</context>

复制代码

这个context是集搜客对xpath的扩展，表示有个id是iframeResult的iframe。

你观察一下就知道什么是iframe，有iframe的时候，你会看到有左栏菜单，没有iframe的时候，左栏就没有了。

所以，要确保做规则的样本页面和实际之行采集的时候的目标页面的结构是一样的。要么都有iframe，要么都没有iframe，否则，规则匹配不上