33 56667

网页地址过长被截断

谭雨微 于 2018-5-8 10:43 发表 [复制链接]
网页地址过长被截断了,而且需要输入验证码,没办法输进去。。请问怎么解决呢

页面截图

页面截图
举报 使用道具
| 回复

共 33 个关于本帖的回复 最后回复于 2019-4-18 16:56

Fuller 管理员 发表于 2018-5-8 10:46:16 | 显示全部楼层
你在这个论坛上无法输入网址吗?当成文本内容发不了帖吗?
举报 使用道具
Fuller 管理员 发表于 2018-5-8 10:47:07 | 显示全部楼层
在什么时候出现 “网页地址过程被截断”?通常这个只是一个提示,不影响做规则。
验证码是在什么时候出现?
举报 使用道具
tuziqifei 新手上路 发表于 2018-8-8 10:52:02 | 显示全部楼层

szdxfcgvhbjn

szdxfcgvhbjn

举报 使用道具
Fuller 管理员 发表于 2018-8-8 12:03:12 | 显示全部楼层

这个只是一个提示,说明这个网址超过了250个字符,对定义规则不影响。但是,这个提示还是要注意一下,如果要为这个规则添加很多网址,如果都说超过了250个字符,而且前250个字符都是一样的,那么爬虫就区分不出来了。现象就是:添加了很多网址,发现统计到的线索数少于这些网址数量。
出现验证码的话,需要先打码。如果在定义规则状态,要把工具条中间的“内容定位”不要勾上,才能在网页上做操作。输入了验证码以后,再重新勾上“内容定位”,以便开始定义规则



举报 使用道具
Heart2019 新手上路 发表于 2019-4-16 09:06:59 | 显示全部楼层
Fuller 发表于 2018-8-8 12:03
这个只是一个提示,说明这个网址超过了250个字符,对定义规则不影响。但是,这个提示还是要注意一下,如 ...

如果没有出现验证码呢?MS服务台提示规则错误原因是“网页地址过长被截断”。
举报 使用道具
Fuller 管理员 发表于 2019-4-16 09:23:17 | 显示全部楼层
Heart2019 发表于 2019-4-16 09:06
如果没有出现验证码呢?MS服务台提示规则错误原因是“网页地址过长被截断”。
...

这个只是一个提示,并不阻止做规则,但是,可能有风险,因为网址特别长的话,爬虫只根据前250个字符判断这个网址跟其他的网址是否相同,如果你导入很多这样的网址,而且前250个字符都一样,差异部分发生在250个字符之后,那么爬虫以为相同的网址,只会导入一条
举报 使用道具
Heart2019 新手上路 发表于 2019-4-16 09:32:32 | 显示全部楼层
Fuller 发表于 2019-4-16 09:23
这个只是一个提示,并不阻止做规则,但是,可能有风险,因为网址特别长的话,爬虫只根据前250个字符判断 ...

每条规则都只有一条线索,即使这样还是不行,该怎么做呢?

举报 使用道具
Fuller 管理员 发表于 2019-4-16 09:43:12 | 显示全部楼层
Heart2019 发表于 2019-4-16 09:32
每条规则都只有一条线索,即使这样还是不行,该怎么做呢?

你在什么时候遇到这个提示的?能截个图看看吗?
举报 使用道具
Heart2019 新手上路 发表于 2019-4-16 10:59:19 | 显示全部楼层
Fuller 发表于 2019-4-16 09:43
你在什么时候遇到这个提示的?能截个图看看吗?

如图

1

1

2

2
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 17:40