本帖最后由 啾小妍SAMA 于 2016-10-20 15:36 编辑

我要采集这个网址http://piaofang.maoyan.com/rankings/year?_v_=yes
MS抓到的是下图这样的,网页上的数值都是CS显示的,是否采集不了?


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2016-10-20 17:34

沙发
ym 版主 发表于 2016-10-20 15:22:17 | 只看该作者
尝试了把火狐的代理改为移动代理来采集,发现火狐浏览器上偶尔是可以看到文本数值的,但是不稳定,用插件版爬虫采到的还是有CS值,暂时想不到其他解决方法了

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
板凳
啾小妍SAMA 初级会员 发表于 2016-10-20 15:34:31 | 只看该作者
行吧
举报 使用道具
地板
Fuller 管理员 发表于 2016-10-20 17:34:03 | 只看该作者

我观察了一下,在浏览器上重新加载网页,那些数字都是迷糊了一会才显示出来,肯定是用了什么保护措施,也许是图片格式的,像百度指数那样。

这种要采集的话,需要花时间研究一下破解方法
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-22 06:43