需要采集的网页内容无法显示

需要采集的页面https://s.taobao.com/search?q=%E ... es&cat=50354024



需要采集的是这里的的面包屑导航



但是用采集的游览器打开，导航不见了

我在浏览器中直接打开你给的链接，也没有导航，我估计这个导航是否显示不是由url中的参数决定的，而是由浏览器状态决定的，很可能是记录在cookie或者某些缓存数据中。

如果你要采集这个导航信息，那么需要让爬虫按照人的点击顺序模拟点击一遍

Fuller 发表于 2016-9-28 20:03
我在浏览器中直接打开你给的链接，也没有导航，我估计这个导航是否显示不是由url中的参数决定的，而是由浏 ...

我试过用火狐游览器打开可以显示，但是测试了一段时间就不显示了，应该是游览器的问题但是是哪里出的问题呢

13019480013 发表于 2016-9-28 20:08
我试过用火狐游览器打开可以显示，但是测试了一段时间就不显示了，应该是游览器的问题但是是哪里出的问题 ...

我感觉不是浏览器问题，我用chrome打开你发的链接也没有导航

流行女鞋  和 拖鞋 这两个类别是怎样选择的？我怎么找不到这两类

Fuller 发表于 2016-9-28 20:57
流行女鞋  和 拖鞋 这两个类别是怎样选择的？我怎么找不到这两类

https://s.taobao.com/search?q=%E ... es&cat=50340020

下面相关分类里面的

13019480013 发表于 2016-9-28 22:33
https://s.taobao.com/search?q=%E5%A5%B3%E9%9E%8B&imgfile=&js=1&stats_click=search_radio_all%3A1&in ...

你好，我遇到了和你类似的问题，请你的问题解决了吗

spirit231 发表于 2018-10-5 14:02
你好，我遇到了和你类似的问题，请你的问题解决了吗

也是淘宝搜索吗？