抓取的知网文献详情页面URL在补上域名后也无法使用，访问的话提示URL参数错误，应该是少了某些参数。只能用飞掠模式了吗?例子如下。

抓取的URL为：/kns/detail/detail.aspx?QueryID=16&CurRec=1&DbCode=CJFQ&dbname=CAPJLAST&filename=JSJX2016092900E&urlid=11.1826.TP.20160929.1820.030&yx=Y

补齐后的URL：http://www.cnki.net/KCMS/detail/detail.aspx?QueryID=7&CurRec=1&DbCode=CJFQ&dbname=CAPJLAST&filename=JSJX2016092900E&urlid=11.1826.TP.20160929.1820.030&yx=Y

访问后提示URL参数错误


知网搜索访问后的URL（也就是能用的）为：http://www.cnki.net/KCMS/detail/11.1826.TP.20160929.1820.030.html?uid=WEEvREcwSlJHSldRa1Fhb09jMjQxdnhac2NJTTBUSFpDdTRMVjFnSUYwbz0=$9A4hF_YAuvQ5obgVAqNKPCYcEjKensW4ggI8Fm4gTkoUKaID8j8gFw!!&v=MTM5MDFvMU1aT3Q2WXc5TXptUm42ajU3VDNmbHFXTTBDTEw3UjdxZVlPWnJGQ25sVjdyT0lGaz1MejdCZHJHNEg5Zk1w

有什么办法么？

把详情的网址改成
http://kns.cnki.net/KCMS/detail/ ... 60929.1820.030&yx=Y
也就是www改成kns

你把域名部分的www替换成kns试试

因为网址里有转义字符, 如果你直接用浏览器访问, 需要把网址里的所有amp;都去掉

shenzhenwan10 发表于 2017-4-20 18:17
因为网址里有转义字符, 如果你直接用浏览器访问, 需要把网址里的所有amp;都去掉 ...

谢谢，去掉之后再访问就直接到主页了，而不是文献详情页。这是怎么回事呢？

你访问一下这个网址, 看看是文章详情页还是主页
http://kns.cnki.net/KCMS/detail/ ... 9.1820.030&yx=Y

HJLing 发表于 2017-4-20 18:15
把详情的网址改成
http://kns.cnki.net/KCMS/detail/ ... 60929.1820.030&yx=Y
也就是www改成kns

谢谢谢谢，刚开始没看到，解决了我一大难题！

shenzhenwan10 发表于 2017-4-20 18:16
你把域名部分的www替换成kns试试

谢谢！刚才没看到。。。

scraper 发表于 2017-4-20 18:58
你访问一下这个网址, 看看是文章详情页还是主页
http://kns.cnki.net/KCMS/detail/detail.aspx?QueryID=7&C ...

谢谢！不知道为什么没看到你的回复！你们都好厉害，为什么能想到把www换成kns呢？