数据采集翻页时为什么总是会采集重复的数据，就是好几个xml显示的内容是一样的？

xlt148107

数据采集问题

Fuller · 发表于 2017-2-8 10:02:55

主题名是什么？

xlt148107 · 发表于 2017-2-8 10:17:16

Fuller 发表于 2017-2-8 10:02
主题名是什么？

钻石数据一级

xlt148107 · 发表于 2017-2-8 10:20:42

Fuller 发表于 2017-2-8 10:02
主题名是什么？

钻石数据一级

Fuller · 发表于 2017-2-8 12:10:50

xlt148107 发表于 2017-2-8 10:20
钻石数据一级

这个规则我检查不了，因为这个网站要登录。

因为这个网站特别慢，我估计你没有给抓取内容设置关键内容。

如果关键内容已经设置了，那么用DS打数机的菜单配置-》延迟抓取，设置延迟抓取时间长一些。

在可以把滚屏参数设置上，菜单配置-》滚屏参数，滚屏次数设置大一些

xlt148107 · 发表于 2017-2-8 13:47:01

Fuller 发表于 2017-2-8 12:10
这个规则我检查不了，因为这个网站要登录。

因为这个网站特别慢，我估计你没有给抓取内容设置关键内容。 ...

谢谢哈，我试试看

共 5 个关于本帖的回复最后回复于 2017-2-8 13:47

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页