如何按规定时间抓取内容？

ainka111

如何按规定时间抓取内容？下面网址里成交记录里按时间抓取内容比如只抓当前9月的内容 9月抓完停止不抓8月的

https://zxn.taobao.com/detail.htm?spm=a215h.7721252.0.0.6NvLuZ&id=42810207

ym · 发表于 2017-9-3 13:03:04

你这个网页没有时间筛选的功能框，只能按顺序翻页采集，但是你可以估算一个大概的页码数，用爬虫群调度采集，控制翻页数量，最后把数据汇总到excel里筛选过滤时间。
参考教程《爬虫群调度采集》

ainka111 · 发表于 2017-9-3 13:15:12

哦那就是做不了页数不一定的

ym · 发表于 2017-9-3 13:52:34

那只能全部采集下来后，再做筛选过滤

共 3 个关于本帖的回复最后回复于 2017-9-3 13:52

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页