为什么采集状态会停止？

吴吴

课程论文需要下载数据，为什么总是会停止呢，是我操作有误嘛？

Fuller · 发表于 2022-1-6 10:49:49

如果总是失败，那么，爬虫正在采集的时候，观察一下爬虫浏览器加载的网页内容是否正常，看看有没有出现要求登录，或者说网页找不到，或者说采集过快不准采集了。我估计浏览器中显示了类似的提示信息

吴吴 · 发表于 2022-1-6 11:05:17

Fuller 发表于 2022-1-6 10:49
如果总是失败，那么，爬虫正在采集的时候，观察一下爬虫浏览器加载的网页内容是否正常，看看有没有出现要求 ...

没有欸，好像是这个数据库需要登录才可以采集

Fuller · 发表于 2022-1-6 14:50:38

吴吴发表于 2022-1-6 11:05
没有欸，好像是这个数据库需要登录才可以采集

需要登录的，你得有账号和密码才行。在运行爬虫任务之前，在爬虫浏览器中预先登录这个网站

共 3 个关于本帖的回复最后回复于 2022-1-6 14:50

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页