集搜客GooSeeker网络爬虫

标题: 可以把爬虫放到云端服务器上使用吗 [打印本页]

作者: 漫步云端65148 时间: 2017-2-21 17:02
标题: 可以把爬虫放到云端服务器上使用吗
可以把爬虫放到云端服务器上使用吗

作者: HJLing 时间: 2017-2-21 17:05
一般都是使用本地电脑采集
云服务器需要收费具体要详谈

作者: 漫步云端65148 时间: 2017-2-21 17:05

HJLing 发表于 2017-2-21 17:05
一般都是使用本地电脑采集
云服务器需要收费具体要详谈

用自己的电脑可是这样速度很受限制

作者: HJLing 时间: 2017-2-21 17:06

漫步云端65148 发表于 2017-2-21 17:05
用自己的电脑可是这样速度很受限制

使用多台电脑

作者: 漫步云端65148 时间: 2017-2-21 17:06

HJLing 发表于 2017-2-21 17:06
使用多台电脑

可我只有一台。。。。
还有其他可以提高效率的方法吗

作者: HJLing 时间: 2017-2-21 17:06

漫步云端65148 发表于 2017-2-21 17:06
可我只有一台。。。。
还有其他可以提高效率的方法吗

一台电脑开多个窗口采集

作者: 漫步云端65148 时间: 2017-2-21 17:07

HJLing 发表于 2017-2-21 17:06
一台电脑开多个窗口采集

微博博主主页的数据采集平均一个博主要采集多久？

作者: HJLing 时间: 2017-2-21 17:07

漫步云端65148 发表于 2017-2-21 17:07
微博博主主页的数据采集平均一个博主要采集多久？

不清楚
要看网速
要看博主发的微博多少

作者: 新数据sindns 时间: 2018-5-26 10:37
如果只是测试用的话，可以用自己电脑采集，如果是别的用途，最好把爬虫放在服务器上采集，因为服务器可以24小时，不断地运行，并且采集时是很占内存的，用自己电脑的话就干不了别的事了，并且最好用独立服务器，采集时不仅占内存还占带宽，如果放在vps或虚拟主机上面，可能会影响到别的机器，而独立服务器，怎么用都不会影响到别的，所以爬虫的话一般都放在独立服务器上，郑州新数据回答q228109315

欢迎光临集搜客GooSeeker网络爬虫 (http://www.gooseeker.com/doc/)