采集的网站需要登录能设置自动登录吗?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-11-1 17:54

沙发
yangwenge 金牌会员 发表于 2017-11-1 17:54:20 | 只看该作者
本帖最后由 yangwenge 于 2017-11-1 17:58 编辑

1,可以在采集之前先在GS浏览器中进入对应的网站,登录账号后再进行采集。
2,如果第1种方法不行,就需要编写crontab指令进行自动登录。
crontab指令详细可以参考《抓取网页时自动登录和自动输入验证码》《自动登录抓取功能使用方法》
将对应的信息换成自己的信息,涉及到验证码的则需要旗舰版才支持


举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-27 08:52