【知网文献搜索结果采集2016】#GooSeeker数据DIY#

• 标题：【知网文献搜索结果采集2016】#GooSeeker数据DIY#
• 类别：科研学术
• 网站：知网
• 采集字段：关键词、序号、题名、作者、来源、发表时间、数据库、被引用数、下载数、详情链接
• DIY体验入口：http://www.gooseeker.com/res/dat ... %90%9C%E7%B4%A22016
• 样本网址：http://epub.cnki.net/kns/brief/r ... bsearch&db_opt=SCDB
  

【启动采集前的配置】

• 预先登陆网站：否
• 配置打码平台：否
  

【运行方法】— 详见数据DIY图文教程

• 用GS爬虫浏览器或者是安装了爬虫软件的火狐浏览器访问知网文献搜索2016页面；
• 输入关键词，若输入多个关键词，请用分号;隔开，例如：网络;架构，然后点击“获取数据”；
• 点击“启动采集”按钮，采集完成后点击“打包”按钮，就可以下载数据了。
  

【常见问题】— 欢迎跟帖留言

知网这个网站，一层层iframe套在一起，而且有会话状态管理，自己写爬虫程序是比较辛苦的，这个数据获取接口不错，完全不用技术基础，指定你要的内容，把爬虫跑起来就等着收数据了

Fuller 发表于 2016-11-29 17:33
知网这个网站，一层层iframe套在一起，而且有会话状态管理，自己写爬虫程序是比较辛苦的，这个数据获取接口 ...

这个不能抓取摘要啊？

halosir 发表于 2017-1-3 17:31
这个不能抓取摘要啊？

摘要不在这个页面 要采集摘要的话 需要将采到的详情链接当做线索添加到这个规则 才能采到摘要
http://www.gooseeker.com/res/dat ... E%E8%AF%A6%E6%83%85

scraper 发表于 2017-1-3 17:37
摘要不在这个页面 要采集摘要的话 需要将采到的详情链接当做线索添加到这个规则 才能采到摘要
http://www ...

哦，知道了，谢谢。

halosir 发表于 2017-1-3 18:31
哦，知道了，谢谢。

有的摘要没有‘’更多‘’，有的摘要有‘’更多‘’，需要分别处理吗？

halosir 发表于 2017-1-3 17:31
这个不能抓取摘要啊？

有的摘要没有‘’更多‘’，有的摘要有‘’更多‘’，需要分别处理吗？

halosir 发表于 2017-1-4 08:45
有的摘要没有‘’更多‘’，有的摘要有‘’更多‘’，需要分别处理吗？
...

直接添加去采集就可以了 程序会采全摘要内容的

小白求问 怎么采集文献摘要？

LCCDXQ 发表于 2017-9-23 22:01
小白求问 怎么采集文献摘要？

点击知网文献详情，把文献的网址添加进去，就可以采集到摘要
详情可见《知网数据采集攻略》