【集微库】微博采集工具箱使用常见问题

yusir0710 发表于 2016-12-17 16:38
<fullpath>字段是转发前的链接，就是输入的被转发链接。应该是转发后的链接才有意义。 ...

你是要采集微博转发？  这里我说的“转发”不是微博转发，前面我用词不准，fullpath存储的是网址重定向前的网址，realpath是重定向后的网址。你可以用百度搜索做实验。百度搜索列表中显示的每个搜索结果的网址都是baidu域名的，点击它的时候，会发生跳转，跳转到真实网址。这就发生了一次网址重定向。GooSeeker爬虫会把定向前和定向后的网址都记录下来

想问一下，是不是一定要付费才能下载打包的数据呀，跑完了没法下载……

249305365 发表于 2016-12-18 14:08
想问一下，是不是一定要付费才能下载打包的数据呀，跑完了没法下载……

会根据数据量扣积分。没法下载的现象是什么？

微博博主的关注只能爬前5页的

wutao2014 发表于 2016-12-18 15:40
微博博主的关注只能爬前5页的

是的，因为微博网站做了限定，爬虫无法突破网站做的限定

采集完无法打包怎么办？？有办法解决吗？

jsk1327440 发表于 2017-1-10 11:19
采集完无法打包怎么办？？有办法解决吗？

采集完后，打包状态是绿色的就是可点击进行打包下载的，打包后在点击“数据下载”就可以将数据下载到本地。

xandy 发表于 2017-1-10 11:22
采集完后，打包状态是绿色的就是可点击进行打包下载的，打包后在点击“数据下载”就可以将数据下载到本地 ...

xandy 发表于 2017-1-10 11:22
采集完后，打包状态是绿色的就是可点击进行打包下载的，打包后在点击“数据下载”就可以将数据下载到本地 ...

能不能帮我解决一下这个问题啊！爬了半天不能打包的心情是很难过的！

jsk1327440 发表于 2017-1-10 13:48
能不能帮我解决一下这个问题啊！爬了半天不能打包的心情是很难过的！

稍等， 技术人员给你查一下