软件可以提取一个目录下的所有内容吗

gooseeker_info

其他的目录不采集

Fuller · 发表于 2016-11-11 10:20:12

用样式线索可以解决这个问题。这个目录下的网址是怎么得到的？

gooseeker_info · 发表于 2016-11-11 10:21:30

我提供这个目录下的一个网址，是不是可以把这个目录下的所有内容都爬取了啊

是动态的可以采集吗？动态网址

Fuller · 发表于 2016-11-11 10:23:36

网络爬虫首先要找到网址，才能去这个网址爬。找的时候可以把某个目录下的网址过滤出来。但是前提一定要在某个地方能找到你想爬的网址

爬虫是一层层爬的。逐层深入。如果你能直接构造出来网址，也行，直接导入。

你只提供一个目录网址？现在很多网站不允许访问目录，如果能访问就可以

gooseeker_info · 发表于 2016-11-11 10:24:09

内容都可以访问，只是都是动态网址

Fuller · 发表于 2016-11-11 10:24:45

动态没有问题

共 5 个关于本帖的回复最后回复于 2016-11-11 10:24

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页