什么情况下要添加线索? 1)提示没有等待抓取的线索时,就要添加新的线索网址或者激活线索,可参考DS打数机里的管理线索问题 2)同类网址可以用一个规则来抓数据,例如,做了一个微博搜索关键词的规则,可以添加搜索各种关键词的微博网址来采集数据 添加线索操作: 1)在打数机窗口,右击主题名,弹出菜单中选择“管理线索”->“添加” 2)逐条输入新的网址并保存,也可以批量拷贝网址进行添加。 图1 添加待抓网址
注意:做好规则后会自动把样本网页作为一条线索,但爬完后就要添加新的线索。 |
BlueSky1992: 请问,一个规则,如何同时抓取不同线索的信息并且分别把不同线索的抓取内容分别保存在不同的文件夹中呢?是用集搜功能吗?还是用别的什么方法? ...
elegantcoin: 如果网址过长被截断了怎么办,好像识别不了?