网址:http://beijing.anjuke.com/sale/chaoyang/a13-b15-m17-p2/
问题:该网站只能显示前100页的内容。因此,理想的解决办法是,找到每一个限制条件的对应代码,然后构造出类似“chaoyang/a13-b15-m17-p2/”的网址后缀,这样就可以把结果控制在100页以内,以便全部抓取。但好像在线版的每一个Theme,只能对应一个网址,所以不能实现这个思路。
请教:有没有变通的办法,可以实现上述想法?或者可以采用其他什么办法?
网址:http://beijing.anjuke.com/sale/chaoyang/a13-b15-m17-p2/
问题:该网站只能显示前100页的内容。因此,理想的解决办法是,找到每一个限制条件的对应代码,然后构造出类似“chaoyang/a13-b15-m17-p2/”的网址后缀,这样就可以把结果控制在100页以内,以便全部抓取。但好像在线版的每一个Theme,只能对应一个网址,所以不能实现这个思路。
请教:有没有变通的办法,可以实现上述想法?或者可以采用其他什么办法?