目录
- 快捷采集
- 初级教程(新版)
- 初级教程(老版)
- 数据转Excel处理
- 爬虫规则管理
- 高级教程(新版)
- 高级教程(老版)
- 用爬虫群分布式高效采集
- 爬虫关键知识拓展
- 问题集锦
- 实战演练案例
- 爬虫安装说明
- 关于集搜客
集搜客交流群
2000人群:点击加入
详情页面的列表
我想把详情页面列表的数据和详情页面数据保存在同一个xml中,这个得怎么弄???
采集列表信息+详情页的问题,能同时采集2个页面吗
[i=s] 本帖最后由 MebiuW 于 2016-11-3 17:51 编辑 [/i] A页面是列表,列表包含姓名信息,点击“查看详情”会弹出页面显示更多信息,但是这个弹出来的页面是没有姓名的,所以我要采集 列表的姓名+详情页的更多信息如地址等,这样子怎么采集?不知道2个页面是否可以同时采集?
【拍拍贷借款列表详情采集】#GooSeeker数据DIY#
xandy 于 2017-1-12 16:21 编辑 [/i] [list] [*][b]标题:[/b]【拍拍贷借款列表详情采集:[/b]基本信息(标的信息:产品名称、借款人、借款金额、年利率、期限、还款方式、进度、投标人数、结束时间、借款人用户详情链接投标记录(投标人、标的利率、标的期限、有效投标金额、投标时间、投标人用户详情链接)。%E5%88%97%E8%A1%A8%E8%AF%A6%E6%83%85%E9%87%87%E9%9B%86]拍拍贷借款列表详情采集[/url]页面; [*]输入1条或多条同种网页结构的网址,然后点击“获取数据”; [*]点击“启动采集”按钮,采集完成后点击
采集完列表页之后,采集详情也有很多失败,这个是为什么?
网页页面结构都相同,但是采集的时候只成功了少部分。
如何将列表页抓取的时间,合并到详情页的表里?
需要详情页的的数据,但是少了时间,如何把列表的时间对应到详情表里。
列表页采集下来的详情页不能适用同一条规则怎么处理?
列表页采集下来的详情页不能适用同一条规则怎么处理?
网站列表没有具体网址,这种网页怎么采集详情页面的信息?
网站列表没有具体网址,这种网页怎么采集详情页面的信息?[attach]11471[/attach]
求助:关于采集单网页列表详细信息
大家好,我是新手,问一个可能认为比较菜的问题,是这样,我设置好了规则,采集单网页列表的详细信息,但许多详细信息打开后的网页是错误的(404),每当采集到这种页面时都会等很长时间,想问大家,有没有办法设置,只要是这种错误的页面,采集不到,直接掠过的办法啊
采集天猫详情页
你好,[color=rgb(51, 51, 51)][size=15px]主题:[b]天猫国际A2奶粉0523-商品详情[/b],促销价/价格/月销量/库存 只能采集完成后,只有一部分数据可以采集得到,之前把店铺(旺旺ID也添加到列表),抓取数据的时候总是显示超时
通过列表链接去抓详情,怎么做?
有个列表,含有20条信息,每个都是超链接,能点击进入详细页,怎样循环抓所有信息,并且挨个点进去抓详情,然后回退出来再翻页抓下一个列表
‘淘宝商品搜索列表’ 快捷采集到的‘商品详情链接’添加到'淘宝商品详情采集'很多网址无效?
‘淘宝商品搜索列表’ 快捷采集到的‘商品详情链接’添加到'淘宝商品详情采集'很多网址无效,是怎么回事?
采集商品详情图片列表,结果就第一张图片采集到了,其余都_bitmap_failed
任务名:阿里商品详情采集 规则编号:规则_1 里面有 所有详情图片 这个采集项,选中了整个详情区域,希望采集下来所有详情图片怎么样能成功采集到所有图片?
【拍拍贷用户详情_借款列表】#GooSeeker数据DIY#
xandy 于 2017-1-12 16:21 编辑 [/i] [list] [*][b]标题:[/b]【拍拍贷用户详情][b]采集字段:[/b]用户信息(用户名、用户借入信用、用户借出信用、性别、年龄、目前身份);借款列表(借款名称、借款金额E8%AF%A6%E6%83%85_%E5%80%9F%E6%AC%BE%E5%88%97%E8%A1%A8]拍拍贷用户详情_借款列表[/url]页面; [*]输入1条或多条同种网页结构的网址,然后点击“获取数据”; [*]点击“启动采集”按钮,采集完成后点击“打包”按钮,就可以下载数据了。
怎么爬天眼查高管信息列表和详情?
需要抓取天眼查上的《高管信息》这个表格,同时点击《详情》,抓取《高管信息》的详情。共1000个企业。多谢!
能否出一期怎么抓取列表页再加上抓取详情页的教程?
目前对于抓取列表页的里的标题和链接比较熟悉了。但是仍然对怎么从生成xml文件里导出URL并且抓取详情页里的信息(文字,图片,视频) 仍然不是很清楚。比如抓取京东或者豆瓣或者安居客的详情页内容。