查阅了网站关于Ajax的文档都试了下 都不能获取到Node 这个模块应该是Json加载进来的数据 请问该如何获取到?
MetaSeeker不关心是否用Json加载。如果点击浏览器上某个区域显示Cannot find the node,那么可以用MetaStudio的菜单“文件”-〉“刷新DOM”后再点击,就能看到Json或者其它技术加载的节点了
shu.taobao.com 这里面有个关键词流量模块 是通过JSON 加载进来 但是刷新DOM 也不能获取NODE
能否举个例子,例如,是这个网页吗:http://shu.taobao.com/trendindex?query=%E4%B8%89%E6%98%9Fi9300%E6%89%8B%E6%9C%BA%E5%A3%B3
需要抓取什么数据?
发现最新版BUG 1个~内容映射某个节点下面有10个节点的话 再添加 前面的10个都会采集一样的内容
哪个网页?要采集什么内容?
shu.taobao.com 里面的地域细分 模块 我创建了20个内容节点(包容一个“省份”的父节点之中 而“省份”节点是地域细分的子节点)。我测试了下 加满20个 软件只会采集第一个节点 于是我一个个删除 最后测试出来如果一个节点下面有11个节点(其他情况未测试) 抓取到的都是第一个节点的内容。
不用创建20个信息属性,这样做太不灵活而工作量大,MetaSeeker支持树状整理箱结构,参看《抓取开心网粉丝信息》,创建一个子树,进行样例复制品映射,无论20个还是30个省份,用一个规则就能抓下来。
另外,请注意,免费的在线版不能抓取鼠标悬浮显示的内容,如果要抓取鼠标悬浮在地图上的地域细分圆圈上才显示的内容,必须采用企业定制版。
这个需要企业版才能抓取吗?还是再企业版基于上定制?
在线版不提供定制,只有在企业版基础上定制开发
企业版是怎么收费的?企业版的分布式抓取 客户端是否需要登录帐号?也是FRIRFOX插件形式吗
企业版是怎么收费的???
如果不想要Firefox插件方式,也有独立程序方式,不过界面要难看得多
企业版价格昨天已经发到了您的email,没有收到吗?
http://www.gooseeker.com/cn/node/document/metaseeker/cookbookv4/simulate... 像这篇文章模拟点击 如何根据搜索页面 进来再采集这些信息呢?以达到搜索关键词 批量采集这些产品的信息。在网站上没找到文档。。
搜索页面是什么?在淘宝上搜索产品显示出来的产品列表?
就是 淘宝搜的页面http://s.taobao.com/search?initiative_id=staobaoz_20130820&jc=1&q=%C5%AE%D7%B0&stats_click=search_radio_all%3A1 这种 软件每个产品的信息(点开产品进去抓描述 评价) 可以一页页抓下去。 不知道如何实现 类似火车头那种普通采集器的 采集文章的模式。 看文档 采集评价 涉及到 二级嵌套 如果 像采新闻那样 采集 要怎么做?
MetaSeeker有层级抓取,参看《卓越网商品数据分级抓取》,嵌套层数不限,每层之间抓取互不干扰,可以各自分别或者并行抓取,而且是通用的模式,无论采集新闻、电商、SNS、微博等等都一样,都像普通网络爬虫那样一层层扩展抓取下去。火车头采集器没有用过,不知道文章采集模式有什么特点?
像我抓取这种页面shu.taobao.com 没有翻页 要自己提供URL库或者软件输入关键词 数据量有几百万。 请问我们这个软件能否做到 根据URL库 队列采集?
企业版有很强的线索管理能力,既可以用官方配套的线索管理器ClueManager,也可以自己写程序通过MetaSeeker对外的系统集成接口对线索进行管理。
除了根据url规律用程序生成大量抓取线索以外,在情报监测、舆情监控、商品比价方面用的比较多的特性是: 1,确保线索不遗漏。MetaSeeker记录每个线索的运行状态,如果网络失败、抓取规则不适应等故障造成的失败可以及时上报,既可以自动重新调度抓取,又可以通知管理员进行干预 2,按照既定时间安排调度抓取线索,比如,在特定时间段抓取商品价格,或者多源同步抓取,例如,从不同网站,在同一个时刻抓取同一个航班的价格,这就是秒级的定时刻抓取。
ClueManager 还有这种东西吗 我看软件和服务的栏目里没提到这个
MetaSeeker企业版没有在网络上公布,ClueManager是跟它配套的关系最紧密的软件。除此以外,还有很多应用层软件,既有GooSeeker团队发布的,也有第三方合作方发布的软件,利用MetaSeeker的网站采集功能,集成各种信息处理解决方案。
企业版是怎么收费的?
请email联系
MetaSeeker不管是否用Json
MetaSeeker不关心是否用Json加载。如果点击浏览器上某个区域显示Cannot find the node,那么可以用MetaStudio的菜单“文件”-〉“刷新DOM”后再点击,就能看到Json或者其它技术加载的节点了
shu.taobao.com
shu.taobao.com 这里面有个关键词流量模块 是通过JSON 加载进来 但是刷新DOM 也不能获取NODE
淘宝指数的哪个网页
能否举个例子,例如,是这个网页吗:http://shu.taobao.com/trendindex?query=%E4%B8%89%E6%98%9Fi9300%E6%89%8B%E6%9C%BA%E5%A3%B3
需要抓取什么数据?
发现最新版BUG
发现最新版BUG 1个~内容映射某个节点下面有10个节点的话 再添加 前面的10个都会采集一样的内容
没有看懂
哪个网页?要采集什么内容?
shu.taobao.com
shu.taobao.com 里面的地域细分 模块 我创建了20个内容节点(包容一个“省份”的父节点之中 而“省份”节点是地域细分的子节点)。我测试了下 加满20个 软件只会采集第一个节点 于是我一个个删除 最后测试出来如果一个节点下面有11个节点(其他情况未测试) 抓取到的都是第一个节点的内容。
用样例复制品规则抓多个省份
不用创建20个信息属性,这样做太不灵活而工作量大,MetaSeeker支持树状整理箱结构,参看《抓取开心网粉丝信息》,创建一个子树,进行样例复制品映射,无论20个还是30个省份,用一个规则就能抓下来。
另外,请注意,免费的在线版不能抓取鼠标悬浮显示的内容,如果要抓取鼠标悬浮在地图上的地域细分圆圈上才显示的内容,必须采用企业定制版。
这个需要企业版才能
这个需要企业版才能抓取吗?还是再企业版基于上定制?
在企业版基础上进行定制
在线版不提供定制,只有在企业版基础上定制开发
企业版是怎么收费的
企业版是怎么收费的?企业版的分布式抓取 客户端是否需要登录帐号?也是FRIRFOX插件形式吗
企业版价格
企业版是怎么收费的???
企业版架构相同
如果不想要Firefox插件方式,也有独立程序方式,不过界面要难看得多
企业版价格
企业版价格昨天已经发到了您的email,没有收到吗?
另外在问下
http://www.gooseeker.com/cn/node/document/metaseeker/cookbookv4/simulate... 像这篇文章模拟点击 如何根据搜索页面 进来再采集这些信息呢?以达到搜索关键词 批量采集这些产品的信息。在网站上没找到文档。。
搜索页面是什么?
搜索页面是什么?在淘宝上搜索产品显示出来的产品列表?
就是
就是 淘宝搜的页面http://s.taobao.com/search?initiative_id=staobaoz_20130820&jc=1&q=%C5%AE%D7%B0&stats_click=search_radio_all%3A1 这种 软件每个产品的信息(点开产品进去抓描述 评价) 可以一页页抓下去。 不知道如何实现 类似火车头那种普通采集器的 采集文章的模式。 看文档 采集评价 涉及到 二级嵌套 如果 像采新闻那样 采集 要怎么做?
层级抓取是否能够符合要求
MetaSeeker有层级抓取,参看《卓越网商品数据分级抓取》,嵌套层数不限,每层之间抓取互不干扰,可以各自分别或者并行抓取,而且是通用的模式,无论采集新闻、电商、SNS、微博等等都一样,都像普通网络爬虫那样一层层扩展抓取下去。火车头采集器没有用过,不知道文章采集模式有什么特点?
像我抓取这种页面shu.t
像我抓取这种页面shu.taobao.com 没有翻页 要自己提供URL库或者软件输入关键词 数据量有几百万。 请问我们这个软件能否做到 根据URL库 队列采集?
企业版有很强的线索管理能力
企业版有很强的线索管理能力,既可以用官方配套的线索管理器ClueManager,也可以自己写程序通过MetaSeeker对外的系统集成接口对线索进行管理。
除了根据url规律用程序生成大量抓取线索以外,在情报监测、舆情监控、商品比价方面用的比较多的特性是:
1,确保线索不遗漏。MetaSeeker记录每个线索的运行状态,如果网络失败、抓取规则不适应等故障造成的失败可以及时上报,既可以自动重新调度抓取,又可以通知管理员进行干预
2,按照既定时间安排调度抓取线索,比如,在特定时间段抓取商品价格,或者多源同步抓取,例如,从不同网站,在同一个时刻抓取同一个航班的价格,这就是秒级的定时刻抓取。
ClueManager
ClueManager 还有这种东西吗 我看软件和服务的栏目里没提到这个
还有很多没有公布的软件
MetaSeeker企业版没有在网络上公布,ClueManager是跟它配套的关系最紧密的软件。除此以外,还有很多应用层软件,既有GooSeeker团队发布的,也有第三方合作方发布的软件,利用MetaSeeker的网站采集功能,集成各种信息处理解决方案。
企业版是怎么收费的
企业版是怎么收费的?
企业版价格不公开
请email联系