GooSeeker

• 网页抓取给出了一个用PHP实现的网页抓取的实例
• 网页内容抓取类给出了用PHP实现的网页抓取的一个类Thief，实现了方法：getPageContent， getContentPiece，getContent等等
• 使用PHP简单网页抓取和内容分析展示了使用函数：get_

• 搜索引擎Nutch源代码研究之一 网页抓取(4)是一个系列中的其中一篇文章，讲解Nutch的两种Html parser工具（NekoHTML和TagSoup）实现html的提取。
• JSP实现网页抓取讲解怎样使用JSP进行页面文本抓取。

• 利用多线程实现网页内容抓取讲解了怎样使用ASP.NET 抓取网站内容，抽取网页数据，给出了一个完整的编程实例，讲解WebRequest、WebResponse、StreamReader三个类的使用
• asp.net 网页抓取图片讲解使用四个类，WebRequest、WebResponse、Stream、FileStream，抓取图片和其他二进制文件，相比之下
  • 他山之石
  • 信息提取
  • 数据抽取
  • 网页抓取
  • Fuller's blog
  • Login to post comments
  • Read more

网页抓取和数据抽取技术有很悠久的发展历史，大家通过各种技术手段实现网页内容的采集目的，而且，在每个计算技术发展阶段，大家都在尝试使用更先进的技术和编程语言实现更强大的网站内容采集工具，本文将作为一个总目录，罗列各种实现方法和实践经验，以供参考，随着时间的推移，本文内容不断补充

网页抓取/数据抽取/信息提取软件工具包MetaSeeker中的MetaStudio工具和DataScraper工具都是Mozilla Firefox的扩展（有人也叫插件，但是在Mozilla平台上插件和扩展是有区别的），所以，能够很好的利用Firefox浏览器中的javascript引擎提取AJAX网站内容，MetaSeeker工具也自然是一个客户端网站内容抓取工具，笔者也一直在关注服务器测抓取工具的发展，尤其对Python和Ruby技术比较关注。