高效开源网络蜘蛛larbin

keminar 发表于 2010-02-08 00:31:56

larbin 是一种开源的网络爬虫/网络蜘蛛，由法国的年轻人 Sbastien Ailleret独立开发。larbin目的是能够跟踪页面的url进行扩展的抓取，最后为搜索引擎提供广泛的数据来源。

» 阅读全文

larbin-2.6.3.tar.gz (129.88 K, 下载次数:71, 上传时间:2010-02-08 00:31)

Tags: larbin

发表在: 开源软件 2 条评论 阅读 1530 次
回顶部