网络蜘蛛Larbin的设计和优化.kdh

网络蜘蛛Larbin的设计和优化，Larbin是利用c++开发的一种网络爬 虫,由法国人Sebastien Ailleret发布,因此 它是开源的(基于GPL标准)。Larbin最初 开发出来是为了XYLEME工程。Larbin的 目的是在网络上抓取xml页面,然后装入 面向xml搜索引擎的数据库。由于这些原 因,Larbin功能非常强大,而且也非常好配 置。