larbin的使用

一 编译

1 sudo apt-get install xutils-dev 

2 注释掉adns下internal.h中第568—571行代码

3 到/usr/include/c++/下CP一份iostream文件到larbin的src目录下。并将其的名改为iostream.h.打开此文件添加一句

    using namespace std;

4 ./configure && make

二 配置

修改larbin.conf的 StartUrl

修改options.h的4中输出

DEFAULT_OUTPUT : This module mainly does nothing, except statistics.

SIMPLE_SAVE : This module saves pages on disk. It stores 2000 files per directory (with an index).

MIRROR_SAVE : This module saves pages on disk with the hierarchy of the site they come from. It uses one directory per site.

STATS_OUTPUT : This modules makes some stats on the pages. In order to see the results, see http://localhost:8081/output.html.

将SIMPLE_SAVE和STATS_OUTPUT选项打开

三 运行

./larbin

larbin在当前目录下创建save文件夹，用来存储网页

评论

1 楼 pzy20062141 2011-07-17  

请教你一个问题，不知道你的option.h中的#define LINKS_INFO有没有启用，这时larbin/src/fetch/file.cc中的第105行就会在make时报错error: extra qualification ‘html::’ on member ‘getLinks’能帮忙解决下吗，谢了！