最新文章列表

nutch inject 详解

nutch的inject 有二个job 第一个job 如下图 map :InjectMapper 功能如下   1  url是否有tab分割的k-v 对如果有记录下来, 2  如果配置了过滤使用 URLNormalizers和 URLFilters 对url 进行格式化和过滤, 3  如果过滤的url 不为空则创建CrawlDatum对象,状态 STATUS_INJECTED,设置fet ...
chengqianl 评论(0) 有1822人浏览 2012-07-16 14:27

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics