最新文章列表

我的ELK搭建笔记(Windows 日志收集)

目录预览 1、需求说明 2、Winlogbeat工具介绍 3、安装部署 3.1 下载 3.2 配置 3.3 安装 3.4 启动 4、验证 5、性能 6、维护 7、Troubleshooting     一、需求说明 收集和存储Windows AD服务器关键系统日志,应对安全审计要求。基于Windows账户登录日志进行安全事件分析。     二、Winlogbe ...
lwg2001s 评论(0) 有359人浏览 2019-07-03 15:41

如何收集项目日志统一发送到kafka中?

上一篇(http://qindongliang.iteye.com/blog/2354381 )写了收集sparkstreaming的日志进入kafka便于后续收集到es中快速统计分析,今天就再写一篇如何在普通应用程序实时收集日志,上一篇写的毕竟是分布式环境下的操作,有一定的特殊性,如MapReduce,Spark运行的日志和普通项目的日志是不太一样的。 所谓的普通程序就是web项目的或者非we ...
qindongliang1922 评论(0) 有2797人浏览 2017-02-07 19:07

Flume(日志收集系统)的部署与测试

Flume的部署与测试 Flume是一个分布式、高可靠、高可用的日志收集系统。能够有效的收集、聚合、移动大量的日志。把各种类型的数据源采集汇总到 ...
wosyingjun 评论(0) 有5225人浏览 2016-08-05 15:09

征服flume之二——flume-NG安装

1、将编译后的 apache-flume-1.7.0-SNAPSHOT-bin.tar.gz 包上传至linux服务器 2、修改 flume-env.sh 配置文件,主要是添加java环境 # Licensed to the Apache Software Foundation (A ...
cpjsjxy 评论(1) 有1365人浏览 2016-02-24 11:40

Fluentd + Sinatra日志文件收集实战

  Fluentd + Sinatra日志文件收集实战安装fluentd有很多方法,非常简单,请自行查询首先创建sinatra应用,我们要做的就是通过fluentd将日志写入到文件,并进行切割:内容如下require 'sinatra'require 'fluent-logger'get '/' doFluent::Logger::FluentLogger.open(nil, :host=&g ...
michael_roshen 评论(0) 有827人浏览 2015-06-12 15:16

Fluentd+Hadoop结合进行日志收集、分析

  Fluentd是一个实时日志收集系统,它把日志作为JSON stream,可以同时从多台server上收集几百G的日志。fluentd易于安装,有灵活的插件机制和缓冲,支持日志转发。它的特点在于各部分均是可定制化的,可以通过简单的配置,将日志收集到不同的地方。Hadoop是一个能够对大量数据进行分布式处理的软件框架, 可以对日志进行数据处理。Hadoop伪分布式安装:http://www. ...
michael_roshen 评论(0) 有6255人浏览 2015-05-18 17:04

scribe安装记录

折腾了快2天,终于装上了,内流满面 scribe安装较复杂,官网无详细安装手册,所以自己装成功了还是记录下吧~ 1.系统版本:基于CentOS-6.3-x86_64 2.gcc    安装版本为4.4.6 官方要求>=3.3.5,但低于4会有各种问题     g++ 如果g++的结果是no input files表示已安装,不是则安装:     yum -y install gcc+ ...
lakeblur 评论(0) 有1733人浏览 2012-09-11 17:21

Flume源代码解读三

  [ xcly原创于iteye,见http://xcly.iteye.com ]    本节重点介绍 agentSink中ENDTOEND的实现。     每一个节点通过source获得事件Event,然后由sink处理,sink同source一样,flume提供了多种实现,sink的生成同Flume源代码解读一中介绍的实现方式类似,由SinkFactory工厂方法实现,跟SourceFa ...
xcly 评论(0) 有3194人浏览 2012-03-10 20:40

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics