`
悲剧了
  • 浏览: 143814 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

Log4J实战

阅读更多
场景如下:
   由于项目要做一个统计分析与记录的功能,为了后期分析用户的一些行为,同时记录的东西要同时输出多处,并且可配置输出

想到了使用log4j,知道他是可以同时指定多个输出目的地,并且如有变更,直接修改配置文件。

关于log4j的基本概论及使用,见http://www.iteye.com/topic/378077,这个帖子讲的很细,归纳了很多东西

问题一:把登录用户每次访问的ip地址 时间等记录下来,存放到日志文件里,再存一份到数据库

第一步:记录用户访问,写一个filter如下,里面MDC是一个类似map的东西,只不过做了线程方式的封装使用,每个线程会有自己的一份map
public class UserLogFilter implements Filter {
	private Logger logger;

	@Override
	public void destroy() {
		// TODO Auto-generated method stub
		
	}

	@Override
	public void doFilter(ServletRequest request, ServletResponse response,
			FilterChain chain) throws IOException, ServletException {
		HttpServletRequest httpRequest = (HttpServletRequest) request;
		
		Object user = httpRequest.getSession().getAttribute(
				Constants.User.LOGIN_USER);
		if (user != null) {
			Integer usr_id = (Integer) ReflectionUtils.invokeGetterMethod(user, "usrId");
			String log_ip = request.getLocalAddr();
			SimpleDateFormat format=new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
			Date now=new Date(System.currentTimeMillis());
			MDC.put("usr_id", usr_id);
			MDC.put("log_title", "网站访问记录");
			MDC.put("log_type", "记录");
			MDC.put("log_title", "网站访问记录");
			MDC.put("log_datetime", format.format(now));
			MDC.put("log_ip", log_ip);
			logger.info(MDC.getContext());
		}
		 chain.doFilter(request, response); 
		
	}

	@Override
	public void init(FilterConfig filterConfig) throws ServletException {
		logger=Logger.getLogger(UserLogFilter.class);
		
	}
	
}


第二部:配置log4j.properties,输出到文件与数据库
引用

#不懂的话,参考给出的第一个连接地址一样,j2EE项目详细控制
log4j.logger.com.bhaman.yiyaosou.util.web=INFO,,project-util,project-util-db
#project-util-web file appender
log4j.appender.project-util=org.apache.log4j.DailyRollingFileAppender
log4j.appender.project-util.file=${user.home}/logs/project-util.log
log4j.appender.project-util.layout=org.apache.log4j.PatternLayout
log4j.appender.project-util.threshold=INFO
log4j.appender.project-util.layout.conversionPattern=%d [%X{usr_id}/%X{log_ip}/%X{req.id} - %X{entranceMethod} - %X{req.requestURIWithQueryString}] %-5p %c - %m%n
log4j.appender.project-util-db=com.log4j.service.DBAppender
log4j.appender.project-util-db.bufferSize=16
log4j.appender.project-util-db.threshold=INFO
#此处对应filter里面的MDC里面的键值对,你懂的
log4j.appender.project-util-db.sql=insert into user_log (usr_id,log_title,log_category,log_type,log_datetime,log_ip) VALUES ('%X{usr_id}','%X{log_title}','%X{log_type}','%X{log_title}','%X{log_datetime}','%X{log_ip}')


第三部:由于log4j里面给出的输出JDBCappender,是有问题的,首先面对业务需求,他是用JDBC,性能上问题很大,特别是现在这个应用。log4j支持自己写appender,自己写得要知道怎么写才行啊。
直接看JDBCAppender的源码


如下里面提到有做了缓冲,看源码会更清晰,两个ArrayList,一个来存东西,一个来控制清零后默认的缓冲大小不变,具体看源码关于这两个list,里面执行的sql就是配置文件里面那个,会在调用的时候set进来,
引用


  <p>Each append call adds to an <code>ArrayList</code> buffer.  When
  the buffer is filled each log event is placed in a sql statement
  (configurable) and executed.

  <b>BufferSize</b>, <b>db URL</b>, <b>User</b>, & <b>Password</b> are
  configurable options in the standard log4j ways.

  <p>The <code>setSql(String sql)</code> sets the SQL statement to be
  used for logging -- this statement is sent to a
  <code>PatternLayout</code> (either created automaticly by the
  appender or added by the user).  Therefore by default all the
  conversion patterns in <code>PatternLayout</code> can be used
  inside of the statement.  (see the test cases for examples)

那么我自己写的appender继承它就好了,直接使用它的缓冲及sql执行,那么唯一要变的就是连接了,我要从连接池里面取出,怎么做看下面注释

引用

   <li>Override <code>getConnection()</code> to pass any connection
    you want.  Typically this is used to enable application wide
    connection pooling.

     <li>Override <code>closeConnection(Connection con)</code> -- if
     you override getConnection make sure to implement
     <code>closeConnection</code> to handle the connection you
     generated.  Typically this would return the connection to the
     pool it came from.

     <li>Override <code>getLogStatement(LoggingEvent event)</code> to
     produce specialized or dynamic statements. The default uses the
     sql option value.

我不需要覆写getLogStatement,我想改变的只是连接的获取方式罢了,如上分析后,直接写我的appender,里面用到了高效的BoneCP连接池,在spring里面本来是有配置这个的,但log4j是独立于spring的,是无法获取到,只能自己再来一份
public class DBAppender extends org.apache.log4j.jdbc.JDBCAppender {
	private BoneCP connectionPool = null;
	private Connection connection = null;
	private static Logger logger=Logger.getLogger(DBAppender.class);
	public DBAppender() {
		// 设置连接池配置信息
		BoneCPConfig config = new BoneCPConfig();
		PropetiesUtil p;
	
		try {
			Properties P = new Properties();
			P.load(DBAppender.class.getClassLoader().getResourceAsStream("application.properties"));
			// 数据库的JDBC URL
			config.setJdbcUrl(P.getProperty("jdbc.url"));
			// 数据库用户名
			config.setUsername(P.getProperty("jdbc.username"));
			// 数据库用户密码
			config.setPassword(P.getProperty("jdbc.password"));
			// 数据库连接池的最小连接数
			config.setMinConnectionsPerPartition(5);
			// 数据库连接池的最大连接数
			config.setMaxConnectionsPerPartition(10);
			config.setPartitionCount(1);
			// 设置数据库连接池
			connectionPool = new BoneCP(config);
			
		
		} catch (SQLException e) {
			// TODO Auto-generated catch block
			logger.error("连接池配置加载异常",e);
		} catch (IOException e) {
			// TODO Auto-generated catch block
			logger.error("加载配置文件IO异常",e);
		}

		// fetch a connection

	}

	@Override
	protected Connection getConnection() throws SQLException {
		if(connection==null||connection.isClosed()){
			connection = connectionPool.getConnection();
		}
		return connection;
	}

	@Override
	protected void closeConnection(Connection con) {
		// TODO Auto-generated method stub
		try {
			connection.close();
			connection=null;
		} catch (SQLException e) {
			// TODO Auto-generated catch block
			logger.error("连接没正常关闭",e);
		}
	}

}


第四步:一切OK,然后就测试

日志文件:
引用

2011-07-21 11:07:01,125 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:07:01, log_title=网站访问记录, usr_id=282}
2011-07-21 11:07:03,640 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:07:03, log_title=网站访问记录, usr_id=282}
2011-07-21 11:07:04,796 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:07:04, log_title=网站访问记录, usr_id=282}
2011-07-21 11:07:08,906 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:07:08, log_title=网站访问记录, usr_id=282}
2011-07-21 11:07:09,281 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:07:09, log_title=网站访问记录, usr_id=282}
2011-07-21 11:07:14,531 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:07:14, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:10,984 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:10, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:11,796 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:11, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:22,078 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:22, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:22,875 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:22, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:28,562 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:28, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:30,250 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:30, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:31,390 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:31, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:32,750 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:32, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:33,781 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:33, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:36,156 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:36, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:41,578 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:41, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:43,156 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:43, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:44,968 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:44, log_title=网站访问记录, usr_id=282}
2011-07-21 11:11:48,765 [282/127.0.0.1/ -  - ] INFO  com.bhaman.yiyaosou.util.web.UserLogFilter - {log_type=记录, log_ip=127.0.0.1, log_datetime=2011-07-21 11:11:48, log_title=网站访问记录, usr_id=282}


数据库:














  • 大小: 143.7 KB
分享到:
评论

相关推荐

    Log4j详解与实战

    **Log4j详解与实战** Log4j是Java平台上的一个广泛应用的日志框架,由Apache软件基金会开发。它提供了一种灵活、强大的日志记录机制,使得开发者可以在应用程序中轻松地进行日志输出,便于调试、性能分析以及系统...

    log4j使用实战

    log4j.rootLogger=INFO,CONSOLE log4j.appender.CONSOLE=org.apache.log4j.ConsoleAppender INFO是日志记录的最低等级,必须写,它和比它高的等级会进入日志,如WARN、ERROR、FATAL、OFF。 关于8个日志等级,参考:...

    log4j详解与实战

    **log4j详解与实战** **一、log4j简介** Log4j 是Apache组织提供的一款开源的日志记录工具,广泛应用于Java项目中,它具有性能高效、配置灵活、支持多级别的日志记录等特性。Log4j 提供了丰富的API,方便开发者记录...

    log4j实战

    NULL 博文链接:https://synsee.iteye.com/blog/571288

    log4j教程.pdf

    Log4j是一个流行的开源日志记录工具,广泛应用于Java应用程序中。它的主要优点在于灵活性和可控性,允许开发者根据需要精确控制日志信息的输出。Log4j的主要目的是提供一个可配置的日志框架,使开发者能够调整日志的...

    Java 日志工具 Log4j 示例源代码

    三、Log4j实战——TestLog4j示例 1. **导入依赖**:首先确保项目中已经引入了Log4j的库,如果是Maven项目,可以在pom.xml中添加以下依赖: ```xml &lt;groupId&gt;log4j &lt;artifactId&gt;log4j &lt;version&gt;1.2.17 ``` 2. *...

    Log4j将System.out搞到log4j中输出四

    在《Log4j将System.out搞到log4j中输出四》这篇博文中,作者可能详细讨论了这些步骤,并可能分享了一些实战经验。通过学习这篇博文,读者可以更深入地了解如何在实际项目中实现这一转换,提升日志管理的效率。 总结...

    spring-boot-starter-log4j2

    四、Log4j2配置详解 1. 日志级别:Log4j2支持TRACE、DEBUG、INFO、WARN、ERROR、FATAL和OFF七个级别。通过配置文件,可以设置全局日志级别,也可以针对特定类或包设置不同级别。 2. Appenders:Appender是日志输出...

    log4j2_rce 项目

    《深入理解Log4j2 RCE漏洞:从概念到实战》 在信息技术领域,安全问题始终是关注的焦点。本文将深入探讨一个重要的安全漏洞——Log4j2远程代码执行(RCE)漏洞,该漏洞曾引起全球广泛关注。我们将从项目标题"Log4j2...

    Java资料 log4j详解与实战.txt

    在“log4j实战”部分,我们将通过一系列的示例(如Log4JDemo01至Log4JDemo08)来学习如何在实际项目中应用Log4j。这些示例可能涵盖了以下几个方面: 1. **基本使用**:创建Logger实例,设置日志级别,输出不同级别...

    Log4j api 下载

    **Log4j API 下载** Log4j 是一个广泛使用的Java日志框架,它为应用程序提供了灵活的日志记录功能。这个框架允许开发者控制日志信息的输出格式、输出位置以及日志级别,使得调试和故障排查更为高效。本文将详细介绍...

    Log4j 详解与实战

    ### Log4j 详解与实战 #### 一、Log4j 概述 Log4j 是 Apache 的一个开源项目,它是由 Java 编写的一款功能强大的日志记录工具。Log4j 具备灵活的日志配置能力,允许开发者在运行时动态地控制日志输出的等级、格式...

    log4j配置与实战 - 企业应用 - Java

    **log4j配置与实战 - 企业应用 - Java** 在Java开发中,日志记录是一项至关重要的任务,它有助于调试、性能分析以及故障排查。Log4j是Apache组织提供的一款强大的日志框架,广泛应用于各种Java项目。本教程将深入...

    log4j2所需要的jar包资源

    《深入理解Log4j2:核心组件与实战应用》 在Java开发中,日志记录是不可或缺的一部分,它能够帮助开发者追踪程序运行状态,定位错误和异常,优化性能。Log4j2作为Apache软件基金会的一个项目,是Log4j的升级版本,...

    log4j文档及使用

    本文将围绕“log4j文档及使用”这一主题,深入探讨其核心概念、配置方式以及实战应用。 首先,Log4j的核心理念是提供一种灵活的日志记录机制,允许开发者控制日志信息的级别(如DEBUG、INFO、WARN、ERROR和FATAL)...

    Log4J 1.2.14 jar包和详细说明

    `log4j详解与实战 - 企业应用 - Java - JavaEye论坛.mht`则是一份详细的使用指南,可能包含了配置示例和实践案例。 首先,了解Log4J的核心组件至关重要。它主要由以下部分组成: 1. **Logger**: 这是日志记录的...

Global site tag (gtag.js) - Google Analytics