百e购开发日记（二）

百 e 购开发日记（二）

Logging – 系统日记

查看上一回：部署

Logging, 如果你使用过 java 世界里面的 Log4j ， 那么到 Python 里的就不会太陌生，打日记的一般原则是：按照业务逻辑分模块打 Logging, 不要一股脑的把所有的日记都打到一块； 不要打无意义的日记，当处理的数据量增大的时候可能带来性能问题；按时自动的回滚日记，很多系统往往是 7x24 小时，长年累月的往一个文件里面输入日记会爆掉，在做技术支持的时候往往让你恼火，一般 logging 保存个 5~7 天左右就可以删除，防止磁盘空间不够，小插曲，银行系统里面的文件数据都要每天备份而且要保存 7 年之久。回正传，现在的百 e 购 , 有两个级别的日记输出，一个是 Apache 服务器的日记输出，一个是系统正常运行时候的日记输出。

Apache 的使用他自己的日记配置方式， 在你的节点里面添加如下配置：

 

ErrorLog /{{YOUR_DIR}}/{{NAME}}.error-log

CustomLog /{{YOUR_DIR}} /{{NAME}}.access-log combined 

 

 

Python 的自己一套 Logging 配置有点诡异。有三个基本的配置要点： loggers, handlers, formatters; 名字直观， loggers 是程序里面要引用的； handlers 是如何处理的比如是写到文件中， 还是发送到 Email 里面； formatters 就是输出日记的格式了。 配置文件的一般规范是，首先定义好全文要使用的 logger, handler 和 formatter:

 

[loggers]

keys: root,one

[handlers]

keys: console,syslog ,one

[formatters]

keys: detailed,simple 

 

如上面所示， 标示全文可以引用两中类型的日记， 一个是 root, 一个是 one.

下面就是配置日记的格式：

 

[formatter_simple]

format: %(name)s:%(levelname )s:  %(message)s 

 

 

[formatter_simple]

format: %(name)s:%(levelname )s:  %(message)s 

 

 

具体的配置可以参照官方的文档。

比较重要的就是 handler 的配置， 他决定你的日记到底是如何处理的。

首先最基本的就是，直接输出到控制台的：

[handler_console]

class: StreamHandler

args : []

formatter: simple 

 

这个是不推荐使用，输出到控制台没有太大的意义。 一般我是推荐使用

TimedRotatingFileHandler 顾名思义就是定时的自动备份， 还有一个就是 RotatingFileHandler ， 下面就以 TimedRotatingFileHandler 为例：

 

 

[handler_syslog]

class: handlers.TimedRotatingFileHandler

args: ["/{{YOUR_DIR}}/root.log","midnight",5] 

 

 

上面的配置的意思就是，每天在晚上自动备份日记，日记最多保存五天， 比如今天是 4/15 那么昨天的日记会备份到： root.log.2010-04-15.

 

而我们在程序中真正要使用的还需要进一步配置：

 

[logger_root]

level: WARNING

handlers: syslog 

 

 

这个配置表示程序里的 root 日记的级别是 WARNING, 他的处理方式是 syslog 。

下面的工作就是在 Django 初始化的时候将我们的配置设定好（ settings.py ）：

import logging.config

logging.config.fileConfig(“{{YOUR_DIR}}/logging.conf”) 

 

 

使用的时候：

import logging

logger.getLogger(“root”)

logger.error(‘------------------’) 

 

 

下一讲将是如何定义系统的 Job, 很多的系统不是完全实时的， 在 J2EE 平台下我们可能会依赖于 JMS  实现系统的异步交互，还有更普遍的是通过定时启动批量处理 JOB ， 甚至有的是通过定时的 FTP 文件进行不同系统间的交流，反正条条达到通罗马。