- 浏览: 2651977 次
- 来自: 杭州
文章分类
- 全部博客 (1188)
- webwork (4)
- 网摘 (18)
- java (103)
- hibernate (1)
- Linux (85)
- 职业发展 (1)
- activeMQ (2)
- netty (14)
- svn (1)
- webx3 (12)
- mysql (81)
- css (1)
- HTML (6)
- apache (3)
- 测试 (2)
- javascript (1)
- 储存 (1)
- jvm (5)
- code (13)
- 多线程 (12)
- Spring (18)
- webxs (2)
- python (119)
- duitang (0)
- mongo (3)
- nosql (4)
- tomcat (4)
- memcached (20)
- 算法 (28)
- django (28)
- shell (1)
- 工作总结 (5)
- solr (42)
- beansdb (6)
- nginx (3)
- 性能 (30)
- 数据推荐 (1)
- maven (8)
- tonado (1)
- uwsgi (5)
- hessian (4)
- ibatis (3)
- Security (2)
- HTPP (1)
- gevent (6)
- 读书笔记 (1)
- Maxent (2)
- mogo (0)
- thread (3)
- 架构 (5)
- NIO (5)
- 正则 (1)
- lucene (5)
- feed (4)
- redis (17)
- TCP (6)
- test (0)
- python,code (1)
- PIL (3)
- guava (2)
- jython (4)
- httpclient (2)
- cache (3)
- signal (1)
- dubbo (7)
- HTTP (4)
- json (3)
- java socket (1)
- io (2)
- socket (22)
- hash (2)
- Cassandra (1)
- 分布式文件系统 (5)
- Dynamo (2)
- gc (8)
- scp (1)
- rsync (1)
- mecached (0)
- mongoDB (29)
- Thrift (1)
- scribe (2)
- 服务化 (3)
- 问题 (83)
- mat (1)
- classloader (2)
- javaBean (1)
- 文档集合 (27)
- 消息队列 (3)
- nginx,文档集合 (1)
- dboss (12)
- libevent (1)
- 读书 (0)
- 数学 (3)
- 流程 (0)
- HBase (34)
- 自动化测试 (1)
- ubuntu (2)
- 并发 (1)
- sping (1)
- 图形 (1)
- freemarker (1)
- jdbc (3)
- dbcp (0)
- sharding (1)
- 性能测试 (1)
- 设计模式 (2)
- unicode (1)
- OceanBase (3)
- jmagick (1)
- gunicorn (1)
- url (1)
- form (1)
- 安全 (2)
- nlp (8)
- libmemcached (1)
- 规则引擎 (1)
- awk (2)
- 服务器 (1)
- snmpd (1)
- btrace (1)
- 代码 (1)
- cygwin (1)
- mahout (3)
- 电子书 (1)
- 机器学习 (5)
- 数据挖掘 (1)
- nltk (6)
- pool (1)
- log4j (2)
- 总结 (11)
- c++ (1)
- java源代码 (1)
- ocr (1)
- 基础算法 (3)
- SA (1)
- 笔记 (1)
- ml (4)
- zokeeper (0)
- jms (1)
- zookeeper (5)
- zkclient (1)
- hadoop (13)
- mq (2)
- git (9)
- 问题,io (1)
- storm (11)
- zk (1)
- 性能优化 (2)
- example (1)
- tmux (1)
- 环境 (2)
- kyro (1)
- 日志系统 (3)
- hdfs (2)
- python_socket (2)
- date (2)
- elasticsearch (1)
- jetty (1)
- 树 (1)
- 汽车 (1)
- mdrill (1)
- 车 (1)
- 日志 (1)
- web (1)
- 编译原理 (1)
- 信息检索 (1)
- 性能,linux (1)
- spam (1)
- 序列化 (1)
- fabric (2)
- guice (1)
- disruptor (1)
- executor (1)
- logback (2)
- 开源 (1)
- 设计 (1)
- 监控 (3)
- english (1)
- 问题记录 (1)
- Bitmap (1)
- 云计算 (1)
- 问题排查 (1)
- highchat (1)
- mac (3)
- docker (1)
- jdk (1)
- 表达式 (1)
- 网络 (1)
- 时间管理 (1)
- 时间序列 (1)
- OLAP (1)
- Big Table (0)
- sql (1)
- kafka (1)
- md5 (1)
- springboot (1)
- spring security (1)
- Spring Boot (3)
- mybatis (1)
- java8 (1)
- 分布式事务 (1)
- 限流 (1)
- Shadowsocks (0)
- 2018 (1)
- 服务治理 (1)
- 设计原则 (1)
- log (0)
- perftools (1)
最新评论
-
siphlina:
课程——基于Python数据分析与机器学习案例实战教程分享网盘 ...
Python机器学习库 -
san_yun:
leibnitz 写道hi,我想知道,无论在92还是94版本, ...
hbase的行锁与多版本并发控制(MVCC) -
leibnitz:
hi,我想知道,无论在92还是94版本,更新时(如Puts)都 ...
hbase的行锁与多版本并发控制(MVCC) -
107x:
不错,谢谢!
Latent Semantic Analysis(LSA/ LSI)算法简介 -
107x:
不错,谢谢!
Python机器学习库
原作者:陈明
很多环境里的apache配置文件 httpd.conf中,都有这么一行 CustomLog "|/usr/local/sbin/cronolog ${intl_aisn_out}/logs/cookie_logs/%d/cookie_log" cookie_log env=!nolog
也许有些人还不清楚这个是干什么的,其实这是利用Cronolog 这个日志轮循工具,将我们的cookie_log 进行按日期的轮循分割。也就是说:一天记录一个cookie_log 文件。
Cronolog 其实还有很多特性,它还可以按月、甚至按小时的日志轮循记录,也可以配置每个文件的最大值,当达到这个最大值,自动记录到下一个日志文件里。
我们目前线上的Cronolog 版本是1.6.2。 但此版本有一个弊端:当日志文件的大小到2G (2150726147字节) 的时候,Cronolog 的进程就变成了僵尸进程,即日志再也记不进去了。Cronolog 的1.7版本解决了这个问题
目前国际站的aisn、searchweb的cookie_log即将达到这个2G的限制点。可以升级Cronolog 到1.7,也可以做日志拆分,但需要数据仓库配合修改日志收集的部分。
关于 Cronolog 的使用,可参考下面
一.安装
1. 到www.cronolog.org下载的源码包,并解压到某目录;
2. su - root;cd /path/to/cronolog;./configure;make; make install――会
将cronolog安装到/usr/local/sbin;同时安装相应的man pages。 建议strip /usr/local/sbin
/cronolog以进一步减小其文件大小(大概20多k)。
二.基本使用方式
cronolog一般是采取管道的方式来工作的,采用如下的形式:
# loggenerator | cronolog log_file_pattern
其中,loggenerator为产生log的程序,而log_file_pattern是日志文件的路径,可以在其中加入cronolog所支持的时间
相关的pattern字符,如/www/log/%y/%m/%d/access.log。其patter为%字符后跟一特殊字符,简述如下:
转义符:
% %字符
n 换行
t 水平制表符
时间域:
H 小时(00..23)
I 小时(01..12)
p 该locale下的AM或PM标识
M 分钟(00..59)
S 秒 (00..61, which allows for leap seconds)
X 该locale下时间表示符(e.g.: _"15:12:47
"_)
Z 时区。若时区不能确定,则无意义
日期域:
a 该locale下的工作日简名(e.g.: Sun..Sat)
A 该locale下的工作日全名(e.g.: Sunday .. Satur-ay)
b 该locale下的月份简称(e.g.: Jan .. Dec)
B 该locale下的月份全称(e.g.: January .. December)
c 该locale下的日期和时间(e.g.: "Sun Dec 15 14:12:47 GMT 1996")
d 当月中的天数 (01 .. 31)
j 当年中的天数 (001 .. 366)
m 月数 (01 .. 12)
U 当年中的星期数,以周日作为一周开始,其中第一周为首个含星期天的星期(00..53)
W 当年中的星期数,以星期一作为一周的开始,其中第一周为首个含星期天的星期(00..53)
w 工作日数(0 .. 6, 0表示星期天)
x 该locale下的日期表示(e.g. "13/04/97")
y 两位数的年份(00 .. 99)
Y 四位数的年份(1970 .. 2038)
三.Apache日志的使用方式
编辑httpd.conf文件,将其中的
CustomLog /usr/local/apache/logs/access_log combined这行,改为:
CustomLog "|/usr/local/sbin/cronolog /usr/local/apache/logs/%Y_week_%U/access_log" combined
注意其中的双引号是必须的,因为这是一个管道操作。上述的配置将在apache的logs目录下,建立形如2002_week_50等按周方式编排的目
录,然后将apache的access log写入到access_log文件,格式为combined。
Cronolog将自动完成目录生成,在周期边界点上准时切换等操作。
发表评论
-
博客链接收藏
2014-03-22 11:18 566这里记录一些我觉得好的博客地址: http://iamm ... -
要看的好文
2011-11-16 12:48 854一致性 hash 算法( consistent hashing ... -
Be more efficient
2011-05-24 11:37 1310svndiff 快捷键 Gnome快捷键: ... -
google 绑定地址
2011-05-20 16:49 104974.125.153.104 code.google.com ... -
JS疑难杂症
2010-01-19 16:42 1043通过a标签提交表单有问题,必须使用button提交表单. & ... -
javascript实现语法高亮
2009-09-09 17:32 0http://hi.baidu.com/erik168/blo ... -
使用JAVA对图片进行效果变换
2008-12-12 22:42 1577原文: http://blog.ccidnet.com/blo ... -
针对Oracle数据库的优化器详细介绍
2008-02-23 12:52 1200http://unixboy.iteye.com/blog/1 ... -
优化数据库大幅度提高Oracle的性能
2008-02-23 12:49 1223http://unixboy.iteye.com/blog/1 ... -
在线HTML编辑器原理
2008-01-10 09:57 2296为什么能实现在线编辑呢? 首先需要ie 的支持,在 ie 5 ... -
Oracle高级查询
2007-06-27 15:31 2573使用Oracle特有的查询语法, 可以达到事半功倍的效果 转 ... -
Domain-Driven Design领域驱动设计(转)
2007-03-21 13:51 2359越来越多人开始使用Java ... -
我的2006 ―― 战斗的一年(转)
2007-03-21 13:49 1455圣诞假期开始了,下午多数美国同事都早早回家了。我差不多是最后一 ... -
透明书评Patterns of Enterprise Application Architecture(PoEAA)
2007-03-21 13:48 1923我有一双定做的休闲鞋,一只鞋上赫然写着“KISS”,另一只则写 ... -
十年学会编程(著者: Peter Norvig)
2007-03-21 13:46 2040为何人人都这么着急? 信步走进任何一家书店,你会看到名为《如 ... -
判断是否是质数
2007-03-21 13:45 1866java 代码 import java.io.* ... -
如何成为一名真正的高级程序员(转)
2007-03-21 13:43 6536那么作为高级程序员,以至于系统分析员,也就是对于一个程序项目的 ... -
如何成为一名真正的程序员(转)
2007-03-21 13:42 1919中国有很多小朋友,他 ...
相关推荐
cronolog是一款广泛应用于Linux和Unix系统的日志管理工具,它主要功能是进行日志轮询,以有效地管理和控制服务器上的日志文件大小。在标题"cronolog-1.6.2.tar.gz cronolog-1.6.2下载"中,我们可以看到这是cronolog...
Linux Cronolog是一个强大的日志管理工具,主要用于周期性地分割和归档日志文件,以保持日志系统整洁,便于管理和分析。在本教程中,我们将深入探讨如何在Linux环境中安装Cronolog,并将其应用于Apache Tomcat服务器...
# tar zxvf cronolog-1.6.2.tar.gz 3、进入cronolog安装文件所在目录 # cd cronolog-1.6.2 4、运行安装 # ./configure # make # make install 5、查看cronolog安装后所在目录(验证安装是否成功) # which cronolog ...
cronolog是一款广泛使用的日志管理工具,尤其在Linux和Unix环境中流行。然而,这个cronolog-1.6.1-win32.zip文件表明它已被移植到Windows操作系统上,版本为1.6.1,适用于32位系统。cronolog的主要功能是按照时间...
cronolog是一款广泛应用于Unix/Linux环境的日志管理工具,它能够按照设定的时间间隔(如每天、每小时)将日志文件分割成多个独立的文件,便于管理和检索。在Windows环境下,由于默认并不支持cronolog,因此需要寻找...
cronolog是一款广泛应用于Linux环境的命令行工具,用于日志文件的分割和管理。它能够按照用户设定的时间间隔,如小时、天或周,将日志文件分割成多个小文件,便于日志的管理和分析。在给定的“cronolog-1.6.1....
cronolog是一款广泛使用的日志管理工具,特别是在基于Unix或Linux的操作系统中。它主要用于自动分割和轮转服务器上的日志文件,确保日志数据的有效管理和分析。cronolog的名字来源于"cron"(定时任务)和"log"(日志...
cronolog是一款广泛应用于服务器日志管理的工具,尤其在Linux环境中,它能够自动地分割和归档日志文件,以保持日志数据的有序性和易管理性。然而,标题中的"cronolog-1.6.1.win32-bin.zip"表明这是一个针对Windows...
cronolog是一款广泛使用的日志管理工具,特别是在Linux服务器环境中,它能够按照预定义的时间间隔对日志文件进行分割,以帮助系统管理员有效地管理和分析服务器的日志数据。在本例中,我们关注的是cronolog的1.6.2-...
### Apache日志分割工具Cronolog 在现代的IT运维管理中,日志管理是非常重要的一环,尤其对于像Apache这样的高性能Web服务器来说更是如此。随着网站访问量的增长,单一的日志文件会变得异常庞大,这不仅使得日志...
cronolog是一款广泛应用于Linux和Unix系统的日志管理工具,它基于时间轮换,可以自动将服务器的日志文件按时间分割,便于管理和分析。这个压缩包文件`cronolog-1.6.2.tar.gz`是cronolog的最新可用版本,版本号为...
cronolog是Linux环境中的一款日志管理工具,它主要用于自动分割和归档服务器上的日志文件。这个"cronolog-1.6.2.zip"压缩包包含的是cronolog的1.6.2版本,可能包括源代码、安装脚本、文档等资源。在Linux服务器运维...
标题中的“cronolog切割tomcat catalina.out 文件 tomcat日志按小时切割”是指使用cronolog工具对Tomcat服务器的日志文件,特别是`catalina.out`文件进行按小时分割的实践方法。`catalina.out`是Tomcat默认的日志...
cronolog 是一个在类 Unix 系统中广泛使用的日志管理工具,主要用于分割和轮转 Web 服务器的日志文件。这个“cronolog-1.6.1-win32”版本表明它已经被移植到了 Windows 平台,使得在 Windows 系统上也能享受到类似的...
cronolog是Linux操作系统中的一款日志管理工具,主要用于日志文件的分割和归档。它按照时间间隔(如每小时、每天)将日志文件分割成多个小文件,便于管理和分析系统活动。这个压缩包“cronolog-1.6.2.Linux.zip”...
**Nginx 1.7.2 和 Cronolog 1.6.2:构建高效反向代理与日志管理系统** Nginx 和 Cronolog 是在 Linux 系统中广泛使用的两个工具,它们分别用于网络服务器的反向代理服务和日志管理。在本文中,我们将深入探讨这两个...
cronolog是一款广泛应用于Linux和Unix系统的日志管理工具,它能够自动按照时间(如小时、天或月)分割Web服务器的日志文件,从而方便管理员进行日志分析和维护。在Windows环境中,通过模拟Unix环境或者使用支持...
cronolog是一款广泛使用的日志管理工具,特别是在Linux系统中,它能够按照用户设定的时间间隔自动分割日志文件,便于管理和分析。在Tomcat这样的Java应用服务器中,catalina.out文件是默认的日志输出文件,它记录了...