阅读更多

 

   Log-Cutter 是JessMA开源组开发的一个简单实用的日志切割清理工具。对于服务器的日常维护来说,日志清理是非常重要的事情,如果残留日志过多则严重浪费磁盘空间同时影响服务的性能。如果用手工方式进行清理,会花费太多时间,并且很多时候难以满足实际要求。例如:如何在每个星期六凌晨3点把超过 2G 大的日志文件进行切割,保留最新的 100M 日志记录? 网上没有发现能满足本座要求的日志切割工具,因此花了一些闲暇时间自己写了一个。由于要在多个平台上使用,为了方便采用 Java 实现。本工具命名为 Log-Cutter,主要有以下特点:

 

  1. 支持 Linux、Mac 和 Windows 等所有常见操作系统平台
  2. 支持命令行交互式运行
  3. 支持后台非交互式运行(Linux/MAC 下使用 daemon 进程实现,Windows 用系统 Service 实现)
  4. 支持三种日志清理方式(删除日志文件、切割日志文件或归档日志文件)
  5. 支持对 GB18030、UTF-8、UTF-16LE、UTF-16BE 等常用日志文件类型进行切割
  6. 高度可配置(程序执行周期、要删除的日志文件过期时间、要切割的日志文件阀值和保留大小等均可配置

Log-Cutter 官方网站:http://www.jessma.org

Log-Cutter 下载地址:http://www.oschina.net/p/log-cutter

 

  • 使用方法
**************************************************************
**** LogCutter - JessMA Open Source, all rights reserved. ****
**************************************************************

一、环境要求
--------------------------------------------------
1) Java 版 本: JDK / JRE 1.6 以上
2) 依赖程序包: dom4j、log4j、ant、juniversalchardet
--------------------------------------------------

二、配置文件
--------------------------------------------------
1) 程序配置文件: conf/config.xml (默认)
    (示例参考:conf/config-template.xml)
2) 日志配置文件: conf/log4j.properties (默认)
    (示例请参考:conf/log4j.properties)
--------------------------------------------------

三、安装部署
(注 :LogCutter 需要配置 ‘JAVA_HOME’ / ‘JRE_HOME’ 和 ‘CLASSPATH’ 系统环境变量)
--------------------------------------------------
1) 配置系统环境变量 ‘JAVA_HOME’(或 ‘JRE_HOME’) 和 ‘CLASSPATH’
2) 在 LogCutter配置文件(默认:conf/config.xml)中配置清理规则
3) 启动 LogCutter
--------------------------------------------------

四、启动方式
--------------------------------------------------
1) Windows
    A) 前台运行: > run.bat [ -f config-file ]
    
    B) 后台运行: > LogCutter.exe  {    
                                    -install-demand  (安装手动启动服务)
                                    -install-auto    (安装自动启动服务)
                                    -uninstall       (删除服务)
                                    -start           (启动服务)
                                    -stop            (停止服务)
                                    -status          (查看服务状态)
                                 }

    *** 注 *** 
    @ LogCutter.exe 以 Windows 服务的方式运行,安装好后可以通过 Windows 服务管理器进行管理
    @ LogCutter.exe 是32位程序,LogCutter_x64.exe 是64位程序,根据当前系统平台使用其中之一

    C) 单次运行: > run.bat -1 [ -f config-file ]

2) Linux / Unix
    A) 前台运行: $ run.sh [ -f config-file ]
    B) 后台运行: $ run.sh [ -f config-file ] -d
    C) 单次运行: $ run.sh -1 [ -f config-file ] [ -d ]

    *** 注 ***
    @ 可以把 run.sh 启动命令加入 /etc/rc.d/rc.local 中,从而设置为开机时自动运行
--------------------------------------------------

    详细说明与使用方法参考:《操作指南

 

  •  配置文件 
<?xml version="1.0" encoding="UTF-8"?>
<CONFIG    xmlns="http://www.jessma.org"
        xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
        xsi:schemaLocation="http://www.jessma.org http://www.jessma.org/schema/log-cutter-cfg-2.0.xsd">
    <global>
        <!-- 开始日志检查延时 (小时), 默认: 0 (立刻开始)
          1) 当指定为一个整数值时,执行器首次启动延时时间为该值设定的小时数
              (例如:12 小时后首次启动执行器)
              <start-check-delay>12</start-check-delay>
          2) 当指定为一个 ‘hh:mm’ 格式的值时,执行器首次启动时间为该时分值
              (例如:12 点 34 分首次启动执行器,如果当前时间超过 12 点 34 分则在明天的 12 点 34 分首次启动执行器)
                <start-check-delay>12:34</start-check-delay>
        -->
        <!-- 02 点 30 分首次启动执行器 -->
        <start-check-delay>02:30</start-check-delay>
        <!-- 日志检查间隔 (小时), 默认: 72 -->
        <check-interval></check-interval>
        <!-- Log4J 配置文件, 默认: ${CLASS_ROOT}/../conf/log4j.properties -->
        <log4j-config-file></log4j-config-file>
        <!-- 进程锁文件, 默认: ${CLASS_ROOT}/../${APP_NAME}.lock -->
        <lock-file></lock-file>
    </global>
    
    <!-- 要删除的日志文件列表(可配置多个,由 DelFileRunner 执行)
      1) DelFileRunner 会递归删除符合条件的文件夹及其中的所有文件
      2) 注意:在判断是否删除文件夹时,检测的是文件夹的最后修改时间,而不是其中文件的最后修改时间
      3) DelFileRunner 适用于清理 “定期产生新日志文件” 的应用程序日志
    -->
    <!-- delete-files.expire: 日志文件过期时间(天), 默认: 90 -->
    <delete-files expire="30">
        <!-- file.path: 文件所在目录, 必须填写, 不能包含通配符 -->
        <!-- file: 文件或文件夹名称, 必须填写, 可包含通配符 -->
        <file path="/opt/LogCutter/logs">LogCutter.log*</file>
        <file path="/opt/hMailServer/Logs">*.log</file>
        <file path="/opt/tomcat-6.0/logs">*.log</file>
    </delete-files>
    <delete-files expire="365">
        <file path="~/backup">*</file>
    </delete-files>
    
    <!-- 要截断的日志文件列表(可配置多个,由 CutFileRunner 执行)
        1) CutFileRunner 只会扫描符合条件的文件,不会扫描文件夹
        2) CutFileRunner 会截断文件的前部内容,保留后部内容
        3) CutFileRunner 适用于清理 “日志文件不断追加增长” 的应用程序日志
    -->
    <!-- cut-files.threshold:    日志文件截断阀值(KB), 默认: 10240 -->
    <!-- cut-files.reserve:      日志文件保留内容(KB), 默认: 1024 -->
    <!--
         <!注!> 'cut-files.reserve' 是保留内容的近似值, 实际内容按行取整保留
            如下列日志文件内容:
                ...... ...... ......
                 line1: xxxxxxxxxxxxxxxxxxxxx
                 line2: xxxxxxxxxxPyyyyyyyyyy
                 line3: zzzzzzzzzzzzzzzzzzzzz
                 line4: zzzzzzzzzzzzzzzzzzzzz
                 ...... ...... ...... (EOF)
             'P'为定位得到的保留起点, 程序实际会在'P'点开始查找下一个换行符,
             从该换行符的后一个字符开始保留, 也就是从第三行开始保留到文件末尾
    -->
    <cut-files threshold="10240" reserve="512">
        <file path="/opt/apache-2.2/logs">*.log</file>
        <file path="/opt/mysql-server-5.1/data">*.err</file>
    </cut-files>
    
    <!-- 要归档的日志文件列表(可配置多个,由 ArcFileRunner 执行)
      1) ArcFileRunner 把符合条件的文件或文件夹压缩归档到指定目录,并删除原文件或文件夹
      2) 归档文件格式:{原文件/文件夹名称}_{系统时间}.zip
      3) 注意:在判断是否归档文件夹时,检测的是文件夹的最后修改时间,而不是其中文件的最后修改时间
      4) ArcFileRunner 适用于清理 “定期产生新日志文件或日志目录” 的应用程序日志
    -->
    <!-- archive-files.expire:          日志文件过期时间(天), 默认: 90 -->
    <!-- archive-files.archive-path:    日志文件归档目录 -->
    <archive-files expire="120" archive-path="~/backup">
        <file path="/opt/mysql-server-5.1/data">mysql-bin.*</file>
    </archive-files>
</CONFIG>

Log-Cutter 2.0.1 更新:

 

1、增加文件归档执行器 ArcFileRunner

    1) ArcFileRunner 把符合条件的文件或文件夹压缩归档到指定目录,并删除原文件或文件夹

    2) 属性 expire 指定归档到期时间,属性 archive-path 指定归档目录

    3) 归档文件格式:{原文件/文件夹名称}_{系统时间}.zip

 

<!-- 例如:下面的配置把最后修改时间超过 90 天的文件或文件夹归档到 ‘E:\backup’ 目录 -->
<archive-files archive-path="E:\backup" expire=90>
    <file path="X:\MyApp\logs">*</file>
    <file path="X:\nginx-1.4.1\logs">*.log</file>
</archive-files>
 

2、支持多组文件清理策略

    1) config.xml 可以配置多项 <delete-files>、<cut-files> 或 <archive-files>

    2) 不同的配置项可以使用不同的清理策略参数

 

<!-- 例如:下面配置的两组归档清理策略中,分别指定不同的归档到期时间和归档目录 -->
<archive-files archive-path="E:\backup" expire=90>
    <file path="X:\MyApp\logs">*</file>
    <file path="X:\nginx-1.4.1\logs">*.log</file>
</archive-files>
<archive-files archive-path="E:\backup2" expire=300>
    <file path="X:\MyApp2\logs">*</file>
    <file path="X:\Tomcat-6\logs">*.log</file>
</archive-files>
  

3、文件删除执行器 DelFileRunner 支持递归删除文件夹

    1) DelFileRunner 会递归删除符合条件的文件夹及其中的所有文件

    2) 注意:在判断是否删除文件夹时,检测的是文件夹的最后修改时间,而不是其中文件的最后修改时间

       

<!-- 例如:下面的配置会删除 logs 目录下所有最后修改时间超过 90 天的文件或文件夹 -->
<delete-files expire=90>
    <file path="X:\MyApp\logs">*</file>
</delete-files>
 

4、执行器首次启动延时配置 ‘<start-check-delay>’ 支持指定绝对时间

    1) 当指定为一个整数值时,执行器首次启动延时时间为该值设定的小时数

    2) 当指定为一个 ‘hh:mm’ 格式的值时,执行器首次启动时间为该时分值

       

<!--(例如)-->
<!-- 12 小时后首次启动执行器 -->
<start-check-delay>12</start-check-delay>
<!-- 12 点 34 分首次启动执行器,如果当前时间超过 12 点 34 分则在明天的 12 点 34 分首次启动执行器 -->
<start-check-delay>12:34</start-check-delay>
  

5、增加单次运行模式(running-only-once mode)

    1) 在单次运行模式下,LogCutter 在启动时立刻运行所有执行器,当所有执行器运行完毕后退出程序

    2) 单次运行模式可避免 LogCutter 作为常驻进程一直运行,配合 CronTab 等任务调度器一起使用则能达到定时清理的目的

    3) 在单次运行模式下 运行 LogCutter 会忽略配置文件的 ‘start-check-delay’ 和 ‘check-interval’ 配置项

    4) 通过命令行参数 ‘-1’ 指示使用单次运行模式启动 LogCutter

 

        (例如)

           Windows : > run.bat -1

        Unix/Linux : > run.sh -1 [ -d ]

 

6、优化启动脚本 run.sh / run.bat

    1) 只需配置好系统环境变量 ‘JAVA_HOME’(或 ‘JRE_HOME’) 和 ‘CLASSPATH’ 即可通过启动脚本运行 LogCutter

    2) 启动脚本接受命令行参数并传递到 LogCutter 程序中。其中 run.sh 通过额外的参数 ‘-d’ 指示后台运行 LogCutter

  • 大小: 44.5 KB
12
0
评论 共 6 条 请登录后发表评论
6 楼 guaishou 2013-10-15 15:26
diggywang 写道
平时Linux/Unix下接触的比较多,一般用一条awk命令就可以完成

当然可以用awk/rm/tar及其脚本做这样的事情,但本工具的优点主要体现在:使用“统一”的方式通过“配置文件”(而不是脚本文件)在“所有平台”下根据“指定规则”“自动”清理日志。
5 楼 diggywang 2013-10-15 11:05
平时Linux/Unix下接触的比较多,一般用一条awk命令就可以完成
4 楼 guaishou 2013-10-14 12:12
sysutyphoon 写道
log4j 不是通过制定参数就可以达到目的么?这个工具的使用场景是什么?

都不是同一个概念的东西呀!亲...
3 楼 sysutyphoon 2013-10-13 21:13
log4j 不是通过制定参数就可以达到目的么?这个工具的使用场景是什么?
2 楼 yuriyan 2013-10-12 14:18
Something ...
1 楼 guaishou 2013-10-12 12:50
Any body say something ...

发表评论

您还没有登录,请您登录后再发表评论

相关推荐

  • 渗透之——Metasploit命令及模块

    show exploits 列出metasploit框架中的所有渗透攻击模块。 show payloads 列出metasploit框架中的所有攻击载荷。 show auxiliary 列出metasploit框架中的所有辅助攻击载荷。 search name 查找metasploit框架中所有的...

  • 处理eking.Devos勒索病毒防范解密恢复操作攻略

    其他工具通常用于分发恶意软件,此外,使用非官方的第三方工具激活许可软件是非法的。 使用信誉良好的防病毒软件或反间谍软件扫描您的系统并使其保持最新状态。开启杀毒软件的同时记得设置软件退出密码保护,防止...

  • Java 产品与软件下载

    Maven 基于项目对象模型(POM)的概念,它可以从一个单独的项目模型管理一个项目的构建、报告和文档编制。 更多资源 &gt; Apache MyFaces Apache MyFaces 是 JSF(Java Server Faces)的一个开源实现。JSF 是一个 ...

  • D语言真相

    此外,还有两个重要的D基本库库,官方-Phobos和社区推动Tango. Tango设计适用于D1,正在移植到D2中, Phobos(这是令人沮丧的古怪的D1迭代实现)正在发生重大修改和补充,以充分利用D2的功能.(因此,毫不奇怪,很多门派讨论...

  • D语言真相 The Case for D(1-5)

    此外,还有两个重要的D基本库库,官方-Phobos和社区推动Tango. Tango设计适用于D1,正在移植到D2中, Phobos(这是令人沮丧的古怪的D1迭代实现)正在发生重大修改和补充,以充分利用D2的功能.(因此,毫不奇怪,很多门派讨论...

  • Ipad2 使用心得

    1、任意安装破解软件和苹果非授权软件,大大大大大的省钱,而且功能超级超级超级增强。 2、更好的美化和个性化UI,加强用户体验。 3、提升系统性能。 4、安装输入法 5、自行编写、移植你需要的特殊应用。 ...

  • 很全面的提示工程指南(包含大量示例!)

    A: 注意:提示格式取决于手头的任务,不一定非要使用QA格式,如简单的分类任务,可以用如下格式: Prompt: This is awesome! // Positive This is bad! // Negative Wow that movie was rad! // Positive What a ...

  • Dojo的联合创建者Dylan Schiemann访谈

    我们是以模块化的方式来设计Dojo Toolbox的,这样人们就能创建属于自己的定制工具箱构件,或者将他们的自己的模块贡献出来作为官方版本之用。 InfoQ:除了 像Dojo这样 纯粹的JavaScript库外,在Java领域开发web...

  • gisergising

    //下面的是处理开始标记,php文档上说一旦下了这个语句,下面出现commit()或者rollback()才执行,我们让它直接执行 //$db-&gt;beginTransaction(); //查询是否存在表test,不存在建立test表,否则直接进行对...

  • metasploit命令及模块

    show exploits 列出metasploit框架中的所有渗透攻击模块。 show payloads 列出metasploit框架中的所有攻击载荷。 show auxiliary 列出metasploit框架中的所有辅助攻击载荷。 search name 查找metasploit框架中所有的...

  • C#ASP.NET网络进销存管理系统源码数据库 SQL2008源码类型 WebForm

    ASP.NET网络进销存管理系统源码 内含一些新技术的使用,使用的是VS .NET 2008平台采用标准的三层架构设计,采用流行的AJAX技术 使操作更加流畅,统计报表使用FLASH插件美观大方专业。适合二次开发类似项目使用,可以节省您 开发项目周期,源码统计报表部分需要自己将正常功能注释掉的源码手工取消掉注释。这是我在调试程 序时留下的。也是上传源码前的疏忽。 您下载后可以用VS2008直接打开将注释取消掉即可正常使用。 技术特点:1、采用目前最流行的.net技术实现。2、采用B/S架构,三层无限量客户端。 3、配合SQLServer2005数据库支持 4、可实现跨越地域和城市间的系统应用。 5、二级审批机制,简单快速准确。 6、销售功能手写AJAX无刷新,快速稳定。 7、统计报表采用Flash插件美观大方。8、模板式开发,能够快速进行二次开发。权限、程序页面、 基础资料部分通过后台数据库直接维护,可单独拿出继续开发其他系统 9、数据字典,模块架构图,登录页面和主页的logo图片 分别放在DOC PSD 文件夹中

  • (源码)基于ZooKeeper的分布式服务管理系统.zip

    # 基于ZooKeeper的分布式服务管理系统 ## 项目简介 本项目是一个基于ZooKeeper的分布式服务管理系统,旨在通过ZooKeeper的协调服务功能,实现分布式环境下的服务注册、发现、配置管理以及分布式锁等功能。项目涵盖了从ZooKeeper的基本操作到实际应用场景的实现,如分布式锁、商品秒杀等。 ## 项目的主要特性和功能 1. 服务注册与发现通过ZooKeeper实现服务的动态注册与发现,支持服务的动态上下线。 2. 分布式锁利用ZooKeeper的临时顺序节点特性,实现高效的分布式锁机制,避免传统锁机制中的“羊群效应”。 3. 统一配置管理通过ZooKeeper集中管理分布式系统的配置信息,实现配置的动态更新和实时同步。 4. 商品秒杀系统结合分布式锁和ZooKeeper的监听机制,实现高并发的商品秒杀功能,确保库存的一致性和操作的原子性。 ## 安装使用步骤 1. 环境准备

  • 23python3项目.zip

    23python3项目

  • 技术资料分享AL422B很好的技术资料.zip

    技术资料分享AL422B很好的技术资料.zip

  • c语言俄罗斯方块.rar

    c语言俄罗斯方块

  • 【CPO栅格地图】基于matlab豪猪算法CPO栅格地图路径规划(目标函数:最短距离)【含Matlab源码 9152期】.mp4

    Matlab领域上传的视频均有对应的完整代码,皆可运行,亲测可用,适合小白; 1、代码压缩包内容 主函数:main.m; 调用函数:其他m文件;无需运行 运行结果效果图; 2、代码运行版本 Matlab 2019b;若运行有误,根据提示修改;若不会,私信博主; 3、运行操作步骤 步骤一:将所有文件放到Matlab的当前文件夹中; 步骤二:双击打开main.m文件; 步骤三:点击运行,等程序运行完得到结果; 4、仿真咨询 如需其他服务,可私信博主; 4.1 博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作

  • delphi人才信息管理系统.zip

    delphi人才信息管理系统

  • 安卓巴士总结了近百个Android优秀开源项.zip

    安卓巴士总结了近百个Android优秀开源项

  • MATLAB蒙特卡洛仿真计算投资组合的VaR(Value at Risk )

    1.程序功能说明: MATLAB蒙特卡洛仿真计算投资组合的VaR(Value at Risk ) 根据协方差矩阵等参数先计算涨期权和看跌期权的价格,再采用蒙特卡洛模拟法计算该投资组合的VaR。 2.代码说明:注释清晰,参数和变量说明清晰,方便更改、方便初学者使用,模块化编程,方便替换目标函数。运行环境Windows7及以上操作系统,MATLAB2014a及以上版本。 3.适用专业:计算机、电子信息工程、数学、物理、机械工程、土木工程等专业的大学生、研究生毕业设计,各类专业的课程设计、海外留学生作业等。 4作者介绍:资深算法工程师, 从事Matlab、Python算法仿真工作15年,专业研究遗传算法、粒子群算法、蚁群算法、鲸鱼算法、狼群算法等. 有问题联系QQ: 1579325979

  • SpringBoot - Async异步处理

    SpringBoot - Async异步处理

Global site tag (gtag.js) - Google Analytics