博客首页 → 日志分析

最新文章列表

使用shell命令查看分析日志

摘要: 现在网站都有后台日志,主要用于记录异常信息,和异常发生时的关键参数,用于排查bug.有时日志文件很大时,使用shell命令可以事半功倍. 场景:jav ...
日志分析shell命令awk 
hw1287789687 评论(0) 有4347人浏览 2018-04-21 11:11

Shell日志分析之应用日志分析脚本下

一 脚本 1 ############################################################# 2 # File Name: check_http_log.sh 3 # Author:cakin 4 # mail:cakin@qq.com 5 # Created Time: Sat 12 Aug 2017 02:45:16 PM CST 6 # ...
Shell日志分析 
cakin24 评论(0) 有589人浏览 2017-10-01 07:15

Shell日志分析之应用日志分析脚本上

一 脚本实现功能 1、分析HTTP状态码在100-200、200-300、300-400、400-500、500以上，五个区间的请求条数。 2、分析日志中HTTP状态码为404、500的请求条数   二 脚本实现 1 ############################################################# 2 # File Name: check_ht ...
Shell日志分析 
cakin24 评论(0) 有461人浏览 2017-09-30 19:10

shell日志分析概述

一 常见系统日志文件     二Shell日志分析之nginx的log_format介绍     三 Shell日志分析之http状态码介绍 <!--5f39ae17-8c62-4a45-bc43-b32064c9388a:W3siYmxvY2tUeXBlIjoicGFyYWdyYXBoIiwic3R5bGVzIjp7ImFsaWduIjoibGVmdCIsImluZGVu ...
shell日志分析 
cakin24 评论(0) 有522人浏览 2017-09-30 18:58

Linux日志分析常用命令

日志分析常用命令：   基础命令: ls, cp, mv, rm, mkdir, touch   cat：查看文件内容 more：分页显示 less：分页显示，支持查找 tail：显示文件尾 head：显示文件头 sort：内容排序 wc：字符统计 grep：字符串查找 find：文件查找 tar：压缩，解压文件 curl：URL访问工具 wget：下载工具   ...
Linux命令日志分析 
kenblog 评论(0) 有602人浏览 2015-11-16 21:13

海量可视化日志分析平台之ELK搭建

ELK是什么？ E=ElasticSearch ，一款基于的Lucene的分布式搜索引擎，我们熟悉的github，就是由ElastiSearch提供的搜索，据传已经有10TB+的数据量。 L=LogStash ， 一款分布式日志收集系统，支持多输入源，并内置一些过滤操作，支持多输入元 K=Kibana ， 一款配合ElasticSearch的web可视化界面，内置非常各种查询，聚合操作，并拥有漂亮的 ...
logstashelasticsearchkibanaelk日志分析 
qindongliang1922 评论(0) 有5584人浏览 2015-10-21 14:30

jvm GC学习

Java GC 日志详解 Java GC日志可以通过 +PrintGCDetails开启 以ParallelGC为例 YoungGC日志解释如下   FullGC 一目了然，一图胜千言   对应的参数列表 -XX:+PrintGC 输出GC日志 -XX:+PrintGCDetails 输出GC的详细日志 -XX:+PrintGCTimeStamps 输出GC的时间戳 ...
javajvmgc日志分析 
youyanweixiao 评论(0) 有705人浏览 2015-07-11 12:23

自动化部署和日志分析工具

  自动化运维,集中配置系统puppet http://os.51cto.com/art/201306/398025.htm   puppet使用 http://os.51cto.com/art/201304/389798.htm   开源分布式搜索平台ELK(Elasticsearch+Logstash+Kibana)入门学习资源索引 http://blog.csdn.net/ ...
自动化部署日志分析 
fengbin2005 评论(0) 有1582人浏览 2015-03-08 12:56

虚拟日志文件剖析(转)

每 一个数据库至少有一个日志文件，无论为事务日志定义多个少物理文件，SQL Server均视为一个连续的文件。该事务日志文件实际上由一系列的虚拟日志文件VLF来管理。虚拟日志文件的大小由SQL Server的总日志文件的大小决定。虚拟日志文件的物理结构图如下所示： 当该日志文件收缩时，日志文件末端的未使用的VLF可以被删除。 在SQL server2000中，日志文件仅可以从日志文件 ...
sql server 2008 日志日志分析 
zzc1684 评论(0) 有749人浏览 2014-04-02 11:24

流式日志系统启示录-Xlog-系统集成与组件选型(转)

背景     如果你是一名SRE兄弟，收到告警短信，你是否还在疯狂的敲着ssh | grep | sed | awk 这些命令的组合排查问题呢？如果1台，2台，3台机器，ok；如果有n台机器，你会不会抓狂？
日志分析Storm队列MongoDB 
wbj0110 评论(0) 有1133人浏览 2014-03-06 11:34

常用命令行

开发过程中日志分析少不了， 有简便易用的工具效率会高不少。   平时工作仍用XP，为了能使用linux下丰富好用的命令，安装Cygwin ,并且配置到环境变量里去。 这样就可以在cmd里使用linux命令了， 比如ls ， grep 等等。    常用命令备忘：   =======grep过滤======== cat log.txt   --获取文件流 cat log.txt | ...
命令行日志分析 
chenpeilei2003 评论(0) 有876人浏览 2013-11-22 11:44

笔试题：海量日志中提取访问次数前100的IP

大数据时代是一个信息量爆炸的时代，利用数据分析将会产生不可估量的价值，基金，证券，电商以及现在越来越火的O2O。当然作为一个热点，企业的笔试与面试中当然少不了关于大数据的问题。 今天就写写之前的一道笔试题：每个用户访问，系统都会记录用户的IP到日志中，一个小时产生1G的日志文件，请分析日志文件获取当天访问次数前100的IP（大概是这样）。 由于IP是32位的，最多有个2^32个IP，也就是4G, ...
java面试大数据日志分析笔试 
edr_ 评论(0) 有7441人浏览 2013-10-27 17:04

Google Search Appliance 搜索日志

搜索日志记录了从索引获取信息的用户请求。 您可以生成并导出这一信息，然后将其输入喜欢的日志分析软件或报告软件。 下面是搜索日志可提供的 ...
Google Search Appliance 搜索日志Google日志分析 
wbj0110 评论(0) 有1242人浏览 2013-09-22 08:55

基于hive的hadoop日志分析

1.日志格式日期 时间 级别  相关类  信息2011-08-01 08:39:08,020 INFO org.apache.hadoop.ipc.Server:IPC server Responder......2.存储结构日期 时间 级别 相关类各占一列  信息占3列create table if not exists loginfo11(rdate string,time array< ...
hadoophive日志分析 
sunasheng 评论(0) 有1593人浏览 2013-09-17 11:11

hive日志分析实战（二）

 需求 统计某游戏平台新用户渠道来源 日志格式如下：   Jul 23 0:00:47 [info] {SPR}gjzq{SPR}20130723000047{SPR}85493108{SPR}S1{SPR}{SPR}360wan-2j-reg{SPR}58.240.209.78{SPR}    分析 问题的关键在于先找出新用户 新用户：仅在7月份登陆过平台的用户为新用户 ...
hadoophive日志分析 
godlovesdog 评论(0) 有1499人浏览 2013-08-16 19:08

关于Awstats的每次参观所花时间

Awstats是一个免费非常简洁而且强大有个性的网站日志分析工具。其中有一项是每次参观所花时间，对这一项一直很不明白，这个参观时间是如何统计的？ 自己总结下，Awstats会以一定的时间(测试时是使用1个小时)为间隔，如果一个新的IP地址第一次访问开始计算，在这段时间段内没有产生了访问，那么每次参观所花时间是以第一次和最后一次访问的时间差；如果产生了访问的话，就需要从上一次的访问时间重新计算，结果 ...
Linux日志分析awstats 
xiaoqiang6775 评论(0) 有735人浏览 2013-05-18 10:32

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics