shell中的日志分析脚本

时间:2013-05-14 12:18:20

标签: shell

我是脚本新手,我需要你的帮助。我有一个日志文件,我已经清理干净了。看起来像这样(时间,持续时间(毫秒),动作):

2012-04-28 00:00:00;277.406; 
2012-04-28 00:00:00;299.680; 
2012-04-28 00:00:00;282.338; 
2012-02-28 00:00:00;272.241;

我需要创建一个使用持续时间数据并计算操作的脚本。

1 个答案:

答案 0 :(得分:0)

首先 - 您需要更轻松地解析不同的字段。一种简单的方法是使用

将分号更改为空格
tr ";" " " <logfile|awkscript

其次,您需要创建一个低值和高值的表。我正在使用一个关联数组,其索引是列的名称。我在BEGIN部分这样做。

当值在低值和高值范围内时,您需要计算。我在中间部分这样做。

在END部分中,我打印出值。我使用2个类似的printf格式字符串来确保标题和值排列良好:

#!/usr/bin/awk -f
BEGIN {
    low["<1ms"]=0;high["<1ms"]=1
    low["1-10ms"]=1;high["1-10ms"]=10
    low["10-100ms"]=10;high["10-100ms"]=100
    low["100-500ms"]=100;high["100-500ms"]=500
    low[">500ms"]=500;high[">500ms"]=1000000000
}
{
# Middle section - for each line
duration=$3

for (i in high) {
    if ((duration > low[i]) && (duration <= high[i]) ) {
#       printf("duration: %d, low: %s,high: %s\n", duration, low[i], high[i]);
        total+=duration # total duration
        bin[i]++ # store a count into different bins
        count++ # total number of measurements
    }
}
}
END {
average=total/count
FMT="%-10s %10s %10s %10s %10s %10s\n"
NFMT="%-10.3f %10s %10s %10s %10s %10s\n"
printf(FMT,"AVG", "<1ms", "1-10ms", "10-100ms", "100-500ms", "500+ms")
printf(NFMT,average, bin["<1ms"], bin["1-10ms"], bin["10-100ms"], bin["100-500m\
s"], bin["500+ms"])

}

当我使用您的数据运行时,我得到了

AVG              <1ms     1-10ms   10-100ms  100-500ms     500+ms

282.916                                              4