用于在日志文件中等待特定字符串的Bash脚本优化

时间:2014-05-14 11:02:23

标签: linux bash shell

我正在使用一个bash脚本调用多个进程,这些进程必须按特定顺序启动,并且必须完成某些操作(然后它们会将某些消息打印到日志中),然后才能启动下一个进程。 bash脚本具有以下代码,适用于大多数情况:

tail -Fn +1 "$log_file" | while read line; do
    if echo "$line" | grep -qEi "$search_text"; then
        echo "[INFO] $process_name process started up successfully"
        pkill -9 -P $$ tail
        return 0
    elif echo "$line" | grep -qEi '^error\b'; then
        echo "[INFO] ERROR or Exception is thrown listed below. $process_name process startup aborted"
        echo "  ($line)  "
        echo "[INFO] Please check $process_name process log file=$log_file for problems"
        pkill -9 -P $$ tail
        return 1
    fi
done

但是,当我们将进程设置为以DEBUG模式打印日志记录时,它们会打印太多日志记录,导致此脚本无法跟上,并且在完成该过程后大约需要15分钟才能使bash脚本赶上。有没有一种方法可以优化这一点,比如改变读取线'在读取100行'或类似的东西时?

2 个答案:

答案 0 :(得分:4)

如何在每个日志行中不分支最多两个grep进程?

tail -Fn +1 "$log_file" | grep -Ei "$search_text|^error\b" | while read line; do

如果愿意的话,一个长期运行的grep进程应该进行预处理。

修改:如评论中所述,将--line-buffered添加到grep调用更安全。

答案 1 :(得分:0)

与此脚本相关的一些提示:

  • Checking that the service is doing its job对守护程序启动的检查比查看日志输出要好得多。
  • 您可以使用grep ... <<<"$line"执行更少的echo
  • 您可以使用tail -f | grep -q ...来避免while循环,只要有匹配的行就会停止。
  • 如果您可以避免-i grep,则处理输入的速度可能会明显加快。
  • Thou shalt not kill -9.