收藏！！Linux日志排查这篇就够了

# 查看日志文件末尾内容
tail -f /var/log/messages

# 查看指定行数
tail -n 100 /var/log/secure

# 实时监控多个日志文件
multitail /var/log/messages /var/log/secure

# 查看日志文件头部
head -n 50 /var/log/boot.log

# 查看指定日期的日志
grep "Dec 15" /var/log/messages

# 查看指定时间段的日志
sed -n '/Dec 15 10:00/,/Dec 15 11:00/p' /var/log/messages

# 使用awk按时间筛选
awk '/Dec 15 10:/ && /Dec 15 11:/' /var/log/messages

# 基本关键字搜索
grep "error" /var/log/messages

# 忽略大小写搜索
grep -i "failed" /var/log/secure

# 搜索多个关键字
grep -E "error|failed|timeout" /var/log/messages

# 显示匹配行的前后几行
grep -A 5 -B 5 "Out of memory" /var/log/messages

# 查看所有日志
journalctl

# 查看指定服务的日志
journalctl -u nginx.service

# 实时查看日志
journalctl -f

# 查看指定时间范围的日志
journalctl --since "2023-12-15 10:00:00" --until "2023-12-15 11:00:00"

# 查看指定优先级的日志
journalctl -p err

# 统计错误出现次数
grep -c "error" /var/log/messages

# 统计不同类型错误的数量
grep "error" /var/log/messages | awk '{print $5}' | sort | uniq -c

# 分析访问日志中的IP访问频率
awk '{print $1}' /var/log/nginx/access.log | sort | uniq -c | sort -nr

# 查看logrotate配置
cat /etc/logrotate.conf

# 手动执行日志轮转
logrotate -f /etc/logrotate.conf

# 查看日志轮转状态
cat /var/lib/logrotate/logrotate.status

# 查看所有内核消息
dmesg

# 实时查看内核消息
dmesg -w

# 按时间戳显示
dmesg -T

# 只显示错误和警告
dmesg -l err,warn

# 清空dmesg缓冲区（需要root权限）
dmesg -c


# 按级别过滤
dmesg -l emerg    # 紧急情况
dmesg -l alert    # 需要立即处理
dmesg -l crit     # 严重错误
dmesg -l err      # 一般错误
dmesg -l warn     # 警告信息
dmesg -l notice   # 注意信息
dmesg -l info     # 一般信息
dmesg -l debug    # 调试信息

###################dmesg实用技巧##########
# 查看最近的内核消息
dmesg | tail -20

# 搜索特定硬件信息
dmesg | grep -i "usb\|disk\|network"

# 查看内存相关信息
dmesg | grep -i "memory\|oom"

# 查看CPU相关信息
dmesg | grep -i "cpu"

# 将dmesg输出保存到文件
dmesg > /tmp/dmesg_$(date +%Y%m%d_%H%M%S).log

# 1. 查看系统负载相关日志
grep -i "load" /var/log/messages

# 2. 查看内存不足相关信息
grep -i "out of memory" /var/log/messages

# 3. 查看磁盘IO相关问题
grep -i "blocked" /var/log/messages

# 4. 结合dmesg查看内核消息
dmesg | grep -i "killed process"

# 1. 查看SSH登录失败记录
grep "Failed password" /var/log/secure

# 2. 统计失败登录的IP地址
grep "Failed password" /var/log/secure | awk '{print $11}' | sort | uniq -c | sort -nr

# 3. 查看成功登录记录
grep "Accepted password" /var/log/secure

# 4. 查看SSH服务状态
systemctl status sshd
journalctl -u sshd

# 1. 查看Nginx错误日志
tail -f /var/log/nginx/error.log

# 2. 分析访问日志中的异常状态码
awk '$9 >= 400 {print $0}' /var/log/nginx/access.log

# 3. 统计各种HTTP状态码的数量
awk '{print $9}' /var/log/nginx/access.log | sort | uniq -c

# 4. 查看PHP-FPM日志（如果使用PHP）
tail -f /var/log/php-fpm/www-error.log

######################OOM日志特征识别##############
# 在dmesg中查找OOM相关信息
dmesg | grep -i "out of memory\|oom\|killed process"

# 在系统日志中查找OOM信息
grep -i "out of memory\|oom-killer\|killed process" /var/log/messages

# 使用journalctl查找OOM（RHEL 7+）
journalctl | grep -i "oom\|out of memory"

#!/bin/bash
# 监控关键错误日志
tail -f /var/log/messages | while read line
do
    if echo "$line" | grep -q "CRITICAL\|FATAL\|Out of memory"; then
        echo "$(date): 发现严重错误 - $line" | mail -s "系统告警" admin@company.com
    fi
done

# 配置rsyslog客户端
echo "*.* @@log-server:514" >> /etc/rsyslog.conf
systemctl restart rsyslog

# 设置适当的日志文件权限
chmod 640 /var/log/secure
chown root:adm /var/log/secure

# 定期备份重要日志
tar -czf /backup/logs-$(date +%Y%m%d).tar.gz /var/log/

# 不推荐：在大文件中直接grep
grep "error" /var/log/huge-file.log

# 推荐：先按时间范围缩小搜索范围
sed -n '/Dec 15 10:/,/Dec 15 11:/p' /var/log/huge-file.log | grep "error"

# 为经常查询的日志建立索引文件
grep -n "ERROR" /var/log/app.log > /tmp/error_index.txt