服务器日志怎么收集:从系统日志到应用日志的实操方法
服务器日志收集并不复杂,核心是三步:先确认日志在哪里产生,再决定用什么方式搬运,最后验证日志确实到达了收集端。
临时排查用 journalctl、tail 就够;
要做集中管理,通常用 rsyslog 汇总系统日志,用 Filebeat 或 Promtail 采集应用日志。
下面按这个顺序展开。
先搞清楚日志从哪里来
不同来源的日志,收集方式完全不同。
动手前先分类:
- 系统日志:登录、内核、服务启停等,Linux 上多在
/var/log/下,如/var/log/messages、/var/log/secure、/var/log/syslog。 - 应用日志:Nginx、MySQL、业务程序自己写的文件,路径由配置决定,例如 Nginx 默认在
/var/log/nginx/access.log。 - 容器日志:Docker 默认用 json-file 驱动,日志落在宿主机
/var/lib/docker/containers/下,用docker logs查看。 - systemd 管理的服务:日志进入 journal,用
journalctl -u 服务名读取。
先执行 ls /var/log/ 和查看应用配置文件里的日志路径,把要收集的文件列出来,再决定方案。
多台服务器各自为战时,优先考虑集中收集,避免逐台登录排查。
系统日志:用 rsyslog 转发到一台汇总机
大多数发行版自带 rsyslog。
假设汇总机 IP 为 192.168.1.10,在被收集的服务器上编辑 /etc/rsyslog.conf 或新建 /etc/rsyslog.d/50-forward.conf:
*.* @@192.168.1.10:514
@@ 表示 TCP,@ 表示 UDP。
TCP 更可靠,建议用 @@。
保存后重启服务:
systemctl restart rsyslog
systemctl status rsyslog
在汇总机上确认 rsyslog 正在监听 514 端口,并检查防火墙是否放行:
ss -lunpt | grep 514
firewall-cmd --add-port=514/tcp --permanent
firewall-cmd --reload
如果汇总机本身也在用 rsyslog 接收,需要确认 /etc/rsyslog.conf 中 ModLoad imtcp 和 InputTCPServerRun 514 未被注释。
客户端发送后,在汇总机 /var/log/messages 或对应日志中应能看到来源主机名。
应用日志:Filebeat 采集文件并输出
应用日志是普通文本文件时,Filebeat 是常见选择。
安装后编辑 /etc/filebeat/filebeat.yml:
filebeat.inputs:
- type: log
enabled: true
paths:
- /var/log/nginx/*.log
fields:
service: nginx
output.elasticsearch:
hosts: ["192.168.1.10:9200"]
如果暂时没有 Elasticsearch,也可以先输出到 Logstash 或文件做验证。
启动并检查:
systemctl enable --now filebeat
filebeat test config -c /etc/filebeat/filebeat.yml
filebeat test output -c /etc/filebeat/filebeat.yml
test output 能连通说明网络和认证没问题;
采集是否生效,要看目标端是否出现带 service: nginx 字段的日志。
日志轮转后 Filebeat 会自动跟踪新文件,不需要手动重启。
临时排查不必先搭平台
只想快速看某台机器最近发生了什么,直接查本机日志更快:
journalctl -u nginx --since "1 hour ago"
tail -f /var/log/nginx/access.log
grep "Failed password" /var/log/secure
容器场景用 docker logs --tail 100 容器名,或 docker logs -f 持续跟踪。
这类方式适合单机定位,不适合长期留存和跨机检索,日志量一大就会明显吃力。
几个容易踩的坑
- 权限不足:Filebeat 默认以
filebeat用户运行,读不到只有 root 可读的日志时,需要调整文件权限或在配置中指定运行用户,不要直接chmod 777。 - 时区不一致:多台机器日志时间对不上时,先统一
timedatectl时区,否则汇总后排序会混乱。 - 磁盘写满:日志会持续增长,收集端和源端都要配置 logrotate 或保留策略,避免把系统盘塞满。
- 防火墙拦截:rsyslog 514、Elasticsearch 9200 等端口未放行时,表现为“配置没错但收不到日志”,先用
ss和telnet确认连通性。 - 只配采集不验证:配置完成后一定要在接收端实际看到数据,再算完成。
验证收集是否真正生效
判断服务器日志收集成功,可以按以下顺序检查:源端服务状态正常;
采集进程无报错;
网络端口可连通;
接收端在预期时间内出现新日志;
日志字段(主机名、服务名、时间)完整。
任何一环缺失,就回到对应环节查配置和权限,而不是反复重启服务。
日志收集方案不必一开始就上大平台。
单机先用系统自带工具,多机再引入 rsyslog 和 Filebeat,规模扩大后再考虑检索和告警,这样每一步都能验证,也更容易排错。