跳到主要内容
← 返回列表

ICELEAF / JOURNAL

iStoreOS 死机排查:如何记录和保留系统日志

2026-09-21 11:24:32 / iceleaf

一、问题背景

排查 iStoreOS 异常死机及重启问题时,发现系统重启后只能查看到启动以来的日志,之前发生故障时的记录已经丢失。

这就带来一个问题:设备虽然恢复运行,但缺少故障发生前的记录,无法进一步判断死机原因。

于是决定先检查 iStoreOS 的日志机制,尝试将系统日志写入文件,为后续故障分析保留更多信息。

二、检查系统日志

首先通过 SSH 登录 iStoreOS,执行以下命令:

logread | tail -20

iStoreOS 基于 OpenWrt,系统通常通过 logd 管理日志,可以使用 logread 查看内存中的系统日志。

继续检查日志服务进程:

ps | grep logd

当时检查到的 logd 启动参数为:

/sbin/logd -S 512

这说明日志守护进程正在运行,但并不代表历史日志已经保存到了持久化存储设备。

三、配置日志写入文件

为了方便查看日志,尝试通过 UCI 配置日志输出文件,并调整日志缓冲区大小。

uci set system.@system[0].log_file='/var/log/messages'
uci set system.@system[0].log_size='512'
uci commit system

其中,log_file 指定日志文件路径,log_size 设置日志缓冲区大小,512 的单位为 KiB。

保存配置后重新启动日志服务:

/etc/init.d/log restart

随后检查日志文件:

ls -l /var/log/messages

当时发现日志文件已经存在,但是大小仍然为 0 字节。

进一步查看 logread,只有一条时间显示为 1970 年的内核消息。单凭这条记录,尚不能判断日志系统已经恢复正常。

四、验证日志能否正常写入

为了确认日志系统是否正常工作,使用 logger 命令主动生成一条测试日志:

logger "ISTOREOS_LOG_TEST_123"

然后检查系统日志:

logread | tail -5

实际返回:

Mon Sep 21 11:15:23 2026 user.notice root: ISTOREOS_LOG_TEST_123

继续查看日志文件:

cat /var/log/messages

文件中同样出现了测试记录:

Mon Sep 21 11:15:23 2026 user.notice root: ISTOREOS_LOG_TEST_123

至此可以确认,在 2026 年 9 月 21 日 11:15,日志写入测试成功,logd 能够接收测试消息,logread 和日志文件也都能够读取到对应内容。

五、日志写入文件不等于永久保存

虽然测试日志已经成功写入 /var/log/messages,但还有一个需要特别注意的问题。

OpenWrt 系统通常将 /var 链接到 /tmp,而 /tmp 一般使用内存文件系统。因此,即使日志写入 /var/log/messages,也可能在设备重新启动后丢失。

可以执行以下命令检查实际存储位置:

readlink -f /var/log/messages
df -h /var/log

如果日志文件位于临时文件系统,正常重启、异常断电或系统崩溃后,就不能依赖它保留历史记录。

如果希望真正保存故障发生前的日志,可以进一步考虑以下方案:

  • 独立存储:将日志写入已经正确挂载的持久化磁盘,并评估写入频率和存储空间。

  • 远程日志服务器:通过 Syslog 将日志发送到 NAS 或其他服务器,即使路由器重启,已经发送成功的日志仍可在接收端保留。

  • 定期归档:结合实际存储条件,定期备份需要保存的日志文件。

对于需要持续排查死机问题的设备,我更倾向于使用远程日志服务器,避免将所有日志保存在发生故障的设备本身。

需要注意,远程日志也不能保证保留崩溃前的最后一条消息,还应结合内核日志、硬件状态和其他故障证据进行分析。

六、本次排查结果

这次排查完成了日志文件配置与写入测试,确认了以下情况:

  • logd 服务能够正常运行。

  • 已经配置日志文件路径与缓冲区大小。

  • logger 生成的测试消息能够通过 logread 查看。

  • 测试消息能够正常写入 /var/log/messages。

但本次记录尚未验证设备重启之后日志能否保留,也没有确认原先导致 iStoreOS 死机的具体原因。

因此,这次工作解决的是日志写入链路的验证问题,而不是整个死机问题的最终修复。

七、总结

对于偶发死机、异常重启等问题,能够保留故障发生前的日志,往往是后续定位原因的重要前提。

这次排查也让我进一步区分了三个概念:日志服务正常运行、日志成功写入文件,以及日志真正实现持久化。这三件事并不完全相同,需要分别验证。

后续如果再次遇到类似问题,应优先确认日志保存位置,并逐步完善持久化或远程日志方案。

QUICK NAVIGATION

你想去哪里?

Esc 关闭 · 点击结果前往 · 全站搜索 →