一、问题背景
排查 iStoreOS 异常死机及重启问题时,发现系统重启后只能查看到启动以来的日志,之前发生故障时的记录已经丢失。
这就带来一个问题:设备虽然恢复运行,但缺少故障发生前的记录,无法进一步判断死机原因。
于是决定先检查 iStoreOS 的日志机制,尝试将系统日志写入文件,为后续故障分析保留更多信息。
二、检查系统日志
首先通过 SSH 登录 iStoreOS,执行以下命令:
logread | tail -20
iStoreOS 基于 OpenWrt,系统通常通过 logd 管理日志,可以使用 logread 查看内存中的系统日志。
继续检查日志服务进程:
ps | grep logd
当时检查到的 logd 启动参数为:
/sbin/logd -S 512
这说明日志守护进程正在运行,但并不代表历史日志已经保存到了持久化存储设备。
三、配置日志写入文件
为了方便查看日志,尝试通过 UCI 配置日志输出文件,并调整日志缓冲区大小。
uci set system.@system[0].log_file='/var/log/messages' uci set system.@system[0].log_size='512' uci commit system
其中,log_file 指定日志文件路径,log_size 设置日志缓冲区大小,512 的单位为 KiB。
保存配置后重新启动日志服务:
/etc/init.d/log restart
随后检查日志文件:
ls -l /var/log/messages
当时发现日志文件已经存在,但是大小仍然为 0 字节。
进一步查看 logread,只有一条时间显示为 1970 年的内核消息。单凭这条记录,尚不能判断日志系统已经恢复正常。
四、验证日志能否正常写入
为了确认日志系统是否正常工作,使用 logger 命令主动生成一条测试日志:
logger "ISTOREOS_LOG_TEST_123"
然后检查系统日志:
logread | tail -5
实际返回:
Mon Sep 21 11:15:23 2026 user.notice root: ISTOREOS_LOG_TEST_123
继续查看日志文件:
cat /var/log/messages
文件中同样出现了测试记录:
Mon Sep 21 11:15:23 2026 user.notice root: ISTOREOS_LOG_TEST_123
至此可以确认,在 2026 年 9 月 21 日 11:15,日志写入测试成功,logd 能够接收测试消息,logread 和日志文件也都能够读取到对应内容。
五、日志写入文件不等于永久保存
虽然测试日志已经成功写入 /var/log/messages,但还有一个需要特别注意的问题。
OpenWrt 系统通常将 /var 链接到 /tmp,而 /tmp 一般使用内存文件系统。因此,即使日志写入 /var/log/messages,也可能在设备重新启动后丢失。
可以执行以下命令检查实际存储位置:
readlink -f /var/log/messages df -h /var/log
如果日志文件位于临时文件系统,正常重启、异常断电或系统崩溃后,就不能依赖它保留历史记录。
如果希望真正保存故障发生前的日志,可以进一步考虑以下方案:
独立存储:将日志写入已经正确挂载的持久化磁盘,并评估写入频率和存储空间。
远程日志服务器:通过 Syslog 将日志发送到 NAS 或其他服务器,即使路由器重启,已经发送成功的日志仍可在接收端保留。
定期归档:结合实际存储条件,定期备份需要保存的日志文件。
对于需要持续排查死机问题的设备,我更倾向于使用远程日志服务器,避免将所有日志保存在发生故障的设备本身。
需要注意,远程日志也不能保证保留崩溃前的最后一条消息,还应结合内核日志、硬件状态和其他故障证据进行分析。
六、本次排查结果
这次排查完成了日志文件配置与写入测试,确认了以下情况:
logd 服务能够正常运行。
已经配置日志文件路径与缓冲区大小。
logger 生成的测试消息能够通过 logread 查看。
测试消息能够正常写入 /var/log/messages。
但本次记录尚未验证设备重启之后日志能否保留,也没有确认原先导致 iStoreOS 死机的具体原因。
因此,这次工作解决的是日志写入链路的验证问题,而不是整个死机问题的最终修复。
七、总结
对于偶发死机、异常重启等问题,能够保留故障发生前的日志,往往是后续定位原因的重要前提。
这次排查也让我进一步区分了三个概念:日志服务正常运行、日志成功写入文件,以及日志真正实现持久化。这三件事并不完全相同,需要分别验证。
后续如果再次遇到类似问题,应优先确认日志保存位置,并逐步完善持久化或远程日志方案。