作者icetofux ()
看板Linux
标题[问题] stdout redirection应用问题
时间Wed Dec 22 20:51:29 2021
我写了一支长时间运行的程式,在运行过程中会持续产生讯息至stdout,我不想太
频繁的读写储存空间,所以我目前以
$my_app > /dev/shm/my_app.log
的方式运行程式,将讯息输出到记忆体构成的档案系统中,当想要看即时讯息时以
$tail -f /dev/shm/my_app.log
的方式将输出讯息显示到终端,目前运行的还不错,但考虑到如果程式持续运行超过
一个月,我的/dev/shm/可能会不够,请问有没有什麽方法让my_app.log在超过指定
行数的时候,清除最顶端开始的n行呢?
谢谢。
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 1.169.72.9 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Linux/M.1640177491.A.412.html
1F:推 Adama: 改成写进Redis然後设定Expire XD 12/22 23:19
2F:→ Adama: 或者可以试logrotate 12/22 23:21
谢谢你的建议,我希望尽可能不要依赖系统附带以外的程式,所以先没有考虑redis,不过logrotate倒是给了我很棒的方向,我最後是写一个script来redirection null进log档,然後设cron每天0:00执行它,看起来应该是可行。
3F:推 Bencrie: 你要不要直接放在 tmux 里面跑?只有看最後的 log 的话 12/23 00:45
由於是无人看守的机器,程式是以service的型态开机自动执行的。只有在异常时我才会连进去看log进行异常分析跟排除。
※ 编辑: icetofux (1.169.72.9 台湾), 12/23/2021 07:09:43
4F:→ jkchang: sed '1,nd' infile > outfile #删顶端1~n行 12/23 08:21
5F:→ jkchang: tail -n +2 infile > outfile #删顶端1行,依此类推 12/23 08:24
6F:→ jkchang: awk NR\>n infile > outfile #删顶端1~n行 12/23 08:27
刚刚尝试了一下您提供的三种方法,发现执行後log内容都被清空,但如果tail/awk不做redirection输出到终端的内容又是正确的,推测可能跟原程式也在持续redirection到log有关,谢谢您的提议。
※ 编辑: icetofux (223.136.238.89 台湾), 12/23/2021 09:21:20
7F:→ bitlife: 没真的测试过仅提供想法,用stat测试fd 1,如果S_IFBLK显示 12/23 12:35
8F:→ bitlife: 为block device(被输出导向),就定期 lseek 到档案开头 12/23 12:35
9F:→ bitlife: 以上未经实际测试,可行性不敢保证 12/23 12:35
10F:→ bitlife: 更正,应该用truncate而非lseek 12/23 12:50
※ 编辑: icetofux (1.169.72.9 台湾), 12/23/2021 20:03:10
11F:推 penut85420: 我记得鸟哥在讲crontab的时候有提到类似的应用 12/24 07:05
12F:→ bitlife: 今早特地man了一下,必须再更正 XD 是ftruncate才对 12/24 09:54
13F:→ kenduest: 能够用 logrotate 一般要配合程式可以收 SIGHUP 信号 12/24 17:08
14F:→ kenduest: 一般主要是可以重读设定与关闭重开之前的 log 档案 12/24 17:09
15F:→ kenduest: 这样子就可以让 log 的写入重新开启处理 12/24 17:09
16F:推 kenduest: 若是你用 > 这类重导要考虑问题就比较少 12/24 17:13
17F:→ kenduest: 因为 io 重导是 shell 帮你处理的,所以常见就是 12/24 17:13
18F:→ kenduest: 上面提到 truncate, 一般 shell像是 true > file.log 12/24 17:14