作者icetofux ()
看板Linux
標題[問題] stdout redirection應用問題
時間Wed Dec 22 20:51:29 2021
我寫了一支長時間運行的程式，在運行過程中會持續產生訊息至stdout，我不想太
頻繁的讀寫儲存空間，所以我目前以
$my_app > /dev/shm/my_app.log
的方式運行程式，將訊息輸出到記憶體構成的檔案系統中，當想要看即時訊息時以
$tail -f /dev/shm/my_app.log
的方式將輸出訊息顯示到終端，目前運行的還不錯，但考慮到如果程式持續運行超過
一個月，我的/dev/shm/可能會不夠，請問有沒有什麼方法讓my_app.log在超過指定
行數的時候，清除最頂端開始的n行呢？
謝謝。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 1.169.72.9 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Linux/M.1640177491.A.412.html
1F：推 Adama: 改成寫進Redis然後設定Expire XD 12/22 23:19
2F：→ Adama: 或者可以試logrotate 12/22 23:21
謝謝你的建議，我希望盡可能不要依賴系統附帶以外的程式，所以先沒有考慮redis，不過logrotate倒是給了我很棒的方向，我最後是寫一個script來redirection null進log檔，然後設cron每天0:00執行它，看起來應該是可行。
3F：推 Bencrie: 你要不要直接放在 tmux 裡面跑？只有看最後的 log 的話 12/23 00:45
由於是無人看守的機器，程式是以service的型態開機自動執行的。只有在異常時我才會連進去看log進行異常分析跟排除。
※ 編輯: icetofux (1.169.72.9 臺灣), 12/23/2021 07:09:43
4F：→ jkchang: sed '1,nd' infile > outfile #刪頂端1~n行 12/23 08:21
5F：→ jkchang: tail -n +2 infile > outfile #刪頂端1行,依此類推 12/23 08:24
6F：→ jkchang: awk NR\>n infile > outfile #刪頂端1~n行 12/23 08:27
剛剛嘗試了一下您提供的三種方法，發現執行後log內容都被清空，但如果tail/awk不做redirection輸出到終端的內容又是正確的，推測可能跟原程式也在持續redirection到log有關，謝謝您的提議。
※ 編輯: icetofux (223.136.238.89 臺灣), 12/23/2021 09:21:20
7F：→ bitlife: 沒真的測試過僅提供想法,用stat測試fd 1,如果S_IFBLK顯示 12/23 12:35
8F：→ bitlife: 為block device(被輸出導向),就定期 lseek 到檔案開頭 12/23 12:35
9F：→ bitlife: 以上未經實際測試,可行性不敢保證 12/23 12:35
10F：→ bitlife: 更正,應該用truncate而非lseek 12/23 12:50
※ 編輯: icetofux (1.169.72.9 臺灣), 12/23/2021 20:03:10
11F：推 penut85420: 我記得鳥哥在講crontab的時候有提到類似的應用 12/24 07:05
12F：→ bitlife: 今早特地man了一下,必須再更正 XD 是ftruncate才對 12/24 09:54
13F：→ kenduest: 能夠用 logrotate 一般要配合程式可以收 SIGHUP 信號 12/24 17:08
14F：→ kenduest: 一般主要是可以重讀設定與關閉重開之前的 log 檔案 12/24 17:09
15F：→ kenduest: 這樣子就可以讓 log 的寫入重新開啟處理 12/24 17:09
16F：推 kenduest: 若是你用 > 這類重導要考慮問題就比較少 12/24 17:13
17F：→ kenduest: 因為 io 重導是 shell 幫你處理的，所以常見就是 12/24 17:13
18F：→ kenduest: 上面提到 truncate, 一般 shell像是 true > file.log 12/24 17:14