python - 在 open() 中处理 logrotate

Question

我正在使用以下函数逐行跟踪和处理日志文件:

def tail(f):
    f.seek(0,2)
    while True:
        line = f.readline()
        if not line:
            time.sleep(0.1)
            continue
        yield line

with open("/var/log/some.log") as f:
    for line in tail(f):
    ...

当 logrotate 旋转文件时，该函数卡在最后一行。我猜 logrotate 移动文件并创建一个新文件，让程序仍在等待旧文件的行。

处理此问题的好方法是什么 - 发生旋转时重新打开文件？

Answer 1

标准的常用方法是告诉 logrotate 将 HUP 信号发送到处理日志的服务/程序。

在 logrotate 配置中，这是通过 postrotate 脚本完成的:

   postrotate
       /usr/bin/killall -HUP your_process
   endscript

然后在你的 python 程序中，你必须处理信号 HUP。您在 python's signal doc 中有一个示例.你会想要处理 signal.SIGHUP
另一种不太标准的方法是将 inode 编号与(可能)新 inode 编号进行比较。如果这些数字不同，那么您就知道文件已更改，您需要重新打开它。

我试过这样的事情，它似乎工作:

import os
import time

logname = "logfile"
logfile = open(logname, "r")

def tail(f):
    f.seek(0,2)
    inode = os.fstat(f.fileno()).st_ino

    while True:
        line = f.readline()
        if not line:
            time.sleep(0.1)
            if os.stat(logname).st_ino != inode:
                f.close()
                f = open(logname, 'r')
                inode = os.fstat(f.fileno()).st_ino
            continue
        yield line

for line in tail(logfile):
    ...