日志模块logging分析及使用-2

2023-12-10 17:33:20

1. 小总结

在上一篇博文中，我们介绍了logging模块的基本使用。logging模块是一个非常强大的日志库，它提供了丰富的功能，可以满足各种日志需求。

2. Logger对象的日志等级

每个Logger对象都有一个日志等级，它决定了该Logger对象将记录哪些级别的日志消息。日志等级从低到高依次为：NOTSET、DEBUG、INFO、WARNING、ERROR、CRITICAL。

默认情况下，Logger对象的日志等级是NOTSET，这意味着它将记录所有级别的日志消息。我们可以通过setLevel()方法来设置Logger对象的日志等级，例如：

logger = logging.getLogger('mylogger')
logger.setLevel(logging.INFO)

3. 使用多个处理器和多种格式化

Logger对象可以同时使用多个处理器，每个处理器可以将日志消息发送到不同的目的地，例如文件、控制台等。

我们可以通过addHandler()方法来为Logger对象添加处理器，例如：

logger = logging.getLogger('mylogger')

# 添加一个文件处理器
file_handler = logging.FileHandler('mylog.txt')
logger.addHandler(file_handler)

# 添加一个控制台处理器
stream_handler = logging.StreamHandler()
logger.addHandler(stream_handler)

处理器可以设置自己的格式化器，格式化器决定了日志消息的输出格式。我们可以通过setFormatter()方法为处理器设置格式化器，例如：

file_handler.setFormatter(logging.Formatter('%(asctime)s - %(name)s - %(levelname)s - %(message)s'))
stream_handler.setFormatter(logging.Formatter('%(levelname)s - %(message)s'))

4. 日志回滚

日志文件会随着时间的推移而不断增长，如果不对其进行管理，它可能会占用大量的磁盘空间。

我们可以通过日志回滚来管理日志文件的大小。日志回滚是指当日志文件达到一定的大小或时间后，将旧的日志文件删除或压缩，只保留最新的日志文件。

logging模块提供了两种日志回滚处理器：RotatingFileHandler和TimedRotatingFileHandler。

1. RotatingFileHandler

RotatingFileHandler可以根据日志文件的大小进行回滚。它会在日志文件达到一定的大小后，将旧的日志文件删除，只保留最新的日志文件。

RotatingFileHandler的构造函数如下：

RotatingFileHandler(filename, maxBytes=0, backupCount=0)

其中，filename是日志文件的名字，maxBytes是日志文件的大小限制，backupCount是保留的日志文件的数量。

2. TimedRotatingFileHandler

TimedRotatingFileHandler可以根据时间来进行日志回滚。它会在日志文件达到一定的时间后，将旧的日志文件删除，只保留最新的日志文件。

TimedRotatingFileHandler的构造函数如下：

TimedRotatingFileHandler(filename, when='h', interval=1, backupCount=0)

其中，filename是日志文件的名字，when是时间间隔的单位，可以是'S'（秒）、'M'（分钟）、'H'（小时）、'D'（天）、'W'（星期）、'midnight'（午夜）等，interval是时间间隔，backupCount是保留的日志文件的数量。

5. RotatingHandler存在的问题

RotatingHandler在使用时存在一些问题，例如：

当日志文件被删除或压缩后，如果新的日志消息到达，它可能会丢失。
当日志文件被删除或压缩后，如果需要查看旧的日志消息，它可能会无法访问。

为了解决这些问题，我们可以使用一种称为“存档”的技术。存档是指将旧的日志文件移动到另一个目录，以便它们可以被访问，但不会占用当前的磁盘空间。

我们可以通过以下方法来实现存档：

import logging

# 创建一个RotatingFileHandler
file_handler = logging.RotatingFileHandler('mylog.txt', maxBytes=1024*1024, backupCount=5)

# 创建一个存档目录
archive_dir = 'mylog_archive'
os.makedirs(archive_dir, exist_ok=True)

# 为RotatingFileHandler添加一个存档处理器
archive_handler = logging.FileHandler(os.path.join(archive_dir, 'mylog.txt'))
file_handler.addFilter(logging.Filter(postprocess=lambda record: record.levelno > logging.INFO))
file_handler.addHandler(archive_handler)

# 为Logger对象添加RotatingFileHandler
logger = logging.getLogger('mylogger')
logger.addHandler(file_handler)