python将日志写入文件(超详细)_python日志输出到文件

python将日志写入文件(超详细)

1、需求

• 我们在训练模型的时候，有时候需要将训练日志输出到一个文件中，方便随时查看训练日志。

训练模型时候，训练日志在控制台展示，关闭控制台后日志会消失。这时，我们需要将控制台中的训练日志信息输出到一个指定文件中，方便我们随时查看。

将控制台中的日志信息输入到当前目录下的application.log文件中

2、方法：python logging模块

logging 是Python中非常强大且灵活的库，用于记录和跟踪应用程序运行时发生的事件。

在Python中，使用 logging 模块可以写入日志信息到指定文件。
1
2
3

2.1 basicConfig() 快速配置

• 导入logging模块
• 设置全局的日志格式和级别
• 获取logger
• 创建文件处理器，指定日志文件和日志级别（局部）
• 添加文件处理器到logger

import logging
import warnings

# 忽略所有 UserWarning 警告
warnings.filterwarnings("ignore", category=UserWarning)

# 1、设置全局的日志格式和级别
logging.basicConfig(format='%(asctime)s - %(levelname)s - %(name)s - %(message)s',
                    datefmt='%m/%d/%Y %H:%M:%S',
                    level=logging.INFO)

# 2、获取logger （给日志器起个名字 "__name__"）
logger = logging.getLogger(__name__)# __name__内置变量模块名称，轻松地识别出哪个模块产生了哪些日志消息（主程序模块）

# 3、创建文件处理器，指定日志文件和日志级别（局部）---文件输出FileHandle（输出到指定文件）
file_handler = logging.FileHandler('application.log') #指定日志文件名application.log，默认在当前目录下创建
file_handler.setLevel(logging.INFO) # 设置日志级别(只输出对应级别INFO的日志信息)
# 设置日志格式
file_handler.setFormatter(logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s', '%m/%d/%Y %H:%M:%S')) 

# 4、添加文件处理器到logger
logger.addHandler(file_handler)

# 训练模型的代码
epoch = 7  
# 记录日志信息
logger.info("Get better performance at epoch {}".format(epoch))

# 在主类中编写日志代码
# 判断当前程序是否为主程序，确保 main() 函数只在直接运行该Python文件时执行，如果文件被其他模块导入，则不执行 main()
# 主程序内置变量 __name__
if __name__ == "__main__":
    main()
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33

2.2 查看application.log日志文件

2.3、logging知识

• Loggers：应用程序中使用的接口，用于发送日志消息。它们来自logging.getLogger(name)，name是用于标识logger源的字符串
• Handlers：用于配置日志处理的目的地，如文件、控制台等。常用的有StreamHandler(控制台输出)和FileHandle(文件输出)
• Formatters：定义最终输出中日志记录的布局
• Filters：提供更细粒度的工具来进一步控制哪些日志记录将被输出

2.4、日志级别

debug,info,warning,error,critical
1

• DEBUG：详细信息，通常只有在诊断问题时才感兴趣。
• INFO：证明事情按预期工作(最常用)
• WARNING：某些还不是错误的事情的指示，但是应该注意的。
• ERROR：由于某些更严重的问题，软件已不能执行一些功能了
• CRITICAL：严重错误，表明程序已不能继续运行。

。