ECS 上 Python Web 服务日志轮转实战:用 logging 让日志不再撑满磁盘
【摘要】 一、问题:日志一直在长在 ECS 上长期运行的 Python Web 服务,如果只用 print 输出日志,或者只往一个文件里写,日志文件会一直变大。磁盘被日志写满后,服务可能写不进日志,甚至无法正常启动;排查问题时,在一个几百兆的大文件里翻找也很费劲。 二、做法:按大小轮转标准库 logging 自带 RotatingFileHandler:写满指定大小就自动切出一个新文件,旧文件按序号...
一、问题:日志一直在长
在 ECS 上长期运行的 Python Web 服务,如果只用 print 输出日志,或者只往一个文件里写,日志文件会一直变大。磁盘被日志写满后,服务可能写不进日志,甚至无法正常启动;排查问题时,在一个几百兆的大文件里翻找也很费劲。
二、做法:按大小轮转
标准库 logging 自带 RotatingFileHandler:写满指定大小就自动切出一个新文件,旧文件按序号保留,超过保留份数自动删除。下面是 5MB 一份、最多保留 5 份的配置:
import logging
from logging.handlers import RotatingFileHandler
handler = RotatingFileHandler('app.log', maxBytes=5 * 1024 * 1024, backupCount=5, encoding='utf-8')
logging.basicConfig(level=logging.INFO, handlers=[handler, logging.StreamHandler()])
logger = logging.getLogger(__name__)
logger.info('服务已启动')
同时配了 StreamHandler,日志既写文件也输出到控制台,调试和线上排查都方便。
三、做法:按天轮转
如果希望每天一个日志文件,用 TimedRotatingFileHandler,when 设为 midnight 表示每天零点切分,backupCount 控制保留天数:
from logging.handlers import TimedRotatingFileHandler
handler = TimedRotatingFileHandler('app.log', when='midnight', backupCount=7, encoding='utf-8')
四、验证方法
- 先把 maxBytes 临时改小,例如改为 1024,启动服务并连续记录几十条日志;
- 观察是否生成了新的日志文件,旧文件是否按序号命名并保留;
- 确认无误后,把 maxBytes 改回 5MB,重新启动服务。
验证完记得把测试用的小阈值改回正常值,不要留在生产配置里。
五、注意事项
- 日志级别用 INFO 起步,调试语句不要长期留在生产日志里;
- 日志文件建议集中放到单独的目录里,不要和代码混在一起;
- 备份份数按磁盘空间设置,保留 5 到 7 份一般够用,磁盘紧张时先降份数再降单文件大小;
- 轮转只是治标,磁盘告警和定期清理也要配上。
六、小结
给长期运行的服务加上日志轮转只需十几行配置,却能避免日志撑满磁盘这个低级故障。按大小轮转适合请求量不稳定的服务,按天轮转适合每天日志量相对稳定的服务,两者可以按需选用。
【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)