Python 如何限制輸出日志的大小
限制輸出日志的大小有多種方法,最優(yōu)雅的莫過(guò)于直接使用rotate機(jī)制,這種機(jī)制廣泛存在于各種編程語(yǔ)言,Python也不例外。其次,還可以使用mount掛載一個(gè)文件,作為日志存儲(chǔ)的位置,因?yàn)槲募笮∈怯邢薜?,所以日志的大小也被限制。還有可以用ulimit。
RotatingFileHandler
RotatingFileHandler是logging.handler的一種,在python docs中,這個(gè)類(lèi)的構(gòu)造函數(shù)示例用法如下
class logging.handlers.RotatingFileHandler(filename, mode=‘a(chǎn)', maxBytes=0, backupCount=0, encoding=None, delay=False)
參數(shù)
filename 輸出的文件名,如果使用Python 3.6或者更新版本的Python,filename可以是一個(gè)Path對(duì)象,Path對(duì)象可以讓你更優(yōu)雅地操作文件路徑,它是Python新增的特性。
mode 有"w"和"a",如果是w,那么每次輸出日志,都會(huì)覆蓋之前已經(jīng)存在的日志,從第一行開(kāi)始輸出,如果是a,會(huì)保留之前的日志,在之前的日志后輸出。
maxBytes 日志最大的大小,單位是字節(jié)
backupCount 如果日志大小達(dá)到maxBytes,會(huì)將舊日志加上.1或.2這樣的后綴,與filename區(qū)分,并在新的filename文件第一行開(kāi)始輸出。如果為1,則有最多有一個(gè)舊日志的備份。
encoding 字符編碼,常用的有utf-8
import logging
from logging.handlers import RotatingFileHandler
log = logging.getLogger()
handler = RotatingFileHandler("test", "a", 4096, 2, "utf-8")
log.addHandler(handler)
#更高級(jí)的logging特性
log.setLevel(logging.INFO) #設(shè)置過(guò)濾的日志等級(jí)
formatter = logging.Formatter("%(asctime)s %(levelname)s: %(message)")
log.setFormatter(formatter) #設(shè)置日志輸出的格式
Mount
先創(chuàng)建文件,并格式化成ext4文件系統(tǒng)
dd if=/dev/zero of=./logfs bs=1M count=4 mkfs.ext4 ./logfs
mkdir log sudo mount -t ext4 ./logfs ./log python test.py 2>./log/test.log
需要注意的是,這種方法可能有權(quán)限問(wèn)題,如果python程序權(quán)限不夠,需要更改掛載后log目錄的權(quán)限,使用sudo chmod 777 -R log
補(bǔ)充:
python控制日志級(jí)別輸出,可進(jìn)行全局限流,可控制控制臺(tái)輸出,可用于線(xiàn)上配置,進(jìn)行日志的簡(jiǎn)單記錄
# coding=utf-8
import logging
import datetime
import os
CONSOLE = True
LEVEL = "DEBUG"
# log/2020-09/2020-09-27_APPLICATION_NAME.log
APPLICATION_NAME = "APPLICATION_NAME"
# 只生成GBK的日志文件
class RecordLog:
def __init__(self):
"""
1、控制日志是否在控制臺(tái)中打印
2、控制日志輸出的級(jí)別
"""
# 設(shè)置是否控制臺(tái)打印
self._console = CONSOLE
# 等級(jí)字典
self._level_dict = {'DEBUG':1,'INFO':2,'WARNING':3,'ERROR':4,'CRITICAL':5}
# 設(shè)置當(dāng)前支持的日志等級(jí)
self._current_level_num = self._level_dict[LEVEL]
def get_log_file_name(self,):
"""
創(chuàng)建日志文件夾,創(chuàng)建或調(diào)用日志文件,日志存儲(chǔ)
:return: log/log_folder(月份)/log_file(每天的log)
"""
now = str(datetime.datetime.now())
log_folder = now[:7]
log_file = now[:10] + "_" + APPLICATION_NAME + ".log"
if os.path.exists("log/" + log_folder):
pass
else:
os.makedirs("log/" + log_folder)
return "log/" + log_folder + "/" + log_file
def log_content(self, content='開(kāi)始記錄',level="DEBUG"):
"""
記錄日志
:param content: 記錄的內(nèi)容
:param level: DEBUG, INFO, WARNING, ERROR, CRITICAL
:return:
"""
LOG_FILE_NAME = self.get_log_file_name()
now1 = datetime.datetime.now()
now_date = now1.strftime("%Y-%m-%d-%H:%M:%S")
text = " %s %s -- %s" % (level, now_date, content)
if level in ['DEBUG', 'INFO', 'WARNING', 'ERROR', 'CRITICAL']:
level_num = self._level_dict[level]
# 控制臺(tái)輸出
if self._console:
print(text)
logger = logging.getLogger()
fh = logging.FileHandler(filename=LOG_FILE_NAME, encoding="utf-8", mode="a")
# formatter = logging.Formatter("%(asctime)s - %(name)s-%(levelname)s %(message)s")
# fh.setFormatter(formatter)
logger.addHandler(fh)
# 設(shè)置日志等級(jí)
if "DEBUG" == level and level_num >= self._current_level_num:
logger.setLevel(logging.DEBUG)
elif "INFO" == level and level_num >= self._current_level_num:
logger.setLevel(logging.INFO)
elif "WARNING" == level and level_num >= self._current_level_num:
logger.setLevel(logging.WARNING)
elif "ERROR" == level and level_num >= self._current_level_num:
logger.setLevel(logging.ERROR)
else:
logger.setLevel(logging.CRITICAL)
logger.info(text)
else:
raise Exception('日志等級(jí)傳參錯(cuò)誤: %s ; 正確格式為:DEBUG, INFO, WARNING, ERROR, CRITICAL'%level)
if __name__ == '__main__':
#
log = RecordLog()
log.log_content(level='DEBUG')
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教。
相關(guān)文章
pymongo給mongodb創(chuàng)建索引的簡(jiǎn)單實(shí)現(xiàn)方法
這篇文章主要介紹了pymongo給mongodb創(chuàng)建索引的簡(jiǎn)單實(shí)現(xiàn)方法,涉及Python使用pymongo模塊操作mongodb的技巧,需要的朋友可以參考下2015-05-05
對(duì)python 操作solr索引數(shù)據(jù)的實(shí)例詳解
今天小編就為大家分享一篇對(duì)python 操作solr索引數(shù)據(jù)的實(shí)例詳解,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-12-12
python使用代理IP爬取貓眼電影專(zhuān)業(yè)評(píng)分?jǐn)?shù)據(jù)
在編寫(xiě)爬蟲(chóng)程序的過(guò)程中,IP封鎖無(wú)疑是一個(gè)常見(jiàn)且棘手的問(wèn)題,盡管網(wǎng)絡(luò)上存在大量的免費(fèi)IP代理網(wǎng)站,但其質(zhì)量往往參差不齊,令人堪憂(yōu),本篇文章中介紹一下如何使用Python的Requests庫(kù)和BeautifulSoup庫(kù)來(lái)抓取貓眼電影網(wǎng)站上的專(zhuān)業(yè)評(píng)分?jǐn)?shù)據(jù),需要的朋友可以參考下2024-03-03
深入了解python基于tkinter寫(xiě)的畫(huà)圖項(xiàng)目
這篇文章主要為大家介紹了python基于tkinter寫(xiě)的畫(huà)圖項(xiàng)目,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下,希望能夠給你帶來(lái)幫助2021-12-12
教你學(xué)會(huì)通過(guò)python的matplotlib庫(kù)繪圖
今天教大家如何學(xué)會(huì)通過(guò)python的matplotlib庫(kù)繪圖,文中有非常詳細(xì)的圖文解說(shuō)及代碼示例,對(duì)正在學(xué)習(xí)python的小伙伴們很有幫助,需要的朋友可以參考下2021-05-05
python mysql自增字段AUTO_INCREMENT值的修改方式
這篇文章主要介紹了python mysql自增字段AUTO_INCREMENT值的修改方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-05-05

