詳解python logging日誌傳輸

阿新 • • 發佈：2020-07-02

1.生成日誌並通過http傳輸出去（通過HTTPHandler方式）：

#生成併發送日誌
import logging
from logging.handlers import HTTPHandler
import logging.config

def save():
  logger = logging.getLogger(__name__)
  # 生成一個log例項，如果括號為空則返回root logger
  hh = HTTPHandler(host='127.0.0.1:5000',url='/log',method='POST')
  #用HTTPHandler直接傳送日誌，而並不是寫檔案再傳檔案。
  logger.setLevel(logging.INFO)
  #設定日誌最低輸出級別為info
  logger.addHandler(hh)
  #新增Handler物件給記錄器（為logger新增的日誌處理器，可以自定義日誌處理器讓其輸出到其他地方）
  logger.info('存入600元') # 輸出日誌，內容為‘存入600元'
save()

2.用flask接收傳過來的日誌：

#flask接收日誌
from flask import Flask,request
app = Flask(__name__)



@app.route('/log',methods=['POST'])
def say_hello():
  #檢視傳過來的資料格式：
  print(request.mimetype)
  #HTTPHandler傳過來的是個form表單
  print(request.form.to_dict())
  return '<h1>Hello,Flask!</h1>'


if __name__ == '__main__':
  app.run()


輸出：
#這是傳過來的資料格式，是個form表單
application/x-www-form-urlencoded 

#這是form.to_dict解析出來的內容（直接解析成了字典）
{'name': '__main__','msg': '存入600元','args': '()','levelname': 'INFO','levelno': '20','pathname': 'C:/Users/huawei/Desktop/code/log/send_log.py','filename': 'send_log.py','module': 'send_log','exc_info': 'None','exc_text': 'None','stack_info': 'None','lineno': '15','funcName': 'save','created': '1593581146.172768','msecs': '172.76811599731445','relativeCreated': '176.5270233154297','thread': '13904','threadName': 'MainThread','processName': 'MainProcess','process': '3656'}

3.logging模組介紹

Python的logging模組提供了通用的日誌系統，熟練使用logging模組可以方便開發者開發第三方模組或者是自己的Python應用。同樣這個模組提供不同的日誌級別，並可以採用不同的方式記錄日誌，比如檔案，HTTP、GET/POST，SMTP，Socket等，甚至可以自己實現具體的日誌記錄方式。下文我將主要介紹如何使用檔案方式記錄log。

1.基本概念：

logging模組包括logger，handler，filter，formatter這四個基本概念。

logging模組與log4j的機制是一樣的，只是具體的實現細節不同。模組提供logger，handler，filter，formatter。

logger：提供日誌介面，供應用程式碼使用。logger最長用的操作有兩類：配置和傳送日誌訊息。可以通過logging.getLogger(name)獲取logger物件，如果不指定name則返回root物件，多次使用相同的name呼叫getLogger方法返回同一個logger物件。
handler：將日誌記錄（log record）傳送到合適的目的地（destination），比如檔案，socket等。一個logger物件可以通過addHandler方法新增0到多個handler，每個handler又可以定義不同日誌級別，以實現日誌分級過濾顯示。
filter：提供一種優雅的方式決定一個日誌記錄是否傳送到handler。
formatter：指定日誌記錄輸出的具體格式。formatter的構造方法需要兩個引數：訊息的格式字串和日期字串，這兩個引數都是可選的。

與log4j類似，logger，handler和日誌訊息的呼叫可以有具體的日誌級別（Level），只有在日誌訊息的級別大於logger和handler的級別。

import logging
logging.basicConfig(level=logging.DEBUG,format='%(asctime)s %(filename)s[line:%(lineno)d] %(levelname)s %(message)s',datefmt='%a,%d %b %Y %H:%M:%S',filename='myapp.log',filemode='w')
#################################################################################################
#定義一個StreamHandler，將INFO級別或更高的日誌資訊列印到標準錯誤，並將其新增到當前的日誌處理物件#
console = logging.StreamHandler()
console.setLevel(logging.INFO)
formatter = logging.Formatter('%(name)-12s: %(levelname)-8s %(message)s')
console.setFormatter(formatter)
logging.getLogger('').addHandler(console)
#################################################################################################
logging.debug('This is debug message')
logging.info('This is info message')
logging.warning('This is warning message')
 
螢幕上列印:
root : INFO This is info message
root : WARNING This is warning message
./myapp.log檔案中內容為:
Sun,24 May 2009 21:48:54 demo2.py[line:11] DEBUG This is debug message
Sun,24 May 2009 21:48:54 demo2.py[line:12] INFO This is info message
Sun,24 May 2009 21:48:54 demo2.py[line:13] WARNING This is warning message

2.主要用法：

logging.StreamHandler: 日誌輸出到流，可以是sys.stderr、sys.stdout或者檔案

logging.FileHandler: 日誌輸出到檔案

日誌回滾方式，實際使用時用RotatingFileHandler和TimedRotatingFileHandler

logging.handlers.BaseRotatingHandler

logging.handlers.RotatingFileHandler

logging.handlers.TimedRotatingFileHandler

logging.handlers.SocketHandler: 遠端輸出日誌到TCP/IP sockets

logging.handlers.DatagramHandler: 遠端輸出日誌到UDP sockets

logging.handlers.SMTPHandler: 遠端輸出日誌到郵件地址

logging.handlers.SysLogHandler: 日誌輸出到syslog

logging.handlers.NTEventLogHandler: 遠端輸出日誌到Windows NT/2000/XP的事件日誌

logging.handlers.MemoryHandler: 日誌輸出到記憶體中的制定buffer

logging.handlers.HTTPHandler: 通過"GET"或"POST"遠端輸出到HTTP伺服器

舉例：

import logging
import sys
# 獲取logger例項，如果引數為空則返回root logger
logger = logging.getLogger("AppName")
# 指定logger輸出格式
formatter = logging.Formatter('%(asctime)s %(levelname)-8s: %(message)s')
# 檔案日誌
file_handler = logging.FileHandler("test.log")
file_handler.setFormatter(formatter) # 可以通過setFormatter指定輸出格式
# 控制檯日誌
console_handler = logging.StreamHandler(sys.stdout)
console_handler.formatter = formatter # 也可以直接給formatter賦值
# 為logger新增的日誌處理器，可以自定義日誌處理器讓其輸出到其他地方
logger.addHandler(file_handler)
logger.addHandler(console_handler)
# 指定日誌的最低輸出級別，預設為WARN級別
logger.setLevel(logging.INFO)
# 輸出不同級別的log
logger.debug('this is debug info')
logger.info('this is information')
logger.warn('this is warning message')
logger.error('this is error message')
logger.fatal('this is fatal message,it is same as logger.critical')
logger.critical('this is critical message')
# 2016-10-08 21:59:19,493 INFO : this is information
# 2016-10-08 21:59:19,493 WARNING : this is warning message
# 2016-10-08 21:59:19,493 ERROR : this is error message
# 2016-10-08 21:59:19,493 CRITICAL: this is fatal message,it is same as logger.critical
# 2016-10-08 21:59:19,493 CRITICAL: this is critical message
# 移除一些日誌處理器
logger.removeHandler(file_handler)

4.概述：

python的logging模組（logging是執行緒安全的）給應用程式提供了標準的日誌資訊輸出介面。logging不僅支援把日誌輸出到檔案，還支援把日誌輸出到TCP/UDP伺服器，EMAIL伺服器，HTTP伺服器，UNIX的syslog系統等。在logging中主要有四個概念：logger、handler、filter和formatter，下面會分別介紹。

1.logger

Logger物件扮演了三重角色：

它給應用程式暴漏了幾個方法，以便應用程式能在執行時記錄日誌。

Logger物件根據日誌的級別或根據Filter物件，來決定記錄哪些日誌。

Logger物件負責把日誌資訊傳遞給相關的handler。

在Logger物件中，最常使用的方法分為兩類：configuration，message sending。 configuration方法包括：

setLevel(level)

setLevel(level)方法用來設定logger的日誌級別，如果日誌的級別低於setLevel(level)方法設定的值，那麼logger不會處理它。

logging模組內建的日誌級別有：

CRITICAL = 50
FATAL = CRITICAL
ERROR = 40
WARNING = 30
WARN = WARNING
INFO = 20
DEBUG = 10
NOTSET = 0 （數值越大級別越高）
addFilter(filter)
removeFilter(filter)
addHandler(handler)
removeHandler(handler)

message sending方法包括：

debug(log_message,[*args[,**kwargs]])

使用DEBUG級別，記錄log_message % args。