使用python的logging模塊,會打印requests的日志,現(xiàn)在已經(jīng)設置了reqyests的日志級別為warning,在macos中生效了,但是服務器centos上依然會打印網(wǎng)絡請求的信息。
python3
// 請把代碼文本粘貼到下方(請勿用圖片代替代碼)
import logging
import datetime
import os
from threading import Thread
from logic.manager import LOG_PATH
import multiprocessing
def singleton(cls):
instances = {}
def getinstance(*args, **kwargs):
if cls not in instances:
instances[cls] = cls(*args, **kwargs)
return instances[cls]
return getinstance
@singleton
class LogHandler(object):
def __init__(self, task_log_id, pid, file_name):
self.log_queue = multiprocessing.Queue()
self.logger = logging.getLogger()
self.msg = ""
self.msg_list = list()
self.log_id = ''
self.set_formatter(task_log_id, pid, file_name)
self.run()
def set_formatter(self, task_log_id, pid, file_name):
"""
設置日志的輸出格式
:param task_log_id:
:param pid:
:param file_name:
:return:
"""
logging.getLogger("requests").setLevel(logging.WARNING)
logging.getLogger("urllib3").setLevel(logging.WARNING)
logging.getLogger("tornado").setLevel(logging.WARNING)
logging.getLogger("urllib").setLevel(logging.WARNING)
logging.getLogger("urllib2").setLevel(logging.WARNING)
today = str(datetime.date.today())
daily_log_path = os.path.join(LOG_PATH, today)
if not os.path.exists(daily_log_path):
os.makedirs(daily_log_path)
handler = logging.FileHandler(os.path.join(daily_log_path, file_name))
handler.setLevel(logging.DEBUG)
formatter = logging.Formatter(
"""LEVEL:%(levelname)s DATE:%(asctime)s PID:{0} taskLogId:{1} %(message)s""".format(pid, task_log_id))
handler.setFormatter(formatter)
self.logger.addHandler(handler)
self.logger.setLevel(logging.DEBUG)
logging.StreamHandler().setLevel(logging.WARNING)
def push(self, msg):
"""
push log layout message to self.msg_list
:param msg:
:return:
"""
self.msg_list.append(msg)
self.msg += msg + ' '
def pop(self):
"""
remove last log layout message from self.msg_list
:return:
"""
self.msg_list.pop()
self.msg = ''
for msg in self.msg_list:
self.msg += msg + ' '
def debug(self, msg):
self.joint_info(level='debug', msg=msg)
def warning(self, msg):
self.joint_info(level='warning', msg=msg)
def info(self, msg):
self.joint_info(level='info', msg=msg)
def error(self, msg):
self.joint_info(level='error', msg=msg)
def joint_info(self, level, msg):
info = {
'level': level,
'msg': self.msg + msg
}
self.log_queue.put(info)
def export_log(self):
"""
export log to file
:return:
"""
while True:
log_info = self.log_queue.get()
level = log_info['level']
msg = log_info['msg']
if 'jobDone' in msg:
break
getattr(self.logger, level)(msg)
# cs_log.send(log_id=self.log_id, )
def run(self):
td = Thread(target=self.export_log)
td.start()
LEVEL:DEBUG DATE:2018-08-14 14:29:53,755 PID:28841 taskLogId:28478b57-5f89-4406-b161-ec352ec01e8e STREAM b'IHDR' 16 13
LEVEL:DEBUG DATE:2018-08-14 14:29:53,755 PID:28841 taskLogId:28478b57-5f89-4406-b161-ec352ec01e8e STREAM b'IDAT' 41 8192
LEVEL:DEBUG DATE:2018-08-14 14:29:53,756 PID:28841 taskLogId:28478b57-5f89-4406-b161-ec352ec01e8e GET http://127.0.0.1:34726/session/49c9b09187892e9fa9ea19a2b7b4c727/element/0.18678801050348826-2/size {"sessionId": "49c9b09187892e9fa9ea19a2b7b4c727", "id": "0.18678801050348826-2"}
LEVEL:DEBUG DATE:2018-08-14 14:29:53,766 PID:28841 taskLogId:28478b57-5f89-4406-b161-ec352ec01e8e Finished Request
LEVEL:DEBUG DATE:2018-08-14 14:29:53,766 PID:28841 taskLogId:28478b57-5f89-4406-b161-ec352ec01e8e GET http://127.0.0.1:34726/session/49c9b09187892e9fa9ea19a2b7b4c727/element/0.18678801050348826-2/size {"sessionId": "49c9b09187892e9fa9ea19a2b7b4c727", "id": "0.18678801050348826-2"}
LEVEL:DEBUG DATE:2018-08-14 14:29:53,773 PID:28841 taskLogId:28478b57-5f89-4406-b161-ec352ec01e8e Finished Request
北大青鳥APTECH成立于1999年。依托北京大學優(yōu)質雄厚的教育資源和背景,秉承“教育改變生活”的發(fā)展理念,致力于培養(yǎng)中國IT技能型緊缺人才,是大數(shù)據(jù)專業(yè)的國家
達內教育集團成立于2002年,是一家由留學海歸創(chuàng)辦的高端職業(yè)教育培訓機構,是中國一站式人才培養(yǎng)平臺、一站式人才輸送平臺。2014年4月3日在美國成功上市,融資1
北大課工場是北京大學校辦產(chǎn)業(yè)為響應國家深化產(chǎn)教融合/校企合作的政策,積極推進“中國制造2025”,實現(xiàn)中華民族偉大復興的升級產(chǎn)業(yè)鏈。利用北京大學優(yōu)質教育資源及背
博為峰,中國職業(yè)人才培訓領域的先行者
曾工作于聯(lián)想擔任系統(tǒng)開發(fā)工程師,曾在博彥科技股份有限公司擔任項目經(jīng)理從事移動互聯(lián)網(wǎng)管理及研發(fā)工作,曾創(chuàng)辦藍懿科技有限責任公司從事總經(jīng)理職務負責iOS教學及管理工作。
浪潮集團項目經(jīng)理。精通Java與.NET 技術, 熟練的跨平臺面向對象開發(fā)經(jīng)驗,技術功底深厚。 授課風格 授課風格清新自然、條理清晰、主次分明、重點難點突出、引人入勝。
精通HTML5和CSS3;Javascript及主流js庫,具有快速界面開發(fā)的能力,對瀏覽器兼容性、前端性能優(yōu)化等有深入理解。精通網(wǎng)頁制作和網(wǎng)頁游戲開發(fā)。
具有10 年的Java 企業(yè)應用開發(fā)經(jīng)驗。曾經(jīng)歷任德國Software AG 技術顧問,美國Dachieve 系統(tǒng)架構師,美國AngelEngineers Inc. 系統(tǒng)架構師。