项目基于node开发,为满足日志记录的需要,使用了log4js做为日志管理工具,当前的使用版本为4.1.0 。
先说具体需求,当前项目使用的是express框架,大概想法是,能够记录常规日志,并且剥离错误日志单独记录到文件,日志文件按文件大小或日期分割,支持日志的自动压缩。
记录一下当前的配置方案以及了解到的一些概念,具体实现代码参见文末。
log4js.configure() 是日志的配置入口。在configure配置项中,最为常用的是appenders和categories属性。了解更多配置项详见API。
appenders可以理解为是对各种日志输出形式的定义,而categories决定了在某种类型输出下调用哪些的appender。appenders和categories都至少需要一个配置,否则将会抛出异常。大概的配置像这样:
var log4js = require('log4js');
log4js.configure({
appenders: {
'out': { type: 'console' },
'err': { type: 'stderr' }
},
categories: {
default: { appenders: ['out'], level: 'INFO' },
err: { appenders: ['err'], level: 'ERROR' }
});
var logger = log4js.getLogger(); // 当不传参或找不到对应 category时,默认使用default的配置
var errLogger = log4js.getLogger('err');
// 手动输出
logger.info('This is a message from INFO.');
errLogger.info('This is a message from INFO.');
errLogger.error('This is a message from ERROR.');
而控制台的输出大概会像这样:
[2019-03-31T23:17:04.254] [INFO] default - This is a message from INFO.
[2019-03-31T23:17:04.254] [ERROR] err - This is a message from ERROR.
appenders定义日志输出形式,appender中的type决定了选用何种的日志形式,如‘console’、‘stderr’都会将日志输出到node的控制台,而dateFile、file等等则会将日志写入到日志文件。
categories定义了日志输出类别,在何种类别下使用哪些appender,它拥有两个属性,appenders和level。appenders支持传入一个或多个appender,level决定过滤的允许输出的日志级别。
log4js默认的日志级别如下:
ALL < TRACE < DEBUG < INFO < WARN < ERROR < FATAL < MARK < OFF
当指定level为INFO时,只允许输出INFO级别以上的日志,WARN、ERROR都会被记录,但是TRACE和DEBUG不会。这也就是为什么,手动输出的三条日志,只打印两条的原因。
log4js.getLogger([category]) 允许接收一个字符串,表示使用category类型,如果不传参,或者找不到对应的category,将会使用默认配置即default。
log4js支持多种输出形式,打印到控制台、输出到文件,传输到服务器,也可以以邮件形式发送日志。
直接支持的形式:
categoryFilter、console、dateFile、file、fileSync、logLevelFilter、multiFile、multiprocess、recording、stderr、stdout、tcp、tcp-server
支持但需要额外插件的形式:
gelf、hipchat、logFaces-HTTP、logFaces-UDP、loggly、logstashHTTP、logstashUDP、mailgun、rabbitmq、redis、slack、smtp
log4js.configure({
appenders: {
infoLogs: {
type: 'file',
filename: 'logs/info/file.log',
maxLogSize: 10485760, // 10mb,日志文件大小,超过该size则自动创建新的日志文件
backups: 20, // 仅保留最新的20个日志文件
compress: true // 超过maxLogSize,压缩代码
}
},
categories: {
default: { appenders: [ 'infoLogs' ], level: 'info' }
}
});
log4js.configure({
appenders: {
infoLogs: {
type: 'dateFile',
filename: 'logs/',
backups:5, // 仅保留最新的五个日志文件
pattern: ".yyyy-MM-dd", // 用于确定何时滚动日志的模式
alwaysIncludePattern: true,
compress: true
}
},
categories: {
default: { appenders: [ 'infoLogs' ], level: 'info' }
}
});
pattern,默认为.yyyy-MM-dd, 用于确定何时滚动日志的模式,如果.yyyy-MM-dd-hh则以小时为单位滚动日志。格式:.yyyy-MM-dd-hh:mm:ss.log
将日志输出到控制台,需要注意的一点是,大量日志写入控制台可能会使应用占用大量内存,可以考虑使用stdout。
log4js.configure({
appenders: { console: { type: 'console' } },
categories: { default: { appenders: [ 'console' ], level: 'info' } }
});
日志过滤器,当需要在一堆日志中特殊处理某特定级别日志时,会比较有用。官方示例如下:
log4js.configure({
appenders: {
everything: {
type: 'file',
filename: 'all-the-logs.log'
},
emergencies: {
type: 'file',
filename: 'panic-now.log'
},
just-errors: {
type: 'logLevelFilter',
appender: 'emergencies',
level: 'error'
}
},
categories: {
default: { appenders: ['just-errors', 'everything' ], level: 'debug' }
}
});
在此示例中,‘ just-errors’会过滤得到ERROR以上级别的日志,并使用emergencies appender,单独将错误日志记录到panic-now.log文件中。
logLevelFilter可以过滤某一区间的日志,当你同时定义了level和maxLevel的话。maxLevel的默认值为FATAL,也就是最高级别。
请求默认的输出格式
[2019-04-01T11:28:38.696] [INFO] default - ::1 - - "GET / HTTP/1.1" 304 - "" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"
[2019-04-01T11:28:39.169] [INFO] default - ::1 - - "GET /favicon.ico HTTP/1.1" 404 1062 "http://localhost:3000/" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"
layout可以用来自定义日志的输出格式,参见layouts。
当前项目的需求是,记录常规日志,剥离错误日志单独记录,日志文件按文件大小或日期回滚,支持日志的压缩。由于项目基于express,所以参考了官方示例(Connect / Express Logger),根据实际需求,调整配置如下:
var log4js = require('log4js');
...
log4js.configure({
appenders: {
infoLogs: {
type: 'file',
filename: 'logs/info/file.log',
maxLogSize: 10485760, // 10mb,日志文件大小,超过该size则自动创建新的日志文件
backups: 20, // 仅保留最新的20个日志文件
compress: true // 超过maxLogSize,压缩代码
},
errorLogs: {
type: 'file',
filename: 'logs/error/file.log',
maxLogSize: 10485760,
backups: 20,
compress: true
},
justErrors: {
type: 'logLevelFilter', // 过滤指定level的文件
appender: 'errorLogs', // appender
level: 'error' // 过滤得到error以上的日志
},
console: {type: 'console'}
},
categories: {
default: { appenders: ['console', 'justErrors', 'infoLogs'], level: 'info' },
err: { appenders: ['errorLogs'], level: 'error' },
}
});
var logger = log4js.getLogger();
app.use(log4js.connectLogger(logger , { level: 'info' }));
...