首先,具体采用什么技术作为集中式存储方案在99%的应用中应该来说并没有多大区别,最重要的是要定期清理不必要的日志,以及日志格式设计(也可以重写org.log4mongo.MongoDbPatternLayoutAppender.append())的在出现问题时能够方便地查找到所有的上下关联的信息、同时考虑搜索message时的性能。对于分布式系统而言尤其如此,其日志通常跨越多个服务器,确保每个环节的日志能够衔接起来才是日志服务器的关键,纯粹的将日志从分散存储归集到集中式存储除了增加系统不稳定性和成本外,没有任何益处。
因为我们初步采用的mongodb作为存储,故整理如下:
1、安装mongodb,可从https://www.mongodb.com/download-center#community下载对应的tgz版本,并解压;
2、使用nohup mongod --dbpath /data/$MONGODB_HOME/db & 启动mongo服务器;
3、maven增加log4mongo(https://github.com/log4mongo/log4mongo-java)依赖,如下:
org.log4mongo
log4mongo-java
0.7.4
4、log4j配置如下:
log4j.rootCategory=INFO, stdout, R, MongoDB
log4j.appender.MongoDB=org.log4mongo.MongoDbAppender
log4j.appender.MongoDB.databaseName=osm-route #建议应用名称
log4j.appender.MongoDB.collectionName=log #随意
log4j.appender.MongoDB.hostname=localhost
log4j.appender.MongoDB.port=27017
如果要配置主从,可按照如下配置:
log4j.appender.MongoDB.hostname=Server01 Server02
log4j.appender.MongoDB.port=27017 27017
根据实际的运行来看,稳定性不是特别好,建议使用logpool。