玩转mongodb（九）：通过log4jmongo来实现分布式系统的日志统一管理

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了玩转mongodb（九）：通过log4jmongo来实现分布式系统的日志统一管理，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含4318字，纯文字阅读大概需要7分钟。

内容图文

。二是因为它与大型的关系型数据库相比有很多优势，比如查询快速、bson存储结构利于扩展、免费等。

解决方案

整合mongodb和log4j

1、安装mongodb数据库，并在本地启动，默认端口是27017，详细请参考：玩转mongodb（一）：初识mongodb

2、新建一个maven（maven版本要求3.0以上）工程，选择maven-archetype-quickstart，工程名：log4j2mongo

3、在pom.xml文件中，添加log4j、log4mongo-java、mongo-java-driver三个依赖。具体代码如下：

 1 <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
 2   xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
 3   <modelVersion>4.0.0</modelVersion>
 4 
 5   <groupId>com.manyjar</groupId>
 6   <artifactId>log4j2mongo</artifactId>
 7   <version>0.0.1-SNAPSHOT</version>
 8   <packaging>jar</packaging>
 9 
10   <name>log4j2mongo</name>
11   <url>http://maven.apache.org</url>
12   
13   <properties>  
14     <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>  
15     <junit.version>3.8.1</junit.version>  
16     <log4j.version>1.2.17</log4j.version>  
17     <log4mongo.version>0.7.4</log4mongo.version>  
18     <mongo-java-driver.version>2.8.0</mongo-java-driver.version>  
19   </properties> 
20 
21   <dependencies>
22     <dependency>  
23       <groupId>junit</groupId>  
24       <artifactId>junit</artifactId>  
25       <version>${junit.version}</version>  
26       <scope>test</scope>  
27     </dependency>  
28   
29       <dependency>  
30           <groupId>log4j</groupId>  
31           <artifactId>log4j</artifactId>  
32           <version>${log4j.version}</version>  
33       </dependency>  
34   
35       <dependency>  
36           <groupId>org.log4mongo</groupId>  
37           <artifactId>log4mongo-java</artifactId>  
38           <version>${log4mongo.version}</version>  
39       </dependency>  
40   
41       <dependency>  
42           <groupId>org.mongodb</groupId>  
43           <artifactId>mongo-java-driver</artifactId>  
44           <version>${mongo-java-driver.version}</version>  
45       </dependency>
46   </dependencies>
47 </project>

pom.xml

4、在resources文件夹中，添加log4j.properties文件。文件中主要添加log4j对mongodb的适配器org.log4mongo.MongoDbAppender。这里的适配器是log4mongo-java这个jar包提供。mongodb数据库的ip：127.0.0.1，port：27017，库名：logs，集合名：log。具体配置如下：

 1 log4j.rootLogger=DEBUG,MongoDB
 2 log4j.appender.MongoDB=org.log4mongo.MongoDbAppender
 3 log4j.appender.MongoDB.databaseName=logs
 4 log4j.appender.MongoDB.collectionName=log
 5 log4j.appender.MongoDB.hostname=127.0.0.1
 6 log4j.appender.MongoDB.port=27017
 7    
 8 log4j.appender.stdout=org.apache.log4j.ConsoleAppender
 9 log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
10 log4j.appender.stdout.layout.ConversionPattern=%d{yyyy-MM-dd HH:mm:ss,SSS} %5p %c{1}:%L - %m%n

log4j.properties

5、在java文件夹中，com.manyjar.log4j2mongo这个包中，添加Main.java文件，观察文件中的代码可以发现，和我们平时用log4j来写日志一模一样，把日志流到mongodb这件事情，对业务开发的程序员完全透明。具体代码如下：

 1 package com.manyjar.log4j2mongo;
 2 
 3 import org.apache.log4j.Logger;
 4 
 5 import com.mongodb.BasicDBObject;
 6 import com.mongodb.DBObject;
 7 
 8 public class Main {
 9     
10     public static void main(String[] args) {
11         Logger logger = Logger.getLogger(Main.class);
12             
13             for (int i = 0; i < 10000000; i++) {
14                 DBObject bson = new BasicDBObject();
15                 bson.put("name", "ryan"+i);
16                 logger.debug(bson);
17             }
18     }
19 }

Main.java

6、步骤5中，我们执行了1000万次的日志插入，数据结构如下：

默认的数据量大小有10G：

这里，我们可以看到，日志的数据存储量相对不小。如果需要修改日志数据的存储结构，可以用log4mongo的源代码进行二次开发。

如果数据量过大，我们可以用TTL索引（过期自动删除）或固定集合大小两种方式来解决：

TTL索引:db.log_events.createIndex({"timestamp": 1},{expireAfterSeconds: 60*60*24*30}) #1个月后过期后删除

将log集合修改成固定大小集合：db.runCommand({"convertToCapped":"log",size:10000})。

玩转mongodb（九）：通过log4jmongo来实现分布式系统的日志统一管理

标签：mave   root   org   gif   存储结构   4.0   .com   project   group   

本文系统来源：http://www.cnblogs.com/zhouqinxiong/p/6822260.html

内容总结

以上是互联网集市为您收集整理的玩转mongodb（九）：通过log4jmongo来实现分布式系统的日志统一管理全部内容，希望文章能够帮你解决玩转mongodb（九）：通过log4jmongo来实现分布式系统的日志统一管理所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---