SpringBoot使用ELK日志收集

本文介绍SpringBoot应用配合ELK进行日志收集。

在之前写过一篇文章介绍ELK日志收集方案，感兴趣的可以去看一看，点击这里-----> 《ELK日志分析方案》。

这里在对ELK做一下简述，ELK是有Elastic公司的三个组件配合进行日志收集，分别是：

• ElasticSearch:用于存储日志信息。
• Logstash:用于收集、处理和转发日志信息。
• Kibana:提供可搜索的Web可视化界面。

当然，现在很多都配合着Beats进行使用，这里不做过多描述，感兴趣的可以查看官网，https://www.elastic.co/cn/products/beats，这里有很多对Beats的描述。

有关ELK安装笔者之前都写过关于Linux环境下的安装，如下：

• 《Linux安装Elasticsearch》
• 《Linux安装Logstash》
• 《Linux安装Kibana》

其他环境安装方式类似，基本上都是下载压缩包解压这一套流程。

这里以logback日志为例，新建项目，在项目中加入logstash-logback-encoder依赖，完整pom如代码清单所示。

    4.0.0
    
 org.springframework.boot
 spring-boot-starter-parent
 2.1.2.RELEASE
  
    
    com.dalaoyang
    springboot_logstash
    0.0.1-SNAPSHOT
    springboot_logstash
    springboot_logstash

    
 1.8
    

    
 
     org.springframework.boot
     spring-boot-starter-web
 

 
     org.springframework.boot
     spring-boot-devtools
     runtime
 
 
     org.springframework.boot
     spring-boot-starter-test
     test
 
 
     net.logstash.logback
     logstash-logback-encoder
     5.3
 

    


    
 
     
  org.springframework.boot
  spring-boot-maven-plugin
     
 
    

接下来新建一个logback-spring.xml文件，配置logback日志信息，注意这里配置的destination属性，输出的要和logstash配置的对应上，不然收集不上，内容如下：

    

    
 127.0.0.1:4560
 
 
     
  
      UTC
  
  
      
   {
   "logLevel": "%level",
   "serviceName": "${springAppName:-}",
   "pid": "${PID:-}",
   "thread": "%thread",
   "class": "%logger{40}",
   "rest": "%message"
   }
      
  
     
 
    

    
 
 
    

修改启动类，加入一个mvc方法，主要用于输出日志，如下所示。

package com.dalaoyang;

import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RestController;

@SpringBootApplication
@RestController
public class SpringbootLogstashApplication {

    Logger logger = LoggerFactory.getLogger(SpringbootLogstashApplication.class);

    @GetMapping("test")
    public void test(){
 logger.info("测试初始一些日志吧！");
    }

    public static void main(String[] args) {
 SpringApplication.run(SpringbootLogstashApplication.class, args);
    }

}

logstash配置如下，再次提醒一下，输入要与刚刚配置的对应上，输出为本地es：

input {
  tcp {
    mode => "server"
    host => "0.0.0.0"
    port => 4560
    codec => json_lines
  }
}
output {
  elasticsearch {
    hosts => "localhost:9200"
    index => "springboot-logstash-%{+YYYY.MM.dd}"
  }
}

打开kibana管理页面，添加刚刚创建的索引，如图所示。

然后进入发现页，选择刚刚的索引，如下所示。

接下来在浏览器多次访问刚刚在项目中输出日志的方法，查询控制台，如下所示。

然后在进入kibana查看，不光是日志内容，还有自定义的属性也显示出来了。

源码地址：https://gitee.com/dalaoyang/springboot_learn/tree/master/springboot_logstash