首页 / 日志 / 基于logstash+elasticsearch+kibana的日志收集分析方案（Windows）

基于logstash+elasticsearch+kibana的日志收集分析方案（Windows）

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了基于logstash+elasticsearch+kibana的日志收集分析方案（Windows），小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1611字，纯文字阅读大概需要3分钟。

内容图文

一 方案背景

    通常，日志被分散的储存不同的设备上。如果你管理数十上百台服务器，你还在使用依次登录每台机器的传统方法查阅日志。这样是不是感觉很繁琐和效率低下。开源实时日志分析ELK平台能够完美的解决日志收集和日志检索、分析的问题，ELK就是指ElasticSearch、Logstash和Kiabana三个开源工具。
    因为ELK是可以跨平台部署，因此非常适用于多平台部署的应用。

二 环境准备

    1. 安装JDK1.8环境
    2. 下载ELK软件包

     分别解压下载的软件，elasticsearch，logstash，kibana 可以放在一个统一文件夹下


三 部署

     1. 配置 logstash

在logstash 文件夹的下 bin 目录 创建配置文件 logstash.conf , 内容如下： 

            
    
                
  1. 
                    
                        input {
                    
                
    2. 
                
  2. 
                    
                          # 以文件作为来源
                    
                
    3. 
                
  3. 
                    
                          file {
                    
                
    4. 
                
  4. 
                    
                              # 日志文件路径
                    
                
    5. 
                
  5. 
                    
                              path => "F:\test\dp.log"
                    
                
    6. 
                
  6. 
                    
                          }
                    
                
    7. 
                
  7. 
                    
                        }
                    
                
    8. 
                
  8. 
                    
                        filter {
                    
                
    9. 
                
  9. 
                    
                             #定义数据的格式，正则解析日志（根据实际需要对日志日志过滤、收集）
                    
                
    10. 
                
  10. 
                    
                             grok {
                    
                
    11. 
                
  11. 
                    
                        	     match => { "message" => "%{IPV4:clientIP}|%{GREEDYDATA:request}|%{NUMBER:duration}"}	  
                    
                
    12. 
                
  12. 
                    
                             }
                    
                
    13. 
                
  13. 
                    
                             #根据需要对数据的类型转换
                    
                
    14. 
                
  14. 
                    
                             mutate { convert => { "duration" => "integer" }}
                    
                
    15. 
                
  15. 
                    
                        }                   
                    
                
    16. 
                
  16. 
                    
                        # 定义输出 
                    
                
    17. 
                
  17. 
                    
                        output {
                    
                
    18. 
                
  18. 
                    
                          elasticsearch {
                    
                
    19. 
                
  19. 
                    
                        	  hosts => ["localhost:9200"]  #Elasticsearch 默认端口
                    
                
    20. 
                
  20. 
                    
                          }
                    
                
    21. 
                
  21. 
                    
                        }　　
                    
                
    22.
在bin目录下创建run.bat，写入一下脚本：
                
    
                    
  1. 
                        
                            logstash.bat -f logstash.conf
                        
                    
    2.
执行run.bat启动logstash。

2. 配置 Elasticsearch 

elasticsearch.bat即可启动。

    启动后浏览器访问  127.0.0.1:9200  ，出现以下的 json表示成功。

 

3.配置 kibana

Kibana 启动时 从 文件 kibana.yml 读取属性 。 默认设置配置Kibana运行 localhost:5601 。 要更改主机或端口号，或者连接到在其他机器上运行的Elasticsearch，需要更新 kibana.yml 文件。

kibana.bat启动Kibana。


四 测试

     1.创建Index     

     用浏览器打开http://localhost:5601/  系统会提示创建Index，可以按时间创建Index。在Discover选项卡上你会看到你刚刚在dp .log中输入的内容。
技术分享

 2. 检索日志

快速检索定位。
技术分享
 

3. 日志分析

    新建Visualize，选择Line（当然其他视图都可以）。然后选择数据源。
技术分享
 X轴选择时间，Y轴分别为访问接口的最大耗时和平均耗时。
技术分享
 创建Dashboard视图，可以将相关图标放在一个视图，方便分析。
技术分享
 










原文：http://www.cnblogs.com/kingleft/p/7682678.html

内容总结

以上是互联网集市为您收集整理的基于logstash+elasticsearch+kibana的日志收集分析方案（Windows）全部内容，希望文章能够帮你解决基于logstash+elasticsearch+kibana的日志收集分析方案（Windows）所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1193374.html

来源：【匿名】