Logstash

谁践踏了优雅 2022-11-02 03:58 166阅读 0赞

# Logstash #

## 简介 ##

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70]  
用途：  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 1]

## 部署安装 ##

![在这里插入图片描述][20210225002021186.png]

#检查jdk环境，要求jdk1.8+
    java -version
    #解压安装包
    tar -xvf logstash-6.5.4.tar.gz
    #第一个logstash示例
    bin/logstash -e 'input { stdin { } } output { stdout {} }'

执行效果如下：  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 2]

## 配置详解 ##

Logstash的配置有三部分，如下：

nput { #输入
    stdin { ... } #标准输入
    }
    filter { #过滤，对数据进行分割、截取等处理
     ...
    }
    output { #输出
    stdout { ... } #标准输出
    }

### 输入 ###

*  采集各种样式、大小和来源的数据，数据往往以各种各样的形式，或分散或集中地存在于很多系统中。
 *  Logstash 支持各种输入选择 ，可以在同一时间从众多常用来源捕捉事件。能够以连续的流式传输方式，轻松地从您的日志、指标、Web 应用、数据存储以及各种 AWS 服务采集数据。  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 3]

### 过滤 ###

*  实时解析和转换数据
 *  数据从源传输到存储库的过程中，Logstash 过滤器能够解析各个事件，识别已命名的字段以构建结构，并将它们转换成通用格式，以便更轻松、更快速地分析和实现商业价值。  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 4]

### 输出 ###

Logstash 提供众多输出选择，您可以将数据发送到您要指定的地方，并且能够灵活地解锁众多下游用例。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 5]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70]: /images/20221024/3667b8d4a38e449d9522ff579e738d7c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 1]: /images/20221024/134f03ec7eed4e78a136a58742967b7b.png
[20210225002021186.png]: /images/20221024/e72f3f049fe04641b6a91f9f0be0f624.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 2]: /images/20221024/cbba232e3c3747e587062084334c14b3.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 3]: /images/20221024/dc33fccde59e41c8913867426ab2099f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 4]: /images/20221024/d1293c47d9ff482c8c32b5c103aa4b71.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzMTkzMzg2_size_16_color_FFFFFF_t_70 5]: /images/20221024/b82312eef03046a28b85c95f990eea24.png