还不会Linux命令看日志？试试Kibana吧，可视化看日志！

柔情只为你懂 2022-10-27 12:12 150阅读 0赞

## 你知道的越多，不知道的就越多，业余的像一棵小草！ ##

你来，我们一起精进！你不来，我和你的竞争对手一起精进！

## 编辑：业余草 ##

## cnblogs.com/cjsblog/p/9476813.html ##

## 推荐：https://www.xttblog.com/?p=5151 ##

Kibana是一个开源的分析和可视化平台，设计用于和Elasticsearch一起工作。

你用Kibana来搜索，查看，并和存储在Elasticsearch索引中的数据进行交互。

你可以轻松地执行高级数据分析，并且以各种图标、表格和地图的形式可视化数据。

Kibana使得理解大量数据变得很容易。它简单的、基于浏览器的界面使你能够快速创建和共享动态仪表板，实时显示Elasticsearch查询的变化。

## **1. 安装Kibana** ##

![format_png][] img ![format_png 1][] img

## **2. Kibana配置** ##

https://www.elastic.co/guide/en/kibana/current/settings.html

## **3. 访问Kibana** ##

Kibana是一个Web应用程序，你可以通过5601来访问它。例如：localhost:5601 或者 http://YOURDOMAIN.com:5601

当访问Kibana时，默认情况下，Discover页面加载时选择了默认索引模式。时间过滤器设置为最近15分钟，搜索查询设置为match-all(\*)

### 3.1. 检查Kibana状态 ###

http://localhost:5601/status

![format_png 2][] img

或者 http://192.168.101.5:5601/api/status 返回JSON格式状态信息

## **4. 用Elasticsearch连接到Kibana** ##

在你开始用Kibana之前，你需要告诉Kibana你想探索哪个Elasticsearch索引。第一次访问Kibana是，系统会提示你定义一个索引模式以匹配一个或多个索引的名字。

（提示：默认情况下，Kibana连接允许在localhost上的Elasticsearch实例。为了连接到一个不同的Elasticsearch实例，修改kabana.yml中Elasticsearch的URL，然后重启Kibana。）

为了配置你想要用Kibana访问的Elasticsearch索引：

1、访问Kibana UI。例如，localhost:56011 或者 http://YOURDOMAIN.com:5601

2、指定一个索引模式来匹配一个或多个你的Elasticsearch索引。当你指定了你的索引模式以后，任何匹配到的索引都将被展示出来。

（画外音：\*匹配0个或多个字符；指定索引默认是为了匹配索引，确切的说是匹配索引名字）

3、点击“**Next Step**”以选择你想要用来执行基于时间比较的包含timestamp字段的索引。如果你的索引没有基于时间的数据，那么选择“**I don’t want to use the Time Filter**”选项。

4、点击“**Create index pattern**”按钮来添加索引模式。第一个索引模式自动配置为默认的索引默认，以后当你有多个索引模式的时候，你就可以选择将哪一个设为默认。（提示：Management > Index Patterns）

![format_png 3][] img ![format_png 4][] img ![format_png 5][] img

现在，Kibana已经连接到你的Elasticsearch数据。Kibana展示了一个只读的字段列表，这些字段是匹配到的这个索引配置的字段。

## **5. Discover** ##

你可以从Discover页面交互式的探索你的数据。你可以访问与所选择的索引默认匹配的每个索引中的每个文档。你可以提交查询请求，过滤搜索结构，并查看文档数据。你也可以看到匹配查询请求的文档数量，以及字段值统计信息。如果你选择的索引模式配置了time字段，则文档随时间的分布将显示在页面顶部的直方图中。

![format_png 6][] img ![format_png 7][] img

### 5.1. 设置时间过滤 ###

![format_png 8][] img ![format_png 9][] img ![format_png 10][] img

### 5.2. 搜索数据 ###

你可以在搜索框中输入查询条件来查询当前索引模式匹配的索引。在查询的时候，你可以使用Kibana标准的查询语言（基于Lucene的查询语法）或者完全基于JSON的Elasticsearch查询语言DSL。Kibana查询语言可以使用自动完成和简化的查询语法作为实验特性，您可以在查询栏的“选项”菜单下进行选择。

当你提交一个查询请求时，直方图、文档表和字段列表都会更新，以反映搜索结果。命中（匹配到的文档）总数会显示在工具栏中。文档表格中显示了前500个命中。默认情况下，按时间倒序排列，首先显示最新的文档。你可以通过点击“Time”列来逆转排序顺序。

![format_png 11][] img ![format_png 12][] img

#### **5.2.1. Lucene查询语法** ####

Kibana查询语言基于Lucene查询语法。下面是一些提示，可能会帮到你：

*  为了执行一个文本搜索，可以简单的输入一个文本字符串。例如，如果你想搜索web服务器的日志，你可以输入关键字"**safari**"，这样你就可以搜索到所有有关"safari"的字段
 *  为了搜索一个特定字段的特定值，可以用字段的名称作为前缀。例如，你输入"**status:200**"，将会找到所有status字段的值是200的文档
 *  为了搜索一个范围值，你可以用括号范围语法，**\[START\_VALUE TO END\_VALUE\]**。例如，为了找到状态码是4xx的文档，你可以输入**status:\[400 TO 499\]**
 *  为了指定更改复杂的查询条件，你可以用布尔操作符 **AND** , **OR** , 和 **NOT**。例如，为了找到状态码是4xx并且extension字段是php或者html的文档，你可以输入**status:\[400 TO 499\] AND (extension:php OR extension:html)**

![format_png 13][] img ![format_png 14][] img ![format_png 15][] img

#### **5.2.2. Kibana查询语法增强** ####

**新的更简单的语法**

如果你熟悉Kibana的旧Lucene查询语法，那么你应该对这种新的语法也不会陌生。基本原理保持不变，我们只是简单地改进了一些东西，使查询语言更易于使用。

response:200 将匹配response字段的值是200的文档

用引号引起来的一段字符串叫短语搜索。例如，message:"Quick brown fox" 将在message字段中搜索"quick brown fox"这个短语。如果没有引号，将会匹配到包含这些词的所有文档，而不管它们的顺序如何。这就意味着，会匹配到"Quick brown fox"，而不会匹配"quick fox brown"。（画外音：引号引起来作为一个整体）

查询解析器将不再基于空格进行分割。多个搜索项必须由明确的布尔运算符分隔。注意，布尔运算符不区分大小写。

在Lucene中，response:200 extension:php 等价于 response:200 and extension:php。这将匹配response字段值匹配200并且extenion字段值匹配php的文档。

如果我们把中间换成or，那么response:200 or extension:php将匹配response字段匹配200 或者 extension字段匹配php的文档。

默认情况下，and 比 or 具有更高优先级。

response:200 and extension:php or extension:css 将匹配response是200并且extension是php，或者匹配extension是css而response任意

括号可以改变这种优先级

response:200 and (extension:php or extension:css) 将匹配response是200并且extension是php或者css的文档

还有一种简写的方式：

response:(200 or 404) 将匹配response字段是200或404的文档。字符值也可以是多个，比如：tags:(success and info and security)

还可以用not

not response:200 将匹配response不是200的文档

response:200 and not (extension:php or extension:css) 将匹配response是200并且extension不是php也不是css的文档

范围检索和Lucene有一点点不同

代替 byte:>1000，我们用byte > 1000

>, >=, <, <= 都是有效的操作符

response:\* 将匹配所有存在response字段的文档

通配符查询也是可以的。machine.os:win\* 将匹配machine.os字段以win开头的文档，像"windows 7"和"windows 10"这样的值都会被匹配到。

通配符也允许我们一次搜索多个字段，例如，假设我们有machine.os和machine.os.keyword两个字段，我们想要搜索这两个字段都有"windows 10"，那么我们可以这样写"machine.os\*:windows 10"

#### **5.2.3. 刷新搜索结果** ####

![format_png 16][] img

### 5.3. 按字段过滤 ###

![format_png 17][] img ![format_png 18][] img

以上是控制列表显示哪些字段，还有一种方式是在查看文档数据的时候点那个像书一样的小图标

![format_png 19][] img

删除也是可以的

![format_png 20][] img

我们还可以编辑一个DSL查询语句，用于过滤筛选，例如

![format_png 21][] img

### 5.4. 查看文档数据 ###

![format_png 22][] img ![format_png 23][] img

### 5.5. 查看文档上下文 ###

![format_png 24][] img ![format_png 25][] img

### 5.6. 查看字段数据统计 ###

![format_png 26][]![format_png 27][]

## **6. Visualize** ##

Visualize使得你可以创建在你的Elasticsearch索引中的数据的可视化效果。然后，你可以构建dashboard来展示相关可视化。

Kibana可视化是基于Elasticsearch查询的。通过用一系列的Elasticsearch聚集来提取并处理你的数据，你可以创建图片来线上你需要了解的趋势、峰值和低点。

### 6.1. 创建一个可视化 ###

为了创建一个可视化的视图：

第1步：点击左侧导航条中的“**Visualize**”按钮

第2步：点击“Create new visualization”按钮或者\*\*加号(+)\*\*按钮

第3步：选择一个可视化类型

第4步：指定一个搜索查询来检索可视化数据

第5步：在可视化的构建器中选择Y轴的聚合操作。例如，sum，average，count等等

第6步：设置X轴

例如：

![format_png 28][] img ![format_png 29][] img ![format_png 30][] img ![format_png 31][]

更多请看这里

https://www.elastic.co/guide/en/kibana/current/createvis.html

https://www.elastic.co/guide/en/kibana/current/xy-chart.html

https://www.elastic.co/guide/en/kibana/current/visualize.html

![format_png 32][]

[format_png]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmozdlFYYW9JU2hvUlZDTkVsNkVLTXNXcDZ6TWt3UG1BNFdTSnRxdTRsZFB4OUtKWTNIaWN1VmdBLzY0MA?x-oss-process=image/format,png
[format_png 1]: /images/20221024/3070fcf88a5748bfa71437fb84804ade.png
[format_png 2]: /images/20221024/2e4cf5e4bf7d41559923f4e5d364ff2e.png
[format_png 3]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmp3V2pKdXhkNjVFWUpqR0xnbzlCamtSU0lFUFBtMmhiOGpEMXZMcThIb3cxMkdWM21sVE0xcEEvNjQw?x-oss-process=image/format,png
[format_png 4]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpaSjQ5MGU3QzZVbTlvRHozTG1kT2JFOWljYkNzOXFpY2JvR2ljNEdydk45TmFYaGIwODBBaWJCdndBLzY0MA?x-oss-process=image/format,png
[format_png 5]: /images/20221024/e5b64472353d4843bf46982c16d8d29c.png
[format_png 6]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpBWndydWRZQ0VHSkZvRnJwd3lHUkJxam1Ea1lpY1V6T3ppYkJNaWNPU2ljMHZkUmNaTUxIbGN1aEd3LzY0MA?x-oss-process=image/format,png
[format_png 7]: /images/20221024/5a914bee1d4448b386210340d1006cda.png
[format_png 8]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpkVFc5aWJhUVpuOFRwdjR4WEliZVlkbVFqMHJndTlXOER2aHowY0RSeGpnU2liZnVnM0Y4aG82Zy82NDA?x-oss-process=image/format,png
[format_png 9]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpqN1lTVGRjM0pxSThqV3FDbG1mNjM0YldKQ3ZVRkl6WEVpYU15NzU1V0NXaWJleE5od2dHQjNOdy82NDA?x-oss-process=image/format,png
[format_png 10]: /images/20221024/133aef2725884366bed86fe1258e6016.png
[format_png 11]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmoxcHVPWjkxWTZrYmZpYXJIb2hTeTdsNm9TUmhVOUx4cW04RWliQWxOa29YQXBrV2liV2JFUzNWMFEvNjQw?x-oss-process=image/format,png
[format_png 12]: /images/20221024/8af64117f2954602a8d865a73887b6ae.png
[format_png 13]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpNRnRIT1Y1WXNBM1JqcjB4bVZ6ZDZwdkxSZDNvNnFvZkh0Y2M3UHVlUVVHQ3RwZzdrdHJwaWJBLzY0MA?x-oss-process=image/format,png
[format_png 14]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmo0aWNpYm1MbGtUS0ljajc2dG5WbXNsT0pUeVM5WkVnWVBwbFB6MUFJNUVBNjA0STZaU3EyZHhIdy82NDA?x-oss-process=image/format,png
[format_png 15]: /images/20221024/75cf1bccc0184529b18562720accb8a2.png
[format_png 16]: /images/20221024/fbf032bf3a3b499882ef7dbe093277b3.png
[format_png 17]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpUc1IxSTJhRnJlcmlheEp1cFIwcEJsM0RZWkJZaWNjUk5uZmVoeHQzR2hiQzZzQUJReEtDMEVPdy82NDA?x-oss-process=image/format,png
[format_png 18]: /images/20221024/5627c5758cea4f90b1402c6692d96788.png
[format_png 19]: /images/20221024/5018c5bc2456458fbf0e4b0695282367.png
[format_png 20]: /images/20221024/d8c2adde868c4ece95b6077fec87d94b.png
[format_png 21]: /images/20221024/d09ad0c025f04a40bd1fe40f8687b796.png
[format_png 22]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpOOWxkUnlpY3BIaWNaaWNDUWNHUUZKZ0lBM2xPRG8xbmlhMWQzQ2lhcVQwelVCdXZXVWpXSG9nWnVTZy82NDA?x-oss-process=image/format,png
[format_png 23]: /images/20221024/fccaf07fc2fb4b68bcdcab1fa684d490.png
[format_png 24]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmo1dlJmNVRRTXpKTUFxTHpOaWNmaE1zeTFjWnRTb1Y3S1lLMGljcnZMUzRTM1V4UEU2dWljVGdlaWJBLzY0MA?x-oss-process=image/format,png
[format_png 25]: /images/20221024/33386978002148bda38cd707f363e5a1.png
[format_png 26]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpxaWJEemFSR0JXMjhhand3aWJTaWNvZFNOUFM3bzNmb1ZGU0ZNa0ttTkl1RDZOa2FsejZ0dXp4U3cvNjQw?x-oss-process=image/format,png
[format_png 27]: /images/20221024/f3227e15cda94c0abb4c2e5a03cf9248.png
[format_png 28]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpDeW1veEhLa1RRclNMY2FZYVB3VnVCVDlFcnlMTTFXSDdWNlRPcGljVWY0czY3QzlxUzd0aWNody82NDA?x-oss-process=image/format,png
[format_png 29]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpZblk3dHlsNmRtZU5xdUNNc0NwaWFpY0p4Z2QwalJsS2FXTFJOQlU1NG9mbkQwakQwWUhOYXFWZy82NDA?x-oss-process=image/format,png
[format_png 30]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X3BuZy9rbm1yTkhubUNMRmsyc2hlUkdrZG5LUmljOVZkMjRKTmpBS2ttMGNpYUl2U256SFFwcGljeDRzODVYOHRla3FpYVBvcTFxZnQzcG5aS2ZYMlc0WlZxZENSVlEvNjQw?x-oss-process=image/format,png
[format_png 31]: /images/20221024/c3cdd0c4af324c67945f97208041bf3a.png
[format_png 32]: /images/20221024/826b927499b3476b8527bfcab5b85ff1.png